Ищу Nest.js разрабочика в помощь текущей команде разработки для реализации собственного spy-сервиса.
Обязанности:
Реализация скреперов (парсеров) рекламных объявлений из рекламных и социальных сетей.
Требования:
Typescript/Javascript, продолжительный опыт разработки сложных проектов в команде из нескольких бекенд разработчиков;
Знание фреймворков NestJs, Playwright ;
Знание предметной области - parsing/scrapping/crawling вебсайтов;
Опыт разработки сложных парсеров и желание заниматься этой задачей долгий срок;
Нестандартное мышление в плане обхода постоянно обновляющихся методов защит от парсеров на сайтах;
Знание rabbitMQ;
Знание docker.
Будет плюсом:
Опыт работы с web scraping - реклама, маркетплейсы и т.д;
Понимание как работают рекламные сети / web push уведомления / акцион рекламы ФБ;
Понимание системы запуска мониторинга и скейлинга большого количества процессов на ограниченных ресурсах;
Опыт создания сложных схем бд и индексов ElasticSearch / Mongo для большого количества данных.