Андрей АВ

отзовитесь за подробностями, кто умеет.

Парсер должен уметь брать из заранее подготовленного списка текст, вставлять его в поле поиска в приложениях, активировать поиск, выполнять навигацию по результатам поиска (прокручивать экран вверх-вниз, влево-вправо для подгрузки результатов), заходить в результаты и забирать из них данные (определенные или все).
Подробности и примеры обсуждаются с кандидатами.

Есть несколько сайтов (некоторые на кириллических доменах, если это будет иметь значение), для каждого из них есть свой баннер.
Сайты на шаред хостинге, линукс
Есть база email адресов, по которым будет идти рассылка.
Каждому получателю будет отправляться ссылка, содержащая его id.
Необходимо отлавливать переход получателя по ссылке из письма и в зависимости от его id показывать ему определенную цепочку баннеров
Например – получатель по ссылке из письма переходит на предложенный сайт. На сайте подгружаются определенные баннеры (один или несколько).
Получатель посмотрит сайт, возможно перейдет по баннеру на следующий сайт.
Здесь его снова надо отловить и снова показать определенные баннеры (один или несколько).
И так далее.

Переходы по сайтам, действия на сайтах (нажатия, пролистывания и т.п.) необходимо писать в БД.
Также писать в БД и куки
БД mysql.
БД готова, кроме части про куки (мне не совсем понятно, какие данные можно брать из куки, но очень хочется – необходима консультация).

Задание не архисрочное, так что если кто может, но сейчас занят, все равно отзовитесь.
Только безопасная сделка.

Необходимо данные (с учетом их атрибутов и т.д.) из dwg/dxf переносить в БД
А также необходимо из БД данные переносить в dwg/dxf и автоматически строить по ним чертежи либо подставлять в существующие чертежи.
Подробнее – при обсуждении.

Всем привет! Парсер должен:
1. Уметь в режиме расширенного поиска на сайте zakupki.gov.ru задавать:
- закон
- цену контракта
- дату размещения заказа
- субъект РФ
- этап закупки
2. Иметь настройки последовательности поиска и ограничений.
3. Вести историю поисковых запросов

Пример.
1. Задаем парсеру параметры поиска:
- закон – 44-ФЗ 223-ФЗ 94-ФЗ
- цена – от 1000000 до 2000000
- дата размещения – с 15.01.2018 по 15.01.2018
- субъект – Адыгея
- этап закупки – закупка завершена
2. Задаем парсеру последовательность поиска и ограничения:
- при отработке результатов поиска изменять дату на х дней назад (или вперед).
- ограничить период поиска, например, с 2017 по 2018 г
- при окончании поиска в заданном периоде (например, с 2017 по 2018 г) начать поиск заново, но субъект РФ заменить на следующий по списку (т.е. после Адыгеи будет Алтай)
- при окончании поиска по всем регионам начать поиск сначала, но изменить цену контракта на х рублей меньше (или больше) (например на 500000 р, т.е. вместо с 1000000 по 2000000 станет с 500000 по 1000000)
- этап закупки – не менять
- сохранять результаты в новый файл или продолжать в предыдущий

Что ищет парсер:
1. Заходит в каждую закупку из найденных и берет название закупки, ссылку на нее, название заказчика, его адрес, инн и огрн, эл.почту, телефон (все разичающиеся эл.почты и телефоны на странице)
Причем эл.почта и телефон заказчика также надо брать переходя по ссылке, вшитой в наименование заказчика – зачастую они отличаются от приведнных на странице заказа.
Нашел два вида страниц заказчиков:
первая – zakupki.gov.ru/223/ppa/pu...
здесь контактные данные срау есть
вторая – zakupki.gov.ru/epz/organi...
здесь контактные данные надо брать во вкладке "дополнительная информация"
Парсер должен отслеживать ссылки страниц заказчиков, чтобы не заходить в них каждый раз, а только в первый.

2. У подрядчиков ищем также – названия, адреса, инн и огрн, эл.почту, телефоны

Я нашел два вида страниц закупок с разной структурой:
вот первая:
zakupki.gov.ru/epz/order/...
где данные подрядчиков находятся так – выбрать вкладку "РЕЗУЛЬТАТЫ ОПРЕДЕЛЕНИЯ ПОСТАВЩИКА", в ней в разделе "СВЕДЕНИЯ О КОНТРАКТЕ ИЗ РЕЕСТРА КОНТРАКТОВ" переходить поочередно по ссылкам, по которым открываются "Карточки контрактов"
ссылки на контракты могут быть спрятаны, как например здесь zakupki.gov.ru/epz/order/...

или вот другая структура страницы закупки:
zakupki.gov.ru/223/purcha...
где данные подрядчиков находятся так – выбрать вкладку "протоколы", в ней выбрать нужный протокол (если пытается загрузиться в виде файла, то игнорировать), в протоколе выбрать вкладку "список заявок", где под спойлерами будут заявки – открываем каждую, берем данные

сохранять данные в эксель в виде:
эл.почта подрядчика-телефон подрядчика-инн подрядчика-название подрядчика-номер контракта-ссылка на контракт-дальше все остальное...