1. Есть исходные данные – список ключевиков в формате txt
2. Парсер берет ключевик по одному и делает по нему запрос в системе advse.ru, после чего система выдает список сайтов –
3. Далее надо нажать на "Хочу получить весь список" –
, чтобы система перешла на другую страницу
4. На этой странице нужно нажать "РАСКРЫТЬ СПИСОК" –
, чтобы раскрылись все доступные домены –
5. Эти домены нужно спарсить в итоговый txt файл. Должен быть выбор двух форматов вывода на выбор – просто списком домены в txt или формат с ключами (можно реализовать просто простановкой чек-бокса "Выводить в формате с ключами"):
ключевик 1; domen1.ru
.....
ключевик 1; domen15.ru
....
....
....
ключевик 100; domen1001.ru
....
ключевик 100; domen1015.ru
6. После этого берется следующая строчка из списка ключевиков и по ней также собирается информация
Приветствуется многопоточность. Нужна шкала завершения прогресса (например, считается количество пропарсенных фраз к количеству всех фраз). По завершении парсинга должен быть информер – "Парсинг завершен". Примерный интерфейс софта –
.
Какую-то фичу нужно предусмотреть на случай отвалившегося инета или рухнувшего адвсе при длительном парсинге. Чтобы заново не перепаршивать, а автоматом или вручную легко с нужной позиции запустить, когда все заработает. И чтобы при этом не потерялись данные о доменах, которые рекламируются по ключу, на котором все рухнуло и отвалилось.
При подаче заявки ОБЯЗАТЕЛЬНО укажите срок и стоимость исполнения, без этих данных заявки идут сразу в отказ.