Добрый день,
Задача по парсингу в 2 этапа, заключается в следующем:
1. Этап 1: необходимо последовательно спарсить поисковую выдачу google по 2033 запросам и сформировать файл из 200 первых ссылок в поисковой выдачи по каждому запросу.
Пример: Берем запрос 2000 Calorie Diet, сохраняем ссылки на документы с первых 20 страниц выдачи (т.е. первые 200 результатов).
Если есть возможность парсить по Гео – предпочтительно США.
2. В получившемся файле (ориентировочно 40660 ссылок) удаляем дубликаты
3. Парсим урлы на наличие кода контекстной рекламы от Google на странице (Google Adsense). Пример кода предоставлю.
Опубликован 09.01.2020 в 21:35