Многопоточный чекер доменов в поисковой системе Yandex (Python)
Скрипт производит проверку доменов в Yandex по следующим показателям:
1) ТИЦ домена;
2) Склейка сайта с другими доменами;
3) Количество проиндексированных страниц
Возможности:
- проверка доменов из файла по списку;- многопоточность;- поддержка прокси с автоматической загрузкой из указанного url, либо файла;- автоматическая проверка прокси на валидность;- сохранение результатов в CSV файл;- подробное логирование процесса выполнения;- автоматическая генерация UserAgent для каждого запроса;- для гибкой настройки служит удобный и понятный конфигурационный ini-файл.
https://github.com/artempy/check_domains