Скачивание файлов по поиску янденкса: Портфолио фрилансера Михаил Синегубов 07.06.2018, работа №1 - FL.RU
К списку работ
Михаил Синегубов
Михаил Синегубов

Скачивание файлов по поиску янденкса

image
скачано 26,4 млн уникальных документов по результатам парсинга поиска Яндекса. Для получения ссылок на файлы обработано 11,8 млн поисковых запросов. Для контроля уникальности файлов использовались SHA1 хеши скачанных документов.