--> -->
Boris_Kolupaev Борис Колупаев [Boris_Kolupaev]
Предыдущая работа

Google Art Project: Парсинг работ художников из открытых источников / Парсинг, перенос данных, ZennoPoster

  
Просмотров: 5
Дата добавления: 20.07.15 в 21:35
Дата обновления: 10.02.20 в 21:49
По заказу клиенты был написан парсер и получены из открытых источников изображения из проекта Google Art Project.

Было получено 20916 изображений (103 ГБайта), которые в последствии были рассортированы по 4895 категориям с фамилиями художников.

Разработка парсера заняла менее 1 часа, скачивание данных заняло 6 часов, архивация и загрузка в облако Mail.Ru заказчика – 10 часов.

Работа системы неотличима от работы реального человека. Это дает возможность получать результаты, которые недоступны другим парсерам/автоматизаторам, а также значительно затрудняют задачу по блокировке. Дополнительно возможна работа парсера через прокси-сервера с проверкой прозрачности.
Следующая работа
Google Art Project: Парсинг работ художников из открытых источников / Парсинг, перенос данных, ZennoPoster
Поделиться: