Добрый день
Необходим опытный человек, умеющий парсить сайты.
Задание:
1) Сайт streeteasy.com
2) Регион: NYC
3) Нужны все данные по объектам. Выгрузка в .csv файле
4) Картинки отдельных архивом. В выгрузке поле должно быть, где через ";" перечислены картинки
На выходе нужен файл с результатами и программа, чтобы через какое-то время самостоятельно можно было запустить и получить свежие данные.
Вопросы:
1) На чем будете писать программу? Идеально C#, но можно и Scrapy/Python
2) Как вы решите проблему нагрузки и блокировки (потенциально) со стороны сервера?
3) Делали ли вы подобные вещи ранее?
Укажите ключевое слово "розовая пантера" и я пойму, что вы не бот.
Опубликован 06.07.2015 в 11:36