Результатом работы парсера должен быть csv файл с характеристиками товара а так же артикул и название производителя и ссылка на картинку товара. Если картинок не одна то несколько ссылок. Название файла с картинкой должно совпадать с артикулом. Так же в файле csv должа присутствовать категория к которой относится товар (категории).
Предусмотреть возможность поискать изменений на сайте чтобы не парсить все (если уже месяц назад было спарсено), а только изменения.
Так же предосмотреть возможность отметить парсить картинки или нет – за частую картинки могут быть ненужны а нужна только информация (описание товара).
Парсер должен быть многопоточным с возможностью устанавливать число потоков
Опубликован 26.05.2014 в 19:51