Всем привет!
Задача разработать парсер каталога товаров СберМаркет.
Функциональные требования:
1. Передаем списко категорий, на выходе список карточек товаров с соотвествиям по категориям и список вложенных категорий
2. В записи о товаре нужно сохранить все поля из карточки (если есть ссылки сохранить их тоже)
3. Функция передаем список товаров, парсер лезет на них и обновляет цену и количество
4. Сделать обход блокировки СберМаркета если она есть (Настройка частоты парсинга в Скрапи или использование разных серверов)
Технические требования:
* Использовать Python 3 + Scrapy.org
* Качественный и легко поддерживаемый код, хорошая архитектура
* Складывание данных в Mongo DB
Более подробное ТЗ с примерами по ссылке: