Цель проекта.
Для доски объявлений kv****.net для увеличения ссылочной массы и привлечения клиентов требуется перепостинг объявлений с досок avito и olx.
Что реализовано (наиболее значимые пункты).
1. Парсинг всех категорий и под категорий.
2. Сопоставление названий категорий сайта донора с конечным сайтом. Конечный сайт имеет отличительные названия в категориях.
3. Проверка объявлений сайтов доноров на наличие фото. Объявления без фото и определенного минимального разрешения - не обрабатывались.
4. Полный сбор текстовой и контактной информации объявлений доноров.
5. Черный список для уже опубликованных объявлений, для избежания повторных публикаций.
6. Настройка плавности постинга объявлений с учетом часовых поясов.
7. Равномерность постинга - во избежании бана от поисковых систем.
8. Обход Captca во время постинга.
9. Сбор и хранение информации в базе-данных MySql.
По статистики в среднем в течении суток перепостивалось 10-20.000 объявлений.
Время потраченное на разработку - 2 дня, тестовые правки в течении недели.