Наполнение доски объявлений (перепостинг)

  

Просмотров: 120
Дата добавления: 07.08.17 в 19:57
Дата обновления: 30.04.18 в 16:03

Цель проекта.
Для доски объявлений kv****.net для увеличения ссылочной массы и привлечения клиентов требуется перепостинг объявлений с досок avito и olx.

Что реализовано (наиболее значимые пункты).
1. Парсинг всех категорий и под категорий.
2. Сопоставление названий категорий сайта донора с конечным сайтом. Конечный сайт имеет отличительные названия в категориях.
3. Проверка объявлений сайтов доноров на наличие фото. Объявления без фото и определенного минимального разрешения – не обрабатывались.
4. Полный сбор текстовой и контактной информации объявлений доноров.
5. Черный список для уже опубликованных объявлений, для избежания повторных публикаций. 
6. Настройка плавности постинга объявлений с учетом часовых поясов. 
7. Равномерность постинга – во избежании бана от поисковых систем.
8. Обход Captca во время постинга.
9. Сбор и хранение информации в базе-данных MySql.

По статистики в среднем в течении суток перепостивалось 10-20.000 объявлений.
Время потраченное на разработку – 2 дня, тестовые правки в течении недели.