Нужно написать скрипт, который скопирует все поля из описания товаров (если в описании есть ссылки, то их тоже нужно скопировать), скопирует все ссылки, сохранит все фото и сохранит видео (если оно есть ).
Всю информацию нужно скопировать и структурировать в exel файл или в mysql таблицу.
Файлы каждого товара сохранить в отдельной папке (название папки задать такое же как заголовок товара).
Сайт представляет из себя каталог созданный на Wordpress.
Примерно 8 тысяч страниц.
Каждая страница этого каталога- это описание товара, ссылки, фото и возможно видео.
Вес одной страницы с картинками и видосиками может достигать 20-50 МБ.
К сайту подключен клаудфлер, но проблем это пока не доставляло.
Присутствует нестандартная капча. Которая отображается если переходить на сайт по прямой ссылке, не отображается если по сайту осуществлять внутренние переходы.
У сайта ненадежный хостинг. Даунтайм может достигать 30%
Для прасинга имеется набор хороших прокси с сервиса
Пример капчи