Демонстрационный прогон на books.toscrape.com — сайте, который сделан специально для тренировки парсеров. Цифры ниже настоящие, но ничей магазин при этом не затронут. Скрипт сам проходит постраничную навигацию, пока страницы не кончатся. Цена становится числом, рейтинг — цифрой, наличие — да/нет. Дубли по названию убираются, файл открывается в Excel с закреплённой шапкой. Результат: 999 строк с 50 страниц за 25 секунд, найден один дубль. Файлы заказчиков не публикую — это не мои данные. Нужен пример на вашем случае: пришлите одну страницу каталога, покажу на ней.