Требуется написать на GO чекер проверки текста в содержимом html страниц, а также проверки суммы md5 страницы (т.е. проверем бы ли любые изменения)
Я дам таблицу, с описанием полей, по которым надо делать выборку урлов для тех страниц по которым производим поиск.
Надо учесть:
1. ищем наличие или отсутствие слов (в зависимости от настроек для страницы) в исходном тексте страницы
2. слов может быть несколько
3. есть список слов привязанный к каждой странице (берется из базы), а есть список слов указанный для всех страниц (системный поиск).
4. проверяем контрольную сумму страницы
5. у проверок могут быть разные интервалы, выставленные в настройках сайта
6. результат каждой проверки записываем в базу (mysql, mariadb)
нужные таблицы с архивом я предоставил по ссылке
там же я написал что запрашиваем в таблицах.
кол-во страниц 20 тыс.
желаемый результат около 5 минут интервал, между которыми должна произойти проверка и данные должны быть записаны в базу.
На выходе компилируемый файл и после оплаты исходники go.
Срок 1-2 недели до конечного, протестированного результата.
ваша цена? опишите опыт на go.