Программа выполняет рекурсивное высокопроизводительное сканирование сайтов по заданному списку и собирает сведений о сайтах (возраст сайта, YACA, DMOZ, ТиЦ, количество внешних и внутренних ссылок, количество noindex ссылок) возможно добавление дополнительных сведений на основе парсинга страниц.
Сведения сохраняются в БД.
Программа умеет работать через proxy.
Язык программирования: С#