Программа по сбору ссылок из вебархива

1. Сбор ссылок с мертвых сайтов через вебархив. На каждом мертвом сайте и на каждой странице, есть рекламные ссылки, сбор таких ссылок в виде site.ru, проверка на дубли, сортировка по алфавиту, проверка на живой и не живой сайт.

2. Сортировка живые\не живые для импорта в тхт

3. Как в блокноте функция Найти, к примеру Credit и все домены с таким ключом, возможность импортировать в формате тхт.

4. Возможность работать с большими объемами.

5. Данную задачу можно реализовать и в виде веб-сервиса, как посоветуете.