Парсер, Скрипт обхода, запись в СУБД.

1. В СУБД есть список сайтов (главных страниц) в столбик. Нужно сделать парсер, который будет парсить <title>, <keywords> <description>, <lang>,  и <charset> этих сайтов ( главных страниц ) . Если в таблице уже будет какая то информация по этому сайту, то что бы заменял на новую (именно заменял). Если нет чего то например <charset>, то что бы игнорировал это. Потом что бы переходил по /robots.txt и доставал sitemap ссылки, если их несколько то надо брать все и записывать их в БД, только некоторые ссылки архивные с окончанием .tz или .tg их нужно записывать в отдельный столбик. Всё.
Только необходимо что бы была много поточность и какая нибудь графическая оболочка, где будет выводиться сколько в базе всего главных страниц и что бы туда можно было добавлять ссылки из этой графической оболочки txt файлом (ссылки в файле будут в столбик). И ещё нужна будет кнопка запуска и остановки этого парсинга в графической оболочке и Всё.