Бесплатно зарегистрируйся и получай уведомления о новых проектах по работе

Скрипт на PhantomJS – граббер сайта

g
Заказчик
Отзывы фрилансеров: + 8 - 0
Зарегистрирован на сайте 15 лет и 2 месяца
Бюджет: 2000 руб/заказ
21.73 $ — 20.27 €
Нужно написать скрипт под PhantomJS, который будет выгружать сайт с заданными параметрами
- UserAgent
- Referer (для первой страницы)
- Глубиной вложенности и числом страниц на каждом уровне вложенности
- таймаут для запроса

Для каждой страницы нужно собрать
- url страницы
- статус ответа
- число внешних скриптов <script ...>, фреймов <iframe>, объектов <emded>, <object>
- число внешних ссылок
- скорость загрузки страницы
- число фрагментов <script></script> на странице
- список внешних ссылок
- список внешних скриптов
- список внешних <iframe>
- список внешних <embed>
- список внешних <object>

На выходе выдать результат в формате json (массив элементов с данными по каждой странице)

При работе скрипт должен 
- минимизировать трафик (то есть не загружать объекты для страницы, только сам html)
- минимизировать ресурсы (не генерировать скриншоты)
- пробрасывать userAgent в Navigator.userAgent
- эмулировать поддержку Flash
Разделы:
Опубликован:
08.09.2015 | 20:20 [последние изменения: 08.09.2015 | 20:21]

Теги: нужен программист, требуется программист, ищу программиста, создание сайта программирование, программист веб сайтов

Сведения об ООО «Ваан» внесены в реестр аккредитованных организаций, осуществляющих деятельность в области информационных технологий. ООО «Ваан» осуществляет деятельность, связанную с использованием информационных технологий, по разработке компьютерного программного обеспечения, предоставлению доступа к программе для ЭВМ и является правообладателем программы для ЭВМ «Платформа FL.ru (версия 2.0)».