По договоренности
Задача:
- скрипт на php
- вводим адрес любого сайта
- запускается задание на сервере, то есть скрипт работает и не требует участия пользователя, браузер можно закрыть
- парсинг через curl всех страниц сайта, нужно получить заголовки страниц и тело контента, то есть скрипт должен ходить по ссылкам на сайте самостоятельно
- собирается структура сайта, исходный код, заголовки ответа сервера и складываются в mysql таблицу для дальнейшей обработки
- после выполнения парсинга скрипт завершает работу
Скрипт универсальный, для любых сайтов, то есть нужно учесть всякие извращенные способы оформления ссылок внутри сайта, кодировки, компрессию, таймауты между запросами, чтобы не банился сервером.
Интересует:
1. цена
2. срок
3. тех требования к серверу на котором всё это будет работать
Спасибо!