требуется программист с опытом работы с curl: авторизация на сайтах, получение большого объема страниц с
использованием прокси серверов.
требуется автоматически получать сравнения поисковых запросов в сервисе
поисковые запросы берутся из списка и сраниваются по 2 штуки за раз. перед тем как сравнить запросы нужно
авторизоваться в гугле так как для не залосненных пользователей страница с результатами содержит не полные
данные о сравнении.
обязательное требование – использование списка прокси серверов.
прокси должны проверяться на работоспособность – не должны требовать авторизации и гарантировано
обеспечивать соединение с гуглом, и быть анонимными – для скрытия своего реального ip.
итак задача сводится примерно к следующему:
- из списка поисковых запросов последовательно выбираем по 2 штуки.
- выбираем прокси, логин и пароль гугла.
- авторизуемся в гугле.
- получаем содержимое страницы сравнения поисковых запросов от
параметры: Россия все регионы. за последние 90 дней.
- выходим из гугла.
- полученный результат записываем в файл или базу данных.
ключевой момент: каждый раз мы должны получить страницу от гугла. в итоге получаем попарные сравнения всех(!)
поисковых запросов. то есть надежность результатов на первом месте. список запросов для сравнения не менее 5.