SE::Google - Парсер поисковой выдачи Google

10 июл 2017

  • Собираемые данные(top)


    • Количество результатов по запросу
    • Ссылки, анкоры и сниппеты из выдачи
    • Список связанных ключевых слов(Related keywords)
    • Определяет посчитал ли Google запрос опечаткой или нет
    • Парсит из рекламных блоков ссылку, анкор и сниппет
    [​IMG]
    [​IMG]
    [​IMG]

    Возможности(top)


    • Поддержка всех поисковых операторов Гугла(site:, inurl: и т.д.)
    • Парсит максимальное отдаваемое гуглом число результатов - 10 страниц по 100 элементов в выдачи
    • Может автоматически парсить больше 1000 результатов на запрос - подставляет дополнительные символы(опция Parse all results)
    • Возможность поиска связанных ключевых слов
    • Поддерживает выбор страны поиска, города, региона, домена, языка результатов
    • Поддерживает указание времени выдачи
    • Возможность парсить по новостям и блогам
    • Можно указать парсить ли выдачу если гугл сообщает о том что по указанному запросу ничего не найдено и предлагает результаты по схожему запросу
    • Поддерживает отключение фильтра гугла по скрытию похожих результатов(filter=)
    • Возможность выбора языка интерфейса Google, выдача результатов в парсере и в браузере, при идентичных настройках, максимально идентична

    Варианты использования(top)


    • Сбор баз ссылок - для A-Poster, XRumer, AllSubmitter и т.д.
    • Оценка конкуренции для кейвордов
    • Поиск беклинков(упоминаний) сайтов
    • Проверка индексации сайтов
    • Поиск уязвимых сайтов
    • Любые другие варианты подразумевающие парсинг гугла в том или ином виде

    Запросы(top)


    • В качестве запросов необходимо указывать поисковые фразы, точно так же как если бы их вводили прямо в форму поиска Гугла, например:


    Результаты(top)


    • В результате отображен список ссылок по запросам:


    Возможные настройки(top)


    Общие настройки для всех парсеров
    ПараметрЗначение по умолчаниюОписание
    Links per page100Количество ссылок в выдачи на каждую страницу
    Pages count5Количество страниц для парсинга
    Google domainwww.google.comДомен Гугла для парсинга, поддерживаются все домены
    Results languageAny languageВыбор языка результатов(параметр lr=)
    Search from countryGlobalВыбор страны откуда осуществляется поиск(гео-зависимый поиск, параметр gl=)
    Location (city)-Поиск по городу, региону. Можно указывать города в виде novosibirsk, russia; полный список локаций можно найти по ссылке. Также необходимо выставлять корректный домен гугла
    Hide omitted resultsОпределяет скрывать ли опущенные результаты(параметр filter=)
    Serp timeAll timeВремя серпа(временно-зависимый поиск, параметр tbs=)
    Serp typeMainОпределяет парсить с главной страницы, по новостям или блогам
    Parse not foundОпределяет парсить ли выдачу если Гугл сообщил что по указанному запросу ничего не найдено и предложил выдачу по другому запросу
    Use AntiGateОпределяет использовать ли antigate для обхода каптч
    AntiGate presetdefaultПресет парсера Util:AntiGate. Необходимо предварительно настроить парсер Util::AntiGate - указать свой ключ доступа и другие параметры, после чего выбрать созданный пресет здесь
    Use digit captchaВключает принудительное использование цифровой каптчи
    Use sessionsCохраняет хорошие сессии что позволяет парсить еще быстрее, получая меньшее число ошибок.
    Interface languageEnglishВозможность выбора языка интерфейса Google, для максимальной идентичности результатов в парсере и в браузере
todaymegan и SemiSvetik6 нравится это.