SE::Google - Парсер поисковой выдачи Google

6 апр 2017

  • Собираемые данные(top)


    • Количество результатов по запросу
    • Ссылки, анкоры и сниппеты из выдачи
    • Список связанных ключевых слов(Related keywords)
    • Определяет посчитал ли Google запрос опечаткой или нет
    • Парсит из рекламных блоков ссылку, анкор и сниппет
    [​IMG]
    [​IMG]
    [​IMG]

    Возможности(top)


    • Поддержка всех поисковых операторов Гугла(site:, inurl: и т.д.)
    • Парсит максимальное отдаваемое гуглом число результатов - 10 страниц по 100 элементов в выдачи
    • Может автоматически парсить больше 1000 результатов на запрос - подставляет дополнительные символы(опция Parse all results)
    • Возможность поиска связанных ключевых слов
    • Поддерживает выбор страны поиска, города, региона, домена, языка результатов
    • Поддерживает указание времени выдачи
    • Возможность парсить по новостям и блогам
    • Можно указать парсить ли выдачу если гугл сообщает о том что по указанному запросу ничего не найдено и предлагает результаты по схожему запросу
    • Поддерживает отключение фильтра гугла по скрытию похожих результатов(filter=)

    Варианты использования(top)


    • Сбор баз ссылок - для A-Poster, XRumer, AllSubmitter и т.д.
    • Оценка конкуренции для кейвордов
    • Поиск беклинков(упоминаний) сайтов
    • Проверка индексации сайтов
    • Поиск уязвимых сайтов
    • Любые другие варианты подразумевающие парсинг гугла в том или ином виде

    Запросы(top)


    • В качестве запросов необходимо указывать поисковые фразы, точно так же как если бы их вводили прямо в форму поиска Гугла, например:


    Результаты(top)


    • В результате отображен список ссылок по запросам:


    Возможные настройки(top)


    Общие настройки для всех парсеров
    ПараметрЗначение по умолчаниюОписание
    Links per page100Количество ссылок в выдачи на каждую страницу
    Pages count5Количество страниц для парсинга
    Google domainwww.google.comДомен Гугла для парсинга, поддерживаются все домены
    Results languageAny languageВыбор языка результатов(параметр lr=)
    Search from countryGlobalВыбор страны откуда осуществляется поиск(гео-зависимый поиск, параметр gl=)
    Location (city)-Поиск по городу, региону. Можно указывать города в виде novosibirsk, russia; полный список локаций можно найти по ссылке. Также необходимо выставлять корректный домен гугла
    Hide omitted resultsОпределяет скрывать ли опущенные результаты(параметр filter=)
    Serp timeAll timeВремя серпа(временно-зависимый поиск, параметр tbs=)
    Serp typeMainОпределяет парсить с главной страницы, по новостям или блогам
    Parse not foundОпределяет парсить ли выдачу если Гугл сообщил что по указанному запросу ничего не найдено и предложил выдачу по другому запросу
    Use AntiGateОпределяет использовать ли antigate для обхода каптч
    AntiGate presetdefaultПресет парсера Util:AntiGate. Необходимо предварительно настроить парсер Util::AntiGate - указать свой ключ доступа и другие параметры, после чего выбрать созданный пресет здесь
    Use digit captchaВключает принудительное использование цифровой каптчи
    Use sessionsCохраняет хорошие сессии что позволяет парсить еще быстрее, получая меньшее число ошибок.
todaymegan и SemiSvetik6 нравится это.