1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Пресет индекцации страниц в гугле

Тема в разделе "Делимся опытом", создана пользователем aquatell, 13 дек 2014.

  1. aquatell

    aquatell A-Parser Pro License
    A-Parser Pro

    Регистрация:
    8 ноя 2012
    Сообщения:
    150
    Симпатии:
    43
    Стандарнтый пресет SE:Google не подходит для задачи.
    Есть у кого то пресет NET:HTTP чтобы проверять список сайтов в гугле, сколько страниц в соплях и сколько без. Буду очень благодарен за помощь, у меня пока не получилось реализовать, через FF просматривается один код, регуляркой у меня получилось вытащить, а через а-парсер как то по другому код страницы отображается, пока не докопался до истины, может у кого то получится сделать, вот пример проверки:
    Код:
    site:http://mysite.ru/&
    - проверка без соплей
    Код:
    site:http://mysite.ru/
    - вся выдача
     
  2. Syrex

    Syrex A-Parser Pro License
    A-Parser Pro

    Регистрация:
    27 дек 2013
    Сообщения:
    51
    Симпатии:
    11
    А так не устроит?
    Проверка с соплями как обычно, а без соплей
    http://clip2net.com/s/38I6iPN

    в настройках сделать
    Query format:
    site:$query
    Это с соплями
    а без соплей
    site:$query?

    запросы вида http://mysite.ru/ , а если нужно только количество страниц, то вместо result format как на скрине ставишь - $totalcount

    Если результаты в парсере и браузере разнятся, то это из за месторасположения проксей.
     
    aquatell нравится это.
  3. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.340
    Симпатии:
    1.799
    очень даже подходит:

    [​IMG]
     
    aquatell нравится это.
  4. aquatell

    aquatell A-Parser Pro License
    A-Parser Pro

    Регистрация:
    8 ноя 2012
    Сообщения:
    150
    Симпатии:
    43
    Да, самое то, не допер. Спасибо.
    Вот мой вариант на NET:HTTP все таки получилось только большинство проксей забанено поэтому нужны чистые прокси, может кому то пригодится как пример и для других нужд.
    eyJwcmVzZXQiOiJTRTpHb29nbGUgSW5kZXhhdGlvbiIsInZhbHVlIjp7InBhcnNl
    cnMiOltbIk5ldDo6SFRUUCIsImRlZmF1bHQiLHsidHlwZSI6Im92ZXJyaWRlIiwi
    aWQiOiJxdWVyeWZvcm1hdCIsInZhbHVlIjoiaHR0cDovL3d3dy5nb29nbGUucnUv
    c2VhcmNoP2NsaWVudD1maXJlZm94LWEmaHM9YThrJnJscz1vcmcubW96aWxsYTpy
    dTpvZmZpY2lhbCZjaGFubmVsPXNiJnNjbGllbnQ9cHN5LWFiJnE9c2l0ZTokcXVl
    cnkifSx7InR5cGUiOiJjdXN0b21SZXN1bHQiLCJyZXN1bHQiOiJkYXRhIiwicmVn
    ZXgiOiI8ZGl2IGNsYXNzPVwic2RcIiBpZD1cInJlc3VsdFN0YXRzXCI+0KDQtdC3
    0YPQu9GM0YLQsNGC0L7Qsjog0L/RgNC40LzQtdGA0L3QviAoLis/KTwvZGl2PiIs
    InJlZ2V4VHlwZSI6ImlzIiwicmVzdWx0VHlwZSI6ImZsYXQiLCJhcnJheU5hbWUi
    OiIiLCJyZXN1bHRzIjpbInNjb3VudDEiXX0seyJ0eXBlIjoib3ZlcnJpZGUiLCJp
    ZCI6ImZvcm1hdHJlc3VsdCIsInZhbHVlIjoiJHF1ZXJ5Lm9yaWc7JHNjb3VudDFc
    XG4ifSx7InR5cGUiOiJvcHRpb25zIiwiaWQiOiJjaGVja0NvbnRlbnQiLCJ2YWx1
    ZSI6IjwvaHRtbD4ifV0sWyJOZXQ6OkhUVFAiLCJkZWZhdWx0Iix7InR5cGUiOiJv
    dmVycmlkZSIsImlkIjoicXVlcnlmb3JtYXQiLCJ2YWx1ZSI6Imh0dHA6Ly93d3cu
    Z29vZ2xlLnJ1L3NlYXJjaD9jbGllbnQ9ZmlyZWZveC1hJmhzPWE4ayZybHM9b3Jn
    Lm1vemlsbGE6cnU6b2ZmaWNpYWwmY2hhbm5lbD1zYiZzY2xpZW50PXBzeS1hYiZx
    PXNpdGU6JHF1ZXJ5JiJ9LHsidHlwZSI6ImN1c3RvbVJlc3VsdCIsInJlc3VsdCI6
    ImRhdGEiLCJyZWdleCI6IjxkaXYgY2xhc3M9XCJzZFwiIGlkPVwicmVzdWx0U3Rh
    dHNcIj7QoNC10LfRg9C70YzRgtCw0YLQvtCyOiDQv9GA0LjQvNC10YDQvdC+ICgu
    Kz8pPC9kaXY+IiwicmVnZXhUeXBlIjoiaXMiLCJyZXN1bHRUeXBlIjoiZmxhdCIs
    ImFycmF5TmFtZSI6IiIsInJlc3VsdHMiOlsic2NvdW50MiJdfSx7InR5cGUiOiJv
    dmVycmlkZSIsImlkIjoiZm9ybWF0cmVzdWx0IiwidmFsdWUiOiIkcXVlcnkub3Jp
    Zzskc2NvdW50MlxcbiJ9LHsidHlwZSI6Im9wdGlvbnMiLCJpZCI6ImNoZWNrQ29u
    dGVudCIsInZhbHVlIjoiPC9odG1sPiJ9XV0sInJlc3VsdHNGb3JtYXQiOiIkcXVl
    cnkub3JpZzsgJHAxLmZvcm1hdCgnJHJlejEnKTsgJHAyLmZvcm1hdCgnJHJlejIn
    KVxcbiIsInJlc3VsdHNTYXZlVG8iOiJmaWxlIiwicmVzdWx0c0ZpbGVOYW1lIjoi
    JGRhdGVmaWxlLmZvcm1hdCgpX215ZG9yWmluZGV4YXRpb24udHh0IiwiYWRkaXRp
    b25hbEZvcm1hdHMiOltdLCJyZXN1bHRzVW5pcXVlIjoibm8iLCJxdWVyeUZvcm1h
    dCI6WyIkcXVlcnkiXSwidW5pcXVlUXVlcmllcyI6ZmFsc2UsInNhdmVGYWlsZWRR
    dWVyaWVzIjpmYWxzZSwiaXRlcmF0b3JPcHRpb25zIjp7Im9uQWxsTGV2ZWxzIjpm
    YWxzZX0sImRvTG9nIjoibm8iLCJrZWVwVW5pcXVlIjoiTm8iLCJtb3JlT3B0aW9u
    cyI6ZmFsc2UsInJlc3VsdHNQcmVwZW5kIjoiIiwicmVzdWx0c0FwcGVuZCI6IiIs
    InF1ZXJ5QnVpbGRlcnMiOltdLCJyZXN1bHRzQnVpbGRlcnMiOlt7InNvdXJjZSI6
    WzAsInNjb3VudDEiXSwidHlwZSI6ImRlY29kZUh0bWwiLCJ0byI6InJlejEifSx7
    InNvdXJjZSI6WzEsInNjb3VudDIiXSwidHlwZSI6ImRlY29kZUh0bWwiLCJ0byI6
    InJlejIifV0sImNvbmZpZ092ZXJyaWRlcyI6W119fQ==
    На выходе получаем такой такой формат сайт;общий идекс;индекс без соплей
     
    #4 aquatell, 14 дек 2014
    Последнее редактирование: 15 дек 2014
    woodoo, vladan и limoshkaa нравится это.

Поделиться этой страницей