1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2200+ и мы растем!
    Скрыть объявление

Улучшение parser whois

Тема в разделе "Отклоненные задачи", создана пользователем jonnyb, 20 мар 2012.

  1. jonnyb

    jonnyb A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2012
    Сообщения:
    0
    Симпатии:
    0
    1. Даешь парсеру урлы для парсинга в гугле
    2. парсер по whoisу либо еще как то (здесь очень хорошо определяют reverseget.com/ru/) определяет еще домены этого владельца (по одинаковому IP, либо email и т.д.) и найденные домены добавляет в парсинг либо просто создает список, а дальше сам парсеру отправляешь в задание этот список.
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.334
    Симпатии:
    1.786
    Evgueny писал(а):
    > 1. Даешь парсеру урлы для парсинга в гугле
    > 2. парсер по whoisу либо еще как то (здесь очень хорошо определяют reverseget.com/ru/) определяет еще домены этого владельца (по одинаковому IP, либо email и т.д.) и найденные домены добавляет в парсинг либо просто создает список, а дальше сам парсеру отправляешь в задание этот список.


    урлы для парсинга в гугле - что именно?
    может имеется ввиду домены, тогда зачем их парсить в гугле а не сразу в whois?
    если можно приведи пример какие урлы куда парсятся:)
     
  3. jonnyb

    jonnyb A-Parser Pro License
    A-Parser Pro

    Регистрация:
    16 мар 2012
    Сообщения:
    0
    Симпатии:
    0
    Forbidden писал(а):
    > урлы для парсинга в гугле - что именно?
    > может имеется ввиду домены, тогда зачем их парсить в гугле а не сразу в whois?
    > если можно приведи пример какие урлы куда парсятся:)

    Я может не правельно выразился. Это нужно для парсинга бэков. Даешь парсеру домен, он проверяет есть ли еще домены этого владельца, находит их и записывает. В дальнейшем весь список доменов парсишь на бэки.
     
  4. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.334
    Симпатии:
    1.786
    Evgueny писал(а):
    > Я может не правельно выразился. Это нужно для парсинга бэков. Даешь парсеру домен, он проверяет есть ли еще домены этого владельца, находит их и записывает. В дальнейшем весь список доменов парсишь на бэки.

    вообщем первоначально задача сводится к поиску доменов одного владельца по хуизу\ипу\нсам и т.п., с сервиса reverseget.com/ru/ и ему подобных
     

Поделиться этой страницей