Как спарсить брошенные трастовые домены ?

Тема в разделе "Делимся опытом", создана пользователем rxxman, 13 мар 2019 в 12:08.

  1. rxxman

    rxxman A-Parser Pro License
    A-Parser Pro

    Регистрация:
    28 янв 2019
    Сообщения:
    1
    Симпатии:
    0
    Нужны трастовые домены которые бросили на днсах хостингов для того, чтобы делать редиректы для спама, подскажите как их лучше добывать с помощью вашего софта.

    Заранее спасибо за ответ!
     
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    2.347
    Симпатии:
    1.527
    Как вариант, можно взять топ 1М сайтов из Alexa, с помощью Net::Whois Net::Whois разложить в файлы по nameserver - в результате получим рассортированные по хостингах топовые сайты. Но остается вопрос - как (по каким признакам) определять забыт домен или нет?
     
  3. EceninPars

    EceninPars A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    14 янв 2013
    Сообщения:
    39
    Симпатии:
    6
    Вот тут описание как работает парсинг https://zennolab.com/discussion/threads/ru-domeny-besplatno-1k-domenov-v-minutu.44156/
     
    #3 EceninPars, 14 мар 2019 в 07:40
    Последнее редактирование модератором: 14 мар 2019 в 10:28
    Support нравится это.
  4. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    2.347
    Симпатии:
    1.527
    Исходя из статьи по ссылке выше, это реализуется так:
    1) Из специализированных сервисов собирается список доменов (пример: https://a-parser.com/resources/320/)
    1.1) При необходимости можно отфильтровать список по различным показателям.
    2) Полученный список доменов фильтруется по коду ответа (по аналогии с примерами: https://a-parser.com/resources/52/)
    3) Оставшиеся домены проверяются на наличие/отсутствие нужных DNS записей с помощью Net::DNS Net::DNS и фильтруются.
     

Поделиться этой страницей