1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Поиск и сбор rss лент 2020-02-18

Парсинг внутренних ссылок с наличием в них rss и проверкой найденных ссылок

Метки:
  1. Support Alex
    Поиск и сбор ссылок на RSS ленты. Решение делится на 3 этапа:
    • поиск сайтов в Google по ключевым словам
    • парсинг только внутренних ссылок с наличием в них rss
    • проверка найденных ссылок
    В результате должен получиться список ссылок на RSS ленты, например:
    В качестве запроса используем ключевую фразу, например "погода rss" и собираем для нее ссылки на сайты. Проверяем чтобы ссылки были внутренние и в результат выводились только ссылки содержащие rss.

    [​IMG]

    Проверяем контент по полученным на 2-м этапе ссылкам, если это действительно rss лента, то выводит в результат ссылку.

    [​IMG]