1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Проверка сайта на ошибку 404 1.0

Поиск на сайте несуществующих страниц

Метки:
  1. Support
    Минимальная версия A-Parser:
    1.1.214
    • Используем парсер [​IMG] HTML::LinkExtractor для извлечения ссылок
    • Используем опцию Parse to level для перехода в глубь сайта до указанного уровня, совместно с опцией Уникальные запросы
    • Проверяем все коды ответов(Good status: all)
    • Фильтруем результаты по интересующему нас коду - 404
    • Сохраняем в результат сам запрос(ссылки на страницы, где был получен ответ 404)
    • Аналогично можно проверять любой другой код ответа (или несколько)