При парсинге если возникает 404 ошибка - то считается, что парсинг прошел успешно и результат получается пустой. При 404 парсинг не должен завершаться.
По какому запросу и на каких настройках можно получить 404? И почему при получении 404 парсинг не должен завершаться?
1. от запроса и настроек не зависит, 404 возвращает конкретная прокся. 2. потому что поиск яндекса всегда возвращает 200, даже при отсутствии результатов. раньше было всё ок