на некоторых сервисах бывает невозможно по одному только коду ответа 200 определить удачно или не удачно спаршен контент. например может отдать ответ 200 и при этом отдать в контенте несколько вариантов контента, из которых, скажем 1-2 может быть нормальными, а остальные будут означать, что произошла какая-нибудь ошибка (прокси/айпишка забанены или ещё какое сообщение от сервиса в духе "мы перегружены запросами, повторите позже").
а также я думаю будет полезна возможность задавать условия бана прокси, чтобы не только по 403 коду банило (чтобы например можно было задать условием для бана что-нибудь, найденное в контенте), либо не банило по этому коду вообще, а отправляло на перепарсинг.
а также я думаю будет полезна возможность задавать условия бана прокси, чтобы не только по 403 коду банило (чтобы например можно было задать условием для бана что-нибудь, найденное в контенте), либо не банило по этому коду вообще, а отправляло на перепарсинг.
но с баном прокси вопрос остаётся актуальным...