Сейчас в процессе парсинга , аккаунты удаляются,если поставлена галочка удалять плохие аккаунты, и возникает ситуация, что парсер продолжает работать, и запросы сыпятся в Bad. Просьба добавить в парсер, приостановку отправку запросов в задания, если аккаунты все удалены. Тогда задания будут ждать новых аккаунтов, когда они будут добавлены или сгенерированы (к примеру у меня каждый день генерируется пачка по утрам)
Сделайте пожлауйста не остановку задания а ожидание. Т.е. пусть парсер ждёт появление новых аккаунтов(делает проверку на наличие аккаунтов каждые 30 секунд к примеру) и если аккаунты появились то продолжает парсинг.
И ещё одна вещь, которая бы нас спасла. Нужно как то допарсить аккаунты когда парсер находится в ожидании. Было бы совсем хорошо
Ещё что может реально помочь. Нужно минимизировать повторные входы в аккаунт с разных IP. Т.е. каждый раз брать свежий аккаунт из списка и не делать повторых входов в аккаунт с которого была взята сессия.
Коллеги ещё разок, можно ли реализовать такую схему. 1. Минимизируем входы в аккаунты, т.е. всегда берем новый аккаунт, когда они заканчиваются идём по кругу(+ используем сессию) 2. Если аккаунтов нет, парсер должен войти в цикл и ждать появление аккаунтов. 3. Если аккаунтов нет, парсер должен поставить задачу на регистрацию новых аккаунтов(количество аккаунтов должно задаваться в настройках) Данная схема решает наши проблемы и здесь не нужно будет привязывать аккаунты к IP. Схема будет рабочей при достаточно большом количестве аккаунтов > 1000 к примеру Дополнительно к этой схеме нужно все IP сгруппировать по городам, и стараться делать запросы из одной локации в рамках аккаунта.
