Добавьте пожалуйста во все парсеры чтобы отображалось среднее значение сколько примерно ссылок будет собрано.
На примере если работает парсер гугла:
Запросы завершено: 10%
Результатов уник/всего: 3000/15000
по формуле:
10% (парсер уже обработал) = 3000 (уже собрал)
100% (когда обработает все) = X (предварительный итоговый результат)
Где X рассчитываем по формуле пропорции: 3000 * 100 / 10 = 30000 (это и будет предварительное значение сколько будет собрано ссылок всего и чем больше мы будем приближаться к значению 100% тем точнее будет этот результат)
На примере если работает парсер гугла:
Запросы завершено: 10%
Результатов уник/всего: 3000/15000
по формуле:
10% (парсер уже обработал) = 3000 (уже собрал)
100% (когда обработает все) = X (предварительный итоговый результат)
Где X рассчитываем по формуле пропорции: 3000 * 100 / 10 = 30000 (это и будет предварительное значение сколько будет собрано ссылок всего и чем больше мы будем приближаться к значению 100% тем точнее будет этот результат)