Парсю сайт с неизвестным концом пагинации, поэтому беру с запасом page={num:1:2000}
В процессе видно, что при переборе от 1 до 2000 после какого-то числа начинают идти страницы с
"No More data"
Как в это случае прекратить перебор до 2000?
Можно как-то сделать контроль - если встретилось слово "No More data",
то текущий УРЛ вида http://mysite.ru/?query={az:AA:ZZ}&page={num:1:2000}
прекращался перебор в цикле {num:1:2000} и происходил переход к следующему варианту буквенного перебора {az:AA:ZZ}
То есть остановка перебора
?query=AA&page={num:1:2000}
и переход на следующий УРЛ
?query=AB&page={num:1:2000}
В процессе видно, что при переборе от 1 до 2000 после какого-то числа начинают идти страницы с
"No More data"
Как в это случае прекратить перебор до 2000?
Можно как-то сделать контроль - если встретилось слово "No More data",
то текущий УРЛ вида http://mysite.ru/?query={az:AA:ZZ}&page={num:1:2000}
прекращался перебор в цикле {num:1:2000} и происходил переход к следующему варианту буквенного перебора {az:AA:ZZ}
То есть остановка перебора
?query=AA&page={num:1:2000}
и переход на следующий УРЛ
?query=AB&page={num:1:2000}