Форб. Такая конструкция не работает для проверки индексации УРЛов. Пример: я задал список урлов (не доменов) и на выходе получил просто цифры, никак не относящиеся к статусу индексации данных страниц. Т.е. если в выдаче есть упоминание заданного урла на других сайтах, то это страницы также попадают в список выдачи, НО сам ЗАДАННЫХ в списке УРЛ для проверки часто бывает не проиндексированным... Так как же проверять урлы на индексацию парсером?
Выставляю шаблонную настройку на 100 потоков, а при парсинге всё равно только 20 активных Пардон... Не увидел сразу где это включается. Разобрался