Запрос на основе строки из файла по условию

[aquatell]

Здравствуйте,
На выходе есть файл check.csv в не 100 000 строк, файл уже один раз обработался а-парсером.
Но среди него есть порядка 10 000 строк где есть незаполненные поля со значением NONE или во все пустые.
Подскажите как этот же файл 100 000 строк прогнать повторно, но чтобы обрабатывались только эти 10 000 строк, как то чтобы а-парсер увидел пустые ячейки или со значением NONE.
Заранее благодарен

 

[Support]

Добрый день.
Раз это CSV, то наверное проще всего отсортировать/отфильтровать пустые в Excel и подать их отдельным файлом на вход в А-Парсер.

 

[aquatell]

Я про это думал, но мне нужно сохранить последовательность строк, именно в таком виде в каком есть. В файле всего 10 колонок. Каждую я загоняю в переменную $query.var1 и т.д.
Может можно как то по условию сделать?

 

[Support]

Я про это думал, но мне нужно сохранить последовательность строк, именно в таком виде в каком есть.

Добавьте еще одну колонку, в которой пронумеруйте строки. Дальше все, как я писал выше, плюс выводите в результат номер строки. Потом соедините с основным файлом и отсортируйте по номеру. Получится та же последовательность, что и была.

Либо же можно использовать шаблонизатор в формате запроса и прописать условие, которое в зависимости от содержимого нужных колонок, возвращало бы запрос или пустоту (для тех запросов, которые не нужно парсить). Пустые запросы парсер будет считать неудачными, это нормально. В результат выводите данные, в зависимости от удачности запроса (либо на основании содержимого колонок):
- если запрос неудачный (либо остальные колонки не пустые), то выводим то, что пришло на вход: $query.var1,$query.var3,$query.var3...
- если удачный (либо если остальные колонки пришли на вход пустые) - то выводите спаршенные данные.
Но из-за многопоточности строки все равно перемешаются, разве что нужно парсить в 1 поток.

 

[Fyn Oleg]

Либо же можно использовать шаблонизатор в формате запроса и прописать условие, которое в зависимости от содержимого нужных колонок, возвращало бы запрос или пустоту (для тех запросов, которые не нужно парсить).

Можно на примере?

У меня допустим, страница всегда возвращает 200ок, но в зависимости от (IP+UA) я получаю либо <h1>You are robots?</h1> или <h1>Good</h1>
Не понимаю как обучить a-parser считать запрос успешным или нет.

 

[Support]

страница всегда возвращает 200ок, но в зависимости от (IP+UA) я получаю либо <h1>You are robots?</h1> или <h1>Good</h1>
Не понимаю как обучить a-parser считать запрос успешным или нет.

Это решается с помощью Check content
Укажите регулярное выражение, которое сработает на нужной странице и не сработает на любых других