1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Нужна помощь с настройкой парса

Тема в разделе "Делимся опытом", создана пользователем alex47715, 4 янв 2023.

  1. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
    Как настроить парс запросов, или как составить правильно запрос, чтобы на выходе были линки со спец символами ? тоесть грубо говоря как в sqlDumper идет парс, так вот чтобы на выходе шли такого вида ссылки типа [t]t%#$&* чтобы типо были спец символы и тд
     
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.747
    Симпатии:
    2.218
    Если требуется фильтровать получаемые результаты (например вы парсите ссылки и нужно фильтровать их по наличию в них каких-то символов), то для этого нужно использовать фильтры: https://a-parser.com/docs/guides/task-settings/results-filters
     
  3. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
    Нет, я хочу настроить Парсер стак, тобы он парсил не все подряд а только вид ссылки мой
     
  4. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
    Тоесть, от моего запроса зависит вид результата ? тоесть как будет выглядить спаршенный линк ?
     
  5. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
  6. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.747
    Симпатии:
    2.218
    Вы можете использовать любые запросы, аналогично как вы бы это делали в поисковой строке нужной вам поисковой системы. Это не зависит от А-Парсера.
    А вот если требуется отфильтровать собираемые результаты, то это делается с помощью фильтров, как уже было сказано во 2-м сообщении.
     
  7. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
    Здравствуйте, подскажите или помогите, можно ли при парсе например с google по ключевым словам или доркам, сделать так, чтобы а-парсер сохранял только те сайты на которых есть авторизация ?нужно отсеить все сайты на которых нет авторизации и на которых она есть, возможно ли это ?
     
  8. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.747
    Симпатии:
    2.218
    В первую очередь вам нужно определить точные признаки наличия авторизации, скорее всего это будут какие-то теги/классы/атрибуты или строки типа "Log In", "Войти". Имея список признаков задача решается в 2 этапа:
    1. Парсинг ссылок по нужным запросам (ключевым словам или доркам), используя парсер нужной поисковой системы
    2. Фильтрация собранных ссылок по наличию в коде страницы признаков наличия авторизации, используя Net::HTTP Net::HTTP и фильтр. Примеры фильтрации есть в Документации (https://a-parser.com/docs/guides/task-settings/results-filters#filter-by-text) или в Каталоге (https://a-parser.com/resources/178/)
     
  9. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
    thanks
     
  10. alex47715

    alex47715 A-Parser Pro License
    A-Parser Pro

    Регистрация:
    25 июл 2020
    Сообщения:
    16
    Симпатии:
    0
    почему то у меня не работает. загрузил спарсенные ссылки, закинул в парсер списком в виде https://www.viella.it/ и все летит в неудачные запросы
     
  11. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.747
    Симпатии:
    2.218
    Напишите в один из чатов Технической поддержки и покажите настройки задания и что именно пишется в логе задания
     

Поделиться этой страницей