1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2200+ и мы растем!
    Скрыть объявление

Парсинг всех страниц определенного сайта!

Тема в разделе "Техническая поддержка", создана пользователем Maxvell, 3 мар 2022.

  1. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Здравствуйте, у меня вопрос к людям разбирающимся.
    Каким образом можно спарсить все страницы определенного сайта?(все ссылки сайта)
     
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    3.802
    Симпатии:
    1.952
  3. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
  4. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Один вопрос я не совсем понял как работает parse to lvl чтобы получить все страницы с сайта мне хватит 3 уровня?
     
    #4 Maxvell, 3 мар 2022
    Последнее редактирование: 3 мар 2022
  5. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    3.802
    Симпатии:
    1.952
    Принцип работы описан в документации по ссылке выше.
    Какой именно уровень указать - решать вам, каких-то конкретных рекомендаций на этот счет нет. Чем больше сайт (глубина вложенности страниц) - тем больше уровень.
     
    Maxvell нравится это.
  6. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Так же у меня возникла проблема с запуском задачи(лог прикрепил ниже)
    upload_2022-3-3_19-35-48.png
     
  7. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    3.802
    Симпатии:
    1.952
    Судя по логу что-то разрывает соединение. Попробуйте проверить без прокси и в браузере. Если проблема не решится - напишите в один из чатов Технической поддержки: https://a-parser.com/pages/support/
     
  8. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Понял, сейчас попробую.
    Спасибо!
     
  9. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Все исправил но меня тревожит очень маленькая выдача всего 24 ссылки с сайта.
    Я импортировал пример который вы отправили и сделал вроде как все правильно.
    upload_2022-3-4_13-33-55.png
     
  10. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
  11. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    3.802
    Симпатии:
    1.952
     
    Maxvell нравится это.
  12. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Мне помогли спасибо вам!
     

Поделиться этой страницей