1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Парсинг всех страниц определенного сайта!

Тема в разделе "Техническая поддержка", создана пользователем Maxvell, 3 мар 2022.

Метки:
  1. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Здравствуйте, у меня вопрос к людям разбирающимся.
    Каким образом можно спарсить все страницы определенного сайта?(все ссылки сайта)
     
    #1 Maxvell, 3 мар 2022
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.377
    Симпатии:
    2.107
    #2 Support, 3 мар 2022
    Последнее редактирование: 3 мар 2022
  3. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    #3 Maxvell, 3 мар 2022
  4. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Один вопрос я не совсем понял как работает parse to lvl чтобы получить все страницы с сайта мне хватит 3 уровня?
     
    #4 Maxvell, 3 мар 2022
    Последнее редактирование: 3 мар 2022
  5. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.377
    Симпатии:
    2.107
    Принцип работы описан в документации по ссылке выше.
    Какой именно уровень указать - решать вам, каких-то конкретных рекомендаций на этот счет нет. Чем больше сайт (глубина вложенности страниц) - тем больше уровень.
     
    #5 Support, 3 мар 2022
    Maxvell нравится это.
  6. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Так же у меня возникла проблема с запуском задачи(лог прикрепил ниже)
    upload_2022-3-3_19-35-48.png
     
    #6 Maxvell, 3 мар 2022
  7. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.377
    Симпатии:
    2.107
    Судя по логу что-то разрывает соединение. Попробуйте проверить без прокси и в браузере. Если проблема не решится - напишите в один из чатов Технической поддержки: https://a-parser.com/pages/support/
     
    #7 Support, 3 мар 2022
  8. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Понял, сейчас попробую.
    Спасибо!
     
    #8 Maxvell, 3 мар 2022
  9. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Все исправил но меня тревожит очень маленькая выдача всего 24 ссылки с сайта.
    Я импортировал пример который вы отправили и сделал вроде как все правильно.
    upload_2022-3-4_13-33-55.png
     
    #9 Maxvell, 4 мар 2022
  10. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    upload_2022-3-4_13-36-25.png
     
    #10 Maxvell, 4 мар 2022
  11. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.377
    Симпатии:
    2.107
     
    #11 Support, 4 мар 2022
    Maxvell нравится это.
  12. Maxvell

    Maxvell New Member

    Регистрация:
    6 янв 2022
    Сообщения:
    24
    Симпатии:
    1
    Мне помогли спасибо вам!
     
    #12 Maxvell, 4 мар 2022
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей