1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Как ускорить TextExtractor?

Тема в разделе "Техническая поддержка", создана пользователем sergeda, 12 янв 2017.

Метки:
  1. sergeda

    sergeda A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2013
    Сообщения:
    193
    Симпатии:
    23
    Собственно задача качать как можно быстрее. Есть сервер с 24 Гиг памяти и 24 ядрами, есть канал в 1 Гбит. Скачиваю без прокси. Сейчас сколько потоков не ставлю - после 600 никакого ускорения не вижу. При этом загрузка канала скачет в 3 - 11 Мбит. Канал проверяю через speedtest.net - в районе 600 Мбит выдает. Как поправить?
     
    #1 sergeda, 12 янв 2017
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    Если в задании используется Конструктор результатов или Parse custom result, то имеет смысл увеличить кол-во ядер в настройках А-Парсера. В противном случае парсинг будет идти на одном ядре и теоретически упираться в макс. производительность ядра. Также имеет значение скорость записи на жесткий диск. Ну и отклик сайтов может играть роль, ведь если сайт медленно грузится, то тут ничего не поделать...
     
    #2 Support, 12 янв 2017
    sergeda нравится это.
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей