Собственно задача качать как можно быстрее. Есть сервер с 24 Гиг памяти и 24 ядрами, есть канал в 1 Гбит. Скачиваю без прокси. Сейчас сколько потоков не ставлю - после 600 никакого ускорения не вижу. При этом загрузка канала скачет в 3 - 11 Мбит. Канал проверяю через speedtest.net - в районе 600 Мбит выдает. Как поправить?
Как ускорить TextExtractor?
- Автор темы sergeda
- Дата начала
-
- Теги
- оптимизация
Если в задании используется Конструктор результатов или Parse custom result, то имеет смысл увеличить кол-во ядер в настройках А-Парсера. В противном случае парсинг будет идти на одном ядре и теоретически упираться в макс. производительность ядра. Также имеет значение скорость записи на жесткий диск. Ну и отклик сайтов может играть роль, ведь если сайт медленно грузится, то тут ничего не поделать...