1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

1.1.500 - использование разных источников прокси в разных заданиях и парсерах

Тема в разделе "Новости", создана пользователем Forbidden, 2 май 2016.

  1. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.337
    Симпатии:
    1.795
    В этой версии проделана большая работа по улучшению проверки прокси и добавлению возможности использования разных источников прокси:
    [​IMG]
    • Появилась возможность запускать сразу несколько прокси чекеров, каждый поддерживает собственные настройки и собственный рабочий каталог с возможностью указать различные источники проксей
    • В настройках задания, появилась возможность указать прокси от каких чекеров должны использоваться(выбор между всеми или перечисление конкретных)
    • Более того в одном задании каждый парсер может использовать различные источники прокси
    • Добавлен график живых прокси и статистика по обработке источников
    • Уменьшено потребление памяти при большом числе живых прокси
    • В API теперь возможно получить список всех живых прокси, а также список прокси для конкретных прокси чекеров
    Благодаря этим нововведениям появилась возможность раздельной работы с разными прокси серверами, когда одни прокси подходят для парсинга сайтов, другие лучше для парсинга выдачи поисковых систем, а третьи могут быть "заточены" под определенный сервис

    Другие улучшения:
    • Для парсера Rank::CMS Rank::CMS добавлена опция эмуляции браузера, она включена по умолчанию и повышает процент распознавания многих CMS
    • В редакторе заданий появилась возможность сворачивать парсеры, что позволяет удобнее работать с большими заданиями
    Исправления в связи с изменениями в выдачи:
    Печальная новость коснулась SE::Google::pR SE::Google::pR - Google прекратил отображать PageRank для сайтов, но у нас в арсенале есть множество парсеров для гораздо более точной оценки рейтинга домена!
     
    #1 Forbidden, 2 май 2016
    Последнее редактирование модератором: 2 май 2016
    limoshkaa и seewww нравится это.

Поделиться этой страницей