1.1.434 - парсинг частотности Яндекс.Директ с большой скоростью, улучшения использования памяти

[Forbidden]

В этой версии проделана большая работа по добавлению поддержки агрегации запросов. Теперь парсер частотности ключевых слов SE::Yandex::Direct::Frequency может получать данные со скоростью 20000-50000 слов\минуту

Улучшения

• Уменьшено потребление памяти при использовании большого числа потоков и\или нескольких парсеров в одном задании
• Уменьшено потребление памяти при большой очереди завершенных заданий
• В парсере SE::Yandex::Direct::Frequency добавлена возможность выбрать все регионы или выбрать несколько определенных
• В парсере SE::Yandex::Direct::Frequency добавлена поддержка Яндекс аккаунтов, а так же поддержка AntiGate и парсинг по 500 ключевых слов за один запрос
• В парсере SE::Yandex::Direct::Frequency добавлена возможность выбора периода за последний месяц, за определенный месяц, за квартал или за год
  
• Для Windows и Linux улучшена поддержка юникода в именах файлах, независимо от языка интерфейса ОС
• Добавлена возможность просматривать логи только неудачных запросов
• В API добавлена возможность указать флаг removeOnComplete при добавлении задания, тем самым задания будут автоматически удалятся после завершения
• В просмотре логов теперь можно выделить данные для копирования
• В парсере Net::HTTP добавлен параметр Max cookies count, ограничивающий число Cookie для сохранения
• В парсере Net::HTTP расширен список кодов ответов, а также добавлена возможность указать регулярное выражения для проверки кода ответа
• В очереди заданий теперь можно искать необходимые задания по названию, номеру, подстроке в запросах, имени файлов запросов и результатов
• В парсере HTML::LinkExtractor добавлена опция Check next page, позволяющая расширить логику перехода по ссылкам
• Добавлена опция Page as new query, которая передает переход на следующую страницу как новый запрос, тем самым позволяя убрать ограничение на количество страниц для перехода

Исправления в связи с изменениями выдачи

• В парсере SE::Yandex исправлен парсинг связанных ключевых слов
• В парсере SE::Youtube исправлен парсинг количества видео по запросу
• Исправлен парсинг Google Blogs в парсере SE::Google
• Исправлены SE::AOL, SE::Ask, SE::Baidu, SE::Google, SE::Google::PR, SE::DisconnectMe, SE::QIP, SE::Yandex

Исправления

• Исправлено отображение длинных выпадающих меню
• Исправлена кодировка запросов в просмотре логов
• Исправлено падение при использовании опции Parse to level в некоторых ситуациях
• Исправлено падение в парсере SEO::Ping
• Прокси с авторизацией теперь сохраняются корректно в файл живых прокси alive.txt
• Исправлена работа с прокси при указании пустой пары логин\пароль для авторизации
• В парсере SE::Yandex::WordStat теперь при использовании опции Remove + from keywords плюсы удаляются также для фраз правого столбика
• Исправлено экранирование символа + в HTTP запросах

Все изменения и описания новых возможностей скоро будут доступны в документации