1.2.246 - обновление базы Rank::CMS и новые функции в парсерах Baidu и MajesticSEO

Тема в разделе "Новости", создана пользователем Support, 2 июл 2018.

  1. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    2.134
    Симпатии:
    1.461
    [​IMG]
    Улучшения
    • В Rank::CMS Rank::CMS обновлена база определяемых движков, теперь поддерживается одновременно старый и новый формат apps.json (при обновлении рекомендуется также обновить apps.json)
    • SE::Baidu SE::Baidu полностью переписан:
      • добавлен парсинг related keywords
      • убран $cachedate из $serp, т.к. его похоже больше нет в выдаче
      • добавлена опция Get full link, преобразующая обрезанные ссылки в полные
      • исправлены некоторые регулярные выражения и баг с двойным http в ссылках
    • Изменения в Rank::MajesticSEO Rank::MajesticSEO:
      • Добавлен параметр Check type, позволяет выбрать тип проверки: Root Domain/Subdomin/URL
      • Убран параметр Extract domain
      • Исправлена работа в некоторых случаях
    • Улучшена отзывчивость в редакторе JavaScript парсеров
    • Улучшена работа HTML::EmailExtractor HTML::EmailExtractor, устранены зависания, которые возникали на определенных страницах
    • Обновлен список регионов в парсерах Яндекс
    • Пустой результат в SE::Google::Trends SE::Google::Trends больше не считается неудачным запросом
    • Улучшена работа с сессиями в SE::Yandex::WordStat SE::Yandex::WordStat
    Исправления в связи с изменениями в выдаче
    • Исправлен парсинг рекламы в SE::Yandex SE::Yandex
    • Исправлена работа, а также улучшен алгоритм парсинга в SE::DuckDuckGo SE::DuckDuckGo
    • Исправлено указание региона в парсерах Яндекс
    • Исправлен парсинг $ads.$i.visiblelink в SE::Google::Modern SE::Google::Modern
    • Исправлен парсинг $totalcount в SE::Yandex::Direct SE::Yandex::Direct
    Исправления
    • Исправлена ошибка, из-за которой процент обработанных запросов мог быть больше 100
    • Исправлены ошибки, из-за которых парсинг мог зависать при снятии с паузы, а также сбивался перебор в макросах подстановок
    • Исправлено отображение кириллицы в $headers в Net::HTTP Net::HTTP
    • Исправлена ошибка в Конструкторе результатов, из-за которой в редких случаях парсер мог падать
    • Устранена проблема с кодировкой при работе с SQLite
    • Исправлена ошибка со сменой прокси в JavaScript парсерах
     
    relay и Forbidden нравится это.
  2. Vvtex

    Vvtex A-Parser Pro License
    A-Parser Pro

    Регистрация:
    9 окт 2017
    Сообщения:
    103
    Симпатии:
    17
    https://prnt.sc/k84yg8
    нет "1C-Bitrix", "2z Project", начинается с "3dCart"
    обновился, бету ставил и apps.json обновлял. Первых двух CMS нет
     
  3. relay

    relay A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 июл 2013
    Сообщения:
    121
    Симпатии:
    74
    1. https://raw.githubusercontent.com/AliasIO/Wappalyzer/master/src/apps.json - сохраняем
    2. заменяем файл, который лежит тут files/Rank-CMS/
    3. перезапускаем a-parser
    4. [​IMG]
    5. 2z Project - нет в обновленном apps.json на github
     
    Support и Vvtex нравится это.

Поделиться этой страницей