1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

А-Парсер и Пандора!

Тема в разделе "Трёп", создана пользователем Topper, 23 апр 2015.

Статус темы:
Закрыта.
  1. Антон

    Антон A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    7 июл 2013
    Сообщения:
    31
    Симпатии:
    9
    Topper, спасибо за ответ и потенциальные улучшения!

    Идея в том, чтобы снизить нагрузку на каждую отдельную пс, чередуя запросы то к одной, то к другой, и тем самым уменьшить расход прокси.
     
  2. nouton

    nouton A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    26 фев 2013
    Сообщения:
    9
    Симпатии:
    0
    Какой макрос вставлять в description, в текстовке часто парсятся разные символы и самый проблемный это " - кавычка, в шаблоне весь код ломается если поставить макрос [APTEXT-1-2] на место дескрипшена, а макрос [DESCRIPTION] не годится, не могу найти решения
     
  3. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    {REGREPLACE-(["'@#])-()}[APTEXT-1-2]{/REGREPLACE}
    Где ["'@#] - это произвольная регулярка, дополните ее символами на свой вкус.
    Ну и я бы еще поменял APTEXT на APFREETEXT, так как в APTEXT вставляются ключи, значит в зависимости от плотности туда может быть вставлен тег <b> или прочие исходя из настроек выделения ключей.
     
    List, btr, Force68 и ещё 1-му нравится это.
  4. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Ап 2.0
    Модуль теперь запускатся из пандоры, настройка упрощена, добавлено больше аналитики применения фич, улучшена автоматизация
    Неуспешно спаршенные ключи могут быть удалены из генерации, то есть страниц без контента не будет
    Обновлены юзермакросы - замените ваши новыми. Доп.настройка путей и кодировки в них больше не требуется.
    Добавлен парсер тайтлов - не забудьте сделать импорт нового пресета в A-Parser

    Работает только с PandoraBox 2.19 (доступно к скачиванию)

    Инструкцию прочитать нужно заново - процесс настройки и установки изменился.

    Скачать: http://pandoraboxx.ru/LinkAParser.zip
     
    #164 Topper, 26 янв 2016
    Последнее редактирование: 26 янв 2016
    kashim, Антон, Sobesednic и 3 другим нравится это.
  5. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    @Topper теперь нет разделения на x32 и x64 ?
     
  6. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Теперь LinkAParser.exe не разделяется по битности. Потому что LinkAParser.exe больше ничего кроме работы с настройками не делает.
    Вся полезная механика теперь переехала в саму пандору, а пандора как была в 2х версиях так и осталась: x64 и x86.

    Забыл рассказать про то как теперь включить парсинг.
    Теперь пандора сама смотрит шаблон и если есть LAP макросы, то запускает модуль.
    Причем именно те типы парсинга которые есть в шаблоне.

    Дальше. Если новая настройка "создавать только если спарсилось" содержит парсинг например видосов, но макросов видео в шаблоне нет, то это требование пропускается. Вроде логичнее стало.

    Спрашивайте что не ясно - настало время о**ительных историй :)
     
    Антон, btr, Force68 и ещё 1-му нравится это.
  7. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    Отличное обновление! Красавчик! )
    Вопрос такой, парсится титл, как сделать чтобы не получился титл у меня на сайте типо такого
    Кредиты на жилье и строительство -domen.ru
    а получился
    Кредиты на жилье и строительство

    то есть чтобы не было доменов левых +http:// в тексте спаршенного титла
     
  8. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Все домены из тайтлов уже сейчас заменяются на текущий домен текущего генерируемого дора.

    То есть из
    Кредиты на жилье и строительство labuda.ru
    получится
    Кредиты на жилье и строительство door.ru

    Помоему этот вариант лучше чем просто удалять - он приближенней к тому что спарсшено с выдачи
     
    btr, Force68, List и ещё 1-му нравится это.
  9. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    огонь!
     
  10. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    ухххх!!!
    Супер!
     
  11. kashim

    kashim A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 апр 2015
    Сообщения:
    36
    Симпатии:
    12
  12. nouton

    nouton A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    26 фев 2013
    Сообщения:
    9
    Симпатии:
    0
    что то я недогоню как теперь все работает
    обновил пандору, скачал link_aparser, файлы usermacro тоже залил
    сначало ругалось что нет какого ini файла, но я его перезалил со старой версии
    запускаю генерить дор, папка с тектами не появляется, где вообще этот режим включать теперь и как переключаться между обычным и lap
    Файл tuning.txt править надо?
     
  13. btr

    btr A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    11 фев 2013
    Сообщения:
    198
    Симпатии:
    116
    ридми надо прочитать! ;)
    Заного запусти линкапарсер, и настрой его заного.
     
    Topper нравится это.
  14. nouton

    nouton A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    26 фев 2013
    Сообщения:
    9
    Симпатии:
    0
    спс, помогло!
     
  15. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    В файле "data\usermacro\APVideo.cs" была опечатка - поправил и перезалил архив модуля.

    Для кого жирным выделял "Инструкцию прочитать нужно заново - процесс настройки и установки изменился." не понятно :)
     
  16. nouton

    nouton A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    26 фев 2013
    Сообщения:
    9
    Симпатии:
    0
    угу только я все делал по ридми, а помогла банальная перезагрузка пандоры, я уже какой раз с такими траблами встречаюсь и всегда решение ребут пандоры
     
  17. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Хорошо, добавлю в ридми что нужен перезапуск пандоры.
    Действительно, авторизация же выполняется при старте и только если в папке пандоры есть файлы модуля.
     
  18. nouton

    nouton A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    26 фев 2013
    Сообщения:
    9
    Симпатии:
    0
    немного оффтоп
    <?php if(is_human()){{ ?>бла<?php }} ?>
    <?php if(is_bot()){{ ?>бла<?php }} ?>

    я совершенно не пойму как оно работает, ставлю показывать боту он показывает и юзерам и боту, ставлю показывать только юзерам вообще никому не показывает, что я не так делаю?
     
  19. zhabka

    zhabka A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    29 авг 2015
    Сообщения:
    1
    Симпатии:
    0
    А в пакетной генерации удаление ключей из файла работает?
     
  20. sergeda

    sergeda A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2013
    Сообщения:
    193
    Симпатии:
    23
    @Topper Не качаются макросы по ссылке указанной в Linkaparser
     
Статус темы:
Закрыта.

Поделиться этой страницей