1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

А-Парсер и Пандора!

Тема в разделе "Трёп", создана пользователем Topper, 23 апр 2015.

Статус темы:
Закрыта.
Страница 6 из 22
  1. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Полный лог с момента запуска в тикеты - попробую разобраться
     
    #101 Topper, 28 авг 2015
    Sobesednic нравится это.
  2. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Спасибо, в тикете посмотрел лог.
    Программа не закрывается специально чтобы акцентировать внимание на возникшей ошибке.
    В данном случае она была такая:
    Код:
    13.08.15 12:30:27 - [TXT] WebException [x64]: Базовое соединение закрыто: Непредвиденная ошибка при приеме.
Не удается прочитать данные из транспортного соединения: Удаленный хост принудительно разорвал существующее подключение.
Удаленный хост принудительно разорвал существующее подключение
    Парсер перестал реагировать на обращения к нему.
    Если бы программа закрылась то вы бы не заметили что что-то пошло не так.
     
    #102 Topper, 28 авг 2015
  3. Semen

    Semen A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    31 май 2013
    Сообщения:
    3
    Симпатии:
    0
    Насколько сложно добавить еще пару произвольных заданий.
    [​IMG]
     
    #103 Semen, 28 сен 2015
  4. Sobesednic

    Sobesednic A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 сен 2014
    Сообщения:
    44
    Симпатии:
    14
    Ребята вопрос к тем кто пользуется LinkAParser-ом.

    Столкнулся с такой проблемой, допустим есть база кеев на 350к, генерируем доры с удалением кеев, кеи закончились, генерируем повторно на тех же кеях (350к) по логике программы LinkAParser парсить теперь ничего ненужно, будет браться контент из ранее спаршенного.

    У меня происходит такая ситуация, при повторной генерации находит контент максимум для 100 кеев и происходит повторный парсинг.

    По наблюдениям если кеев 50-100 к (пандора и LinkAParser в отдельной папке и работает только с теми кеями ) работает нормально.

    Как у вас работает?

    С Topper-ом общались, смотрел он на сервер у меня, договорились провести кое какие тесты, но интересует как работает у других пользователей.
     
    #104 Sobesednic, 29 сен 2015
  5. kashim

    kashim A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 апр 2015
    Сообщения:
    36
    Симпатии:
    12
    У меня повторно парсит по 5-10 кеев. И такое чувство, что они в кеш все равно не сохраняются. Потому что в следующий раз будет парсить такое же число по-новой.
     
    #105 kashim, 30 сен 2015
    Sobesednic нравится это.
  6. Sobesednic

    Sobesednic A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 сен 2014
    Сообщения:
    44
    Симпатии:
    14
    Какое количество кеев в базе?
     
    #106 Sobesednic, 30 сен 2015
  7. kashim

    kashim A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 апр 2015
    Сообщения:
    36
    Симпатии:
    12
    С разными базами, от 100к.
     
    #107 kashim, 30 сен 2015
    Sobesednic нравится это.
  8. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Друзья!
    Не включайте вот эту опцию если хотите повторно применять контент

    [​IMG]

    Эта опция не совместима с LinkAParser.
    Точнее работать будет, но второй раз по этим же ключам парсинг будет выполнятся заново так как слова в ключах мешаются каждый раз рандомно.
    Фактически после перемешивания у вас будут новые ключи из старых слов :)
    Sobesednic помог разобраться, за что ему большое спасибо.
     
    #108 Topper, 2 окт 2015
    kashim, Force68, List и ещё 1-му нравится это.
  9. Sobesednic

    Sobesednic A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    12 сен 2014
    Сообщения:
    44
    Симпатии:
    14
    Topper это нужно в первый пост поместить
     
    #109 Sobesednic, 2 окт 2015
  10. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    На каких языках можно делать дорвеи с такой связкой?
     
    #110 bigve, 9 окт 2015
  11. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    На арабском/японском/китайском нельзя, остальные можно.
     
    #111 Topper, 9 окт 2015
  12. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    1.можно пожалуйста пример дора?
    2. дорген умеет прятать дорвеи под популярные цмс?
     
    #112 bigve, 16 окт 2015
    Последнее редактирование: 16 окт 2015
  13. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    1. Пример, закрытый от индексации http://pandoraboxx.ru/test/lap/
    Реальный пример дора вряд ли кто-то спалит, но вообще хз, может найдутся желающие.
    2. Встроенной функции "прятать" нету, это решается на уровне шаблона - парсим WP/DLE, расставляем макросы.
     
    #113 Topper, 16 окт 2015
    bigve нравится это.
  14. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    понял, спасибо, то что и просил)
    3.Есть ли шаблонизатор какойто? платный скрипт под сеодор, чтобы автоматом делать шаблоны?
     
    #114 bigve, 16 окт 2015
  15. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    3. конвертор шаблонов из DLE в PandoraBox в разработке - готов процентов на 70%
     
    #115 Topper, 16 окт 2015
    2furious, limoshkaa, List и 2 другим нравится это.
  16. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    а из wp будет?
     
    #116 bigve, 17 окт 2015
  17. Apalon

    Apalon A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    31 июл 2015
    Сообщения:
    20
    Симпатии:
    2
    Pocemu I razrabocik pandorabox I seodor vibrali convertor sablonov pot dle ? a ne pod Wp cem on lutse ili on populearnei ?ili lehce v sciom preimusestava
     
    #117 Apalon, 17 окт 2015
  18. alkoustas

    alkoustas A-Parser Pro License
    A-Parser Pro

    Регистрация:
    6 мар 2013
    Сообщения:
    24
    Симпатии:
    10
    #118 alkoustas, 17 окт 2015
    vipdenya и bigve нравится это.
  19. Topper

    Topper Active Member

    Регистрация:
    15 апр 2015
    Сообщения:
    112
    Симпатии:
    172
    Из WP сложнее так как DLE шаблоны - это реально шаблоны с макросами, а WP шабы - это php скрипты
     
    #119 Topper, 17 окт 2015
  20. bigve

    bigve A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 июл 2015
    Сообщения:
    36
    Симпатии:
    4
    просто под вп, намного больше нужно просто... я думаю многим бы понадобилось, то под дле мне как то не нужно вообщем..
     
    #120 bigve, 19 окт 2015
Страница 6 из 22
Статус темы:
Закрыта.

Поделиться этой страницей