1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Улучшение [1.2.1536] wordstat - останавливать если нет аккаунтов

Тема в разделе "1.2.1549", создана пользователем ozand, 10 апр 2022.

Метки:
  1. ozand

    ozand A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    23 ноя 2019
    Сообщения:
    49
    Симпатии:
    19
    Сейчас в процессе парсинга , аккаунты удаляются,если поставлена галочка удалять плохие аккаунты, и возникает ситуация, что парсер продолжает работать, и запросы сыпятся в Bad.

    Просьба добавить в парсер, приостановку отправку запросов в задания, если аккаунты все удалены.
    Тогда задания будут ждать новых аккаунтов, когда они будут добавлены или сгенерированы (к примеру у меня каждый день генерируется пачка по утрам)
     
    #1 ozand, 10 апр 2022
    wbtech нравится это.
  2. wbtech

    wbtech A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    1 июл 2019
    Сообщения:
    37
    Симпатии:
    3
    Поддерживаю, сделайте пожалуйста приостановку задания если нет аккаунтов.
     
    #2 wbtech, 6 май 2022
  3. wbtech

    wbtech A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    1 июл 2019
    Сообщения:
    37
    Симпатии:
    3
    Сделайте пожлауйста не остановку задания а ожидание. Т.е. пусть парсер ждёт появление новых аккаунтов(делает проверку на наличие аккаунтов каждые 30 секунд к примеру) и если аккаунты появились то продолжает парсинг.
     
    #3 wbtech, 16 май 2022
  4. wbtech

    wbtech A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    1 июл 2019
    Сообщения:
    37
    Симпатии:
    3
    И ещё одна вещь, которая бы нас спасла. Нужно как то допарсить аккаунты когда парсер находится в ожидании. Было бы совсем хорошо
     
    #4 wbtech, 16 май 2022
  5. wbtech

    wbtech A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    1 июл 2019
    Сообщения:
    37
    Симпатии:
    3
    Ещё что может реально помочь. Нужно минимизировать повторные входы в аккаунт с разных IP. Т.е. каждый раз брать свежий аккаунт из списка и не делать повторых входов в аккаунт с которого была взята сессия.
     
    #5 wbtech, 16 май 2022
    Последнее редактирование: 16 май 2022
  6. wbtech

    wbtech A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    1 июл 2019
    Сообщения:
    37
    Симпатии:
    3
    Коллеги ещё разок, можно ли реализовать такую схему.

    1. Минимизируем входы в аккаунты, т.е. всегда берем новый аккаунт, когда они заканчиваются идём по кругу(+ используем сессию)
    2. Если аккаунтов нет, парсер должен войти в цикл и ждать появление аккаунтов.
    3. Если аккаунтов нет, парсер должен поставить задачу на регистрацию новых аккаунтов(количество аккаунтов должно задаваться в настройках)

    Данная схема решает наши проблемы и здесь не нужно будет привязывать аккаунты к IP.

    Схема будет рабочей при достаточно большом количестве аккаунтов > 1000 к примеру

    Дополнительно к этой схеме нужно все IP сгруппировать по городам, и стараться делать запросы из одной локации в рамках аккаунта.
     
    #6 wbtech, 24 май 2022
    Последнее редактирование: 24 май 2022
  7. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.372
    Симпатии:
    2.102
    #7 Support, 16 июн 2022
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей