Парсер постов из Twitter 2.0

Twitter закрыл возможность вытаскивать посты из HTML. Парсер перестал собирать данные. В этом обновлении парсинг постов был исправлен. Теперь для работы парсера нужно установить puppeteer, с помощью которого реализовано получение необходимых для парсинга cookie. Рекомендуемая версия – [email protected].

Изменился также список получаемых данных, теперь он имеет следующий вид:

• user_uri - ссылка на пользователя
• user_screen_name - логин
  
• user_name - имя пользователя
  
• user_description - описание профиля пользователя
  
• user_location - местоположение пользователя
  
• user_profile_image - изображение профиля пользователя
  
• user_favourites_count - кол-во избранных постов
  
• user_followers_count - кол-во подписчиков
  
• user_friends_count - кол-во друзей
  
• user_created_at - дата регистрации пользователя
  
• user_verified - верифицирован ли пользователь
  
• user_lang - язык пользователя
  
• tweet_created_at - дата создания поста
  
• tweet_favorite_count - сколько раз добавлен в избранное
  
• tweet_full_text - текст поста
  
• tweet_lang - язык поста
  
• tweet_quote_count - сколько раз процитирован
  
• tweet_reply_count - кол-во ответов
  
• tweet_retweet_count - кол-во ретвитов
  
• tweet_geo - гео
  
• tweet_place - место
  
• tweet_media - приложенное изображение

В качестве запросов ключевые слова.

Результаты: