Visão geral e aplicação
Lista por tópicos de todos os scrapers integrados existentes no A-Parser com descrição e links para suas páginas.
Scrapers de motores de busca
| Nome do scraper | Descrição |
|---|---|
SE::Google | Extração de todos os dados dos resultados de busca do Google: links, âncoras, snippets, Related keywords, extração de blocos de anúncios. Processamento em múltiplas threads, contorno de ReCaptcha |
SE::Yandex | Extração de todos os dados dos resultados de busca do Yandex: links, âncoras, snippets, Related keywords, extração de blocos de anúncios. Profundidade máxima de extração |
SE::AOL | Extração de todos os dados dos resultados de busca da AOL: links, âncoras, snippets |
SE::Bing | Extração de todos os dados dos resultados de busca do Bing: links, âncoras, snippets, Related keywords, Profundidade máxima de extração |
SE::Baidu | Extração de todos os dados dos resultados de busca do Baidu: links, âncoras, snippets, Related keywords |
SE::Baidu | Extração de todos os dados dos resultados de busca do Baidu: links, âncoras, snippets, Related keywords |
SE::Dogpile | Extração de todos os dados dos resultados de busca do Dogpile: links, âncoras, snippets, Related keywords |
SE::DuckDuckGo | Extração de todos os dados dos resultados de busca do DuckDuckGo: links, âncoras, snippets |
SE::Seznam | Scraper do motor de busca tcheco seznam.cz: links, âncoras, snippets, Related keywords |
SE::Yahoo | Extração de todos os dados dos resultados de busca do Yahoo: links, âncoras, snippets, Related keywords, Profundidade máxima de extração |
SE::Youtube | Extração de dados dos resultados de busca do Youtube: links, título, descrição, nome de usuário, link para imagem de pré-visualização, número de visualizações, duração do vídeo |
SE::Ask | Scraper dos resultados de busca americanos do Google via Ask.com: links, âncoras, snippets, Related keywords |
SE::Rambler | Extração de todos os dados dos resultados de busca do Rambler: links, âncoras, snippets |
SE::Startpage | Extração de todos os dados dos resultados de busca do Startpage: links, âncoras, snippets |
Exemplos
🔗 Indexação de páginas no Google e Yandex
Indexação de páginas no Google e Yandex
🔗 Vídeo: Extração de dados de domínios temáticos por palavra-chave do Google
Vídeo: Extração de dados de domínios temáticos por palavra-chave do Google
🔗 Perguntas e respostas dos resultados de busca do Google
Perguntas e respostas dos resultados de busca do Google
🔗 Extração de dados de domínios temáticos por palavra-chave do Google e obtenção de vários parâmetros de domínio
Extração de dados de domínios temáticos por palavra-chave do Google e obtenção de vários parâmetros de domínio
🔗 Extração de dados do Google News com data e sua conversão
Extração de dados do Google News com data e sua conversão
🔗 Extração de dados apenas de snippets do Google
Extração de dados apenas de snippets do Google
🔗 Verificação ortográfica no Google
Verificação ortográfica no Google
🔗 Extração de dados de links e âncoras do Google para CSV
Extração de dados de links e âncoras do Google para CSV
🔗 Extração de dados de texto do buscador Google usando uma cadeia de tarefas
Extração de dados de texto do buscador Google usando uma cadeia de tarefas
🔗 Scraper de cache do Yandex
Scraper de cache do Yandex
🔗 Extração de dados apenas de snippets do Yandex
Extração de dados apenas de snippets do Yandex
🔗 Obtenção de resultados do Yandex e número da posição do resultado
Obtenção de resultados do Yandex e número da posição do resultado
🔗 Número de páginas de um site no Yandex
Número de páginas de um site no Yandex
🔗 Extração de dados de concorrência por palavra-chave do Yandex
Extração de dados de concorrência por palavra-chave do Yandex
🔗 Busca de nichos livres no segmento RU da internet
Busca de nichos livres no segmento RU da internet
Scrapers de posições em motores de busca
| Nome do scraper | Descrição |
|---|---|
SE::Google::Position | Verificação de posições de site por palavras-chave no Google: links, lista de todas as posições |
SE::Yandex::Position | Verificação de posições de site por palavras-chave no Yandex: links, lista de todas as posições |
SE::Bing::Position | Verificação de posições de site por palavras-chave no Bing: links, lista de todas as posições |
Exemplos
🔗 Obtenção de posições de site simultaneamente para várias regiões
Obtenção de posições de site simultaneamente para várias regiões
🔗 Obtenção de posições de site simultaneamente para várias regiões
Obtenção de posições de site simultaneamente para várias regiões
🔗 Visão geral das opções de representação de resultados
Visão geral das opções de representação de resultados
Scrapers de sugestões de motores de busca
| Nome do scraper | Descrição |
|---|---|
SE::Google::Suggest | Scraper de sugestões do Google: número de resultados por consulta, sugestões para a consulta, tipo de consulta |
SE::Yandex::Suggest | Scraper de sugestões do Yandex: número de resultados por consulta, sugestões para a consulta |
SE::Bing::Suggest | Scraper de sugestões do Bing: número de resultados por consulta, sugestões para a consulta |
SE::Aol::Suggest | Scraper de sugestões da Aol: número de resultados por consulta, sugestões para a consulta |
SE::Yahoo::Suggest | Scraper de sugestões do Yahoo: número de resultados por consulta, sugestões para a consulta |
SE::Youtube::Suggest | Scraper de sugestões do Youtube: sugestões para a consulta |
Exemplos
🔗 Preset para extração de dados de sugestões com a possibilidade de excluir sugestões que contenham stop-words
Preset para extração de dados de sugestões com a possibilidade de excluir sugestões que contenham stop-words
Scrapers de palavras-chave
| Nome do scraper | Descrição |
|---|---|
SE::Google::Trends | Scraper de palavras-chave em tendência de acordo com o Google |
SE::Yandex::WordCraft | Scraper de consultas de usuários e sites populares na busca do Yandex com Yandex Webmaster WordCraft |
SE::Yandex::Wordstat | Scraper de palavras-chave e estatísticas de impressões do serviço wordstat.yandex.ru |
SE::Yandex::Wordstat::ByDate | Scraper de estatísticas de impressões do Yandex WordStat por meses ou semanas, estatísticas de palavras-chave |
Rank::Bukvarix::Domain | Coleta de palavras-chave por domínio do Bukvarix: palavra-chave, frequência, posição |
Rank::Bukvarix::Keyword | Coleta de palavras-chave por palavra-chave do Bukvarix: palavra-chave, frequência, posição |
Rank::Ahrefs::KeywordDifficulty | Dificuldade de palavras-chave, palavras-chave, número de palavras-chave |
Rank::Ahrefs::KeywordGenerator | Coleta de palavras-chave do Ahrefs: ideias de palavras-chave, perguntas com palavras-chave |
SE::Google::KeywordPlanner | Coleta de sugestões, palavras-chave, concorrência, lances mín. e máx. |
SE::Yandex::Direct | Número de anúncios para uma consulta específica, título, texto e domínio, links, âncoras, tags |
Exemplos
🔗 Sazonalidade de palavras-chave
Sazonalidade de palavras-chave
🔗 Estimativa de frequência pelo WordStat
Estimativa de frequência pelo WordStat
🔗 Extração de dados do Wordstat em profundidade
Extração de dados do Wordstat em profundidade
🔗 Obtenção da lista de categorias do Google Trends
Obtenção da lista de categorias do Google Trends
🔗 Formatação de data do Google Trends
Formatação de data do Google Trends
Registro de contas
| Nome do scraper | Descrição |
|---|---|
SE::Yandex::Register | Registro de contas no Yandex |
Exemplos
🔗 Obtenção da lista completa de regiões do Yandex
Obtenção da lista completa de regiões do Yandex
🔗 Automação de registro de contas do Yandex
Automação de registro de contas do Yandex
Scrapers de parâmetros de sites e domínios
| Nome do scraper | Descrição |
|---|---|
SE::Google::TrustCheck | Verificação de confiança do site |
SE::Google::Compromised | Verificação da presença do aviso This site may be hacked |
SE::Google::SafeBrowsing | Verificação de domínio na lista negra do Google |
SE::Yandex::SafeBrowsing | Verificação de domínio na lista negra do Yandex |
SE::Yandex::SQI | Verificação do Índice de Qualidade do Site no Yandex |
Net::Whois | Determina se o domínio está registrado ou não, a data de criação do domínio, bem como a data de término do registro |
Net::Dns | O scraper resolve domínios em endereços IP |
Rank::Cms | Identifica todos os fóruns populares, blogs, CMS, guestbooks, wikis e muitos outros tipos de motores |
Rank::Archive | Scraper da data da primeira e última indexação do site no web archive |
Rank::MajesticSEO | Scraper do número de backlinks do serviço majesticseo.com |
Rank::Mustat | Avaliação do tráfego no site, bem como o custo e a classificação do domínio |
Rank::Social::Signal | Scraper de sinais sociais |
Rank::Curlie | Verificação da presença do site no diretório Curlie (análogo ao DMOZ) |
Rank::Ahrefs | Scraper do ahrefs.com |
Rank::KeysSo | Scraper do keys.so |
Rank::MOZ | Scraper do MOZ |
SecurityTrails::Ip | Coleta domínios por IP |
SecurityTrails::Domain | Scraper do SecurityTrails |
Exemplos
🔗 Extração de dados de domínios temáticos por palavra-chave do Google e obtenção de vários parâmetros de domínio
Extração de dados de domínios temáticos por palavra-chave do Google e obtenção de vários parâmetros de domínio
🔗 Informações sobre o site
Informações sobre o site
🔗 Net::Whois selecionando dados arbitrários
Net::Whois selecionando dados arbitrários
🔗 Recebimento de notificações no Telegram sobre o fim do prazo de registro de domínios
Recebimento de notificações no Telegram sobre o fim do prazo de registro de domínios
🔗 Coleta de base de endereços de e-mail
Coleta de base de endereços de e-mail
🔗 Definição da lista de domínios por IP
Definição da lista de domínios por IP
🔗 Identificação de CMS para 1.000.000 de domínios em 15 horas
Identificação de CMS para 1.000.000 de domínios em 15 horas
🔗 Extração de dados de domínios de sites por um CMS específico
Extração de dados de domínios de sites por um CMS específico
🔗 Sites WordPress com assinaturas
Sites WordPress com assinaturas
Scrapers de diversos serviços
| Nome do scraper | Descrição |
|---|---|
SE::Yandex::Register | Permite registrar contas no Yandex |
SE::Bing::Translator | Tradutor através do serviço www.bing.com/translator/ |
SE::Google::Translate | Tradutor Google |
SE::Yandex::Translate | Tradutor Yandex |
SE::Bing::Images | Scraper de imagens do motor de busca Bing |
SE::Google::Images | Scraper de imagens por palavras-chave do Google |
SE::Google::ByImage | Busca de imagens por link |
SE::Yandex::Images | Scraper de imagens por palavras-chave do Yandex |
SE::Yandex::ByImage | Scraper de imagens por link do Yandex |
SE::DuckDuckGo::Images | Scraper de imagens do DuckDuckGo |
SE::Dogpile::Images | Scraper de imagens do Dogpile |
Util::AntiGate | Reconhecimento de captcha através do serviço AntiGate |
Util::YandexRecognize | Reconhecimento de captcha do Yandex |
Util::ReCaptcha2 | Reconhecimento de recaptcha dos recursos Anti-captcha.com, Rucaptcha.com, Capmonster, Capmonster.cloud, Xevil, 2captcha, R.I.P.captcha |
SEO::Ping | Envio em massa de solicitações de Ping para serviços que suportam Weblog API (Google Blog Search, Feed Burner, Ping-o-Matic, etc.) |
Check::RosKomNadzor | Verificação de site na base do Roskomnadzor |
SE::Yandex::Speller | Verificação de páginas por erros no texto através do Yandex.Speller |
GooglePlay::Apps | Scraper de aplicativos do Google Play |
Social::Instagram::Post | Scraper de dados sobre postagens no Instagram |
Social::Instagram::Profile | Scraper de dados de perfis no Instagram |
Social::Instagram::Tag | Scraper de postagens por tags no Instagram |
Social::Instagram::Geo | Scraper de postagens no Instagram em uma localização especificada |
Telegram::GroupScraper | Scraper de dados de grupos públicos no Telegram |
API::Server::Redis | Trabalho com A-Parser via Redis |
SE::Google::Cache | Verificação da presença de páginas no cache do Google |
Social::Instagram::Geo | Scraper de postagens no Instagram em uma localização especificada |
DeepL::Translator | Tradutor de texto através do serviço www.deepl.com |
CoinMarketCap::LastPrice | Scraper da loja CoinMarketCap: nome do token, preço atual em USD |
Exemplos
🔗 Automação de registro de contas do Yandex
Automação de registro de contas do Yandex
🔗 Comparação de velocidade de tradutores
Comparação de velocidade de tradutores
🔗 Uso de arquivos inteiros como consultas
Uso de arquivos inteiros como consultas
🔗 Carregamento de arquivos de um diretório para tradução no DeepL
Carregamento de arquivos de um diretório para tradução no DeepL
🔗 Download de imagens com resolução e tamanho especificados
Download de imagens com resolução e tamanho especificados
🔗 Criação de scrapers JS. Trabalho com CAPTCHA
Criação de scrapers JS. Trabalho com CAPTCHA
🔗 Criação de scrapers JS. Trabalho com ReCaptcha2
Criação de scrapers JS. Trabalho com ReCaptcha2
🔗 Exemplo de trabalho com SEO::Ping
Exemplo de trabalho com SEO::Ping
🔗 Scraper de links de localização para Social::Instagram::Geo
Scraper de links de localização para Social::Instagram::Geo
🔗 Extração de dados de informações sobre usuários do Instagram
Extração de dados de informações sobre usuários do Instagram
🔗 Extração de dados de usuários de grupos públicos no Telegram
Extração de dados de usuários de grupos públicos no Telegram
Scrapers de lojas
| Nome do scraper | Descrição |
|---|---|
Shop::Amazon | Scraper dos resultados de busca do amazon.com |
Shop::Yandex::Market | Scraper do Yandex.Market |
Shop::AliExpress | Scraper dos resultados de busca do Shop::AliExpress |
Shop::eBay | Scraper dos resultados de busca do Ebay |
Shop::Wildberries::ProductsList | Scraper da lista de produtos Wildberries |
Shop::Wildberries::ProductInfo | Scraper da página de produto Wildberries |
Shop::Wildberries::Suggest | Scraper de sugestões de busca Wildberries |
Shop::Yandex::Market | Scraper de produtos do YANDEX.MARKET |
Exemplos
🔗 Extração de dados de produtos de um site
Extração de dados de produtos de um site
Scrapers de mapas
| Nome do scraper | Descrição |
|---|---|
Maps::Google | Scraper do Google Maps: nome da organização, endereço e coordenadas, classificação, número de avaliações e política de preços, site, telefone, foto |
Maps::Yandex | Scraper do Yandex Maps: nome da organização, endereço e coordenadas, classificação, número de avaliações e política de preços, site, telefone, foto, redes sociais |
Exemplos
🔗 Extração de dados do Google Maps para coletar todas as organizações em uma determinada localidade
Extração de dados do Google Maps para coletar todas as organizações em uma determinada localidade
Scrapers de conteúdo
| Nome do scraper | Descrição |
|---|---|
Check::BackLink | Verifica a localização do seu link (links) na base de links |
HTML::LinkExtractor | Scraper de links externos e internos de um site especificado, pode percorrer links internos até o nível selecionado |
HTML::ArticleExtractor | Scraper de artigos |
HTML::TextExtractor | Scraper de blocos de texto |
HTML::TextExtractor::LangDetect | Identificação do idioma da página, sem o uso de serviços de terceiros |
HTML::EmailExtractor | Extração de endereços de e-mail de páginas de sites |
Net::HTTP | Baixa a página especificada, suporta extração de múltiplas páginas |
Exemplos
🔗 Verificação de existência de links para a página no cache do Yandex
Verificação de existência de links para a página no cache do Yandex
🔗 Extração de dados de site em profundidade baseada no scraper HTML::LinkExtractor
Extração de dados de site em profundidade baseada no scraper HTML::LinkExtractor
🔗 Vídeo: Extração de dados do recurso Booking.com usando Net::HTTP
Vídeo: Extração de dados do recurso Booking.com usando Net::HTTP
🔗 Verificação periódica de backlinks com gravação adicional de resultados em tabela
Verificação periódica de backlinks com gravação adicional de resultados em tabela
🔗 Extração de dados de site em profundidade baseada no scraper HTML::LinkExtractor
Extração de dados de site em profundidade baseada no scraper HTML::LinkExtractor
🔗 Coleta de tópicos interligados
Coleta de tópicos interligados
🔗 Busca de subdomínios de um site
Busca de subdomínios de um site
🔗 Extração de dados de sites e salvamento de links para imagens
Extração de dados de sites e salvamento de links para imagens
🔗 Geração de sitemap.xml usando recursos de JavaScript
Geração de sitemap.xml usando recursos de JavaScript
🔗 Obtenção de páginas de um site e verificação de indexação no Google e Yandex
Obtenção de páginas de um site e verificação de indexação no Google e Yandex
🔗 Análise da velocidade de resposta das páginas no site
Análise da velocidade de resposta das páginas no site
🔗 Extração de dados de e-mail de páginas de contato
Extração de dados de e-mail de páginas de contato
🔗 Verificação do comprimento do texto nas páginas
Verificação do comprimento do texto nas páginas
🔗 Transliteração
Transliteração




























































































