FreeAI::GoogleAI - Scraper do modo Google AI
Visão geral do scraper
O scraper Google AI mode é uma ferramenta poderosa para coletar informações estruturadas de um dos principais sistemas de IA, pois o AI mode funciona com base no Gemini do Google. Graças à integração com o Google AI mode, você obtém não apenas listas de links, mas respostas atuais, concisas e relevantes, baseadas em uma vasta quantidade de fontes, incluindo artigos científicos, blogs, fóruns e portais de notícias.
O scraper Google AI mode suporta consultas em linguagem natural, incluindo refinamentos, perguntas contextuais e construções aninhadas. A velocidade de processamento atinge 800–1500 consultas por minuto graças ao modo de processamento em múltiplas threads. Dependendo da configuração e dos modelos utilizados, você pode obter dezenas de milhares de fragmentos de texto exclusivos e centenas de links em poucos minutos.
Os resultados da extração podem ser salvos em qualquer formato necessário graças ao poderoso motor de modelos Template Toolkit, que permite estruturar dados em JSON, CSV, SQL e outros formatos, além de aplicar filtragem, ordenação e agregação de dados em tempo real.
O scraper FreeAI::GoogleAI é ideal para tarefas de inteligência competitiva, coleta de fatos e citações, criação de bases de conhecimento, monitoramento de notícias e análise de tópicos, devido à alta qualidade e contextualização dos resultados fornecidos.
Dados coletados
- Texto da resposta
- Links, âncoras e snippets das fontes de dados
Recursos
- Operação através de navegador real (Playwright) para contornar a proteção do Google
- Rotação automática e banimento de proxies bloqueados
- Suporte para seleção de idioma e país de busca
Casos de uso
- Coleta de respostas estruturadas para consultas temáticas para criação de bases de conhecimento, planos de conteúdo, sistemas de referência e geração de FAQ
- Extração de links para fontes com âncoras e snippets - ideal para construção de listas de recursos de autoridade, citações e coleta de backlinks
- Monitoramento de menções a marcas, produtos ou pessoas - com vínculo ao contexto e às fontes
- Busca e análise de opiniões de especialistas, tendências e insights de fontes de autoridade
- Verificação rápida da atualidade e completude da informação sobre temas-chave
- Automação da análise de concorrentes: quais recursos são citados, quais temas são abordados e com que frequência
- Suporte a projetos de pesquisa e analíticos que exigem a agregação de informações precisas de diferentes fontes
- Quaisquer outras tarefas onde seja necessário obter rapidamente respostas curtas e precisas com confirmação de fontes reais e contexto lógico
Consultas
Como consultas, é necessário indicar termos de pesquisa, exatamente como se fossem digitados diretamente no formulário de busca do Google AI mode, por exemplo:
How to learn fast?
How to improve memory and concentration?
What is a parser?
Resultados
Aqui e adiante, os exemplos de resultados foram abreviados para melhor clareza
Por padrão, é exibida a resposta à consulta, por exemplo:
A parser is a program that analyzes input data, typically text or code, and converts it into a structured format that a computer can understand and process.
Here's a breakdown of what a parser does:
Takes Input: Parsers receive input, which can be source code, data in a specific format (like XML or JSON), interactive commands, etc.
Breaks Down Input: The parser breaks the input into its constituent parts, such as keywords, operators, identifiers, and symbols, which are called tokens.
...
Opções de exibição de resultados
O A-Parser suporta formatação flexível de resultados graças ao motor de modelos integrado Template Toolkit, o que permite exibir resultados em forma livre, bem como estruturada, por exemplo CSV ou JSON.
Exibição apenas da resposta
Formato do resultado:
$query
Answer: $p1.answer
Exibição da resposta e fontes
Formato do resultado:
$query
Answer: $p1.answer
Sources:
$p1.sources.format('$link, $anchor, $snippet\n')
Exemplo de resultado:
What is a parser?
Answer: A parser is a program that analyzes input data, typically text or code...
Sources:
https://www.techtarget.com/searchapparchitecture/definition/parser, What is a Parser? - TechTarget, Jul 7, 2022 — What is a parser? In computer technology...
https://www.huntress.com/cybersecurity-101/topics/what-is-a-parser, What Is a Parser? - Huntress, May 27, 2025 — Ever wondered what happens behind the scenes...
Exportação de fontes para CSV
Formato do resultado:
[% FOREACH item IN p1.sources; tools.CSVline(loop.count, item.link, item.anchor, item.snippet); END %]
Exemplo de resultado:
1,https://www.pcmag.com,"Best Windows Laptop for Most People: HP OmniBook 5 14 (OLED, 34-hour battery)..."
2,https://www.tomshardware.com,"MacBook Air (M5) The Best Laptop (and Mac) overall. Strong performance..."
3,https://au.pcmag.com,"Best Budget MacBook. Apple MacBook Neo. 4.5 Outstanding. Pros & Cons..."
No nome do arquivo de resultados, é necessário alterar a extensão para .csv para a abertura correta no Excel e Google Sheets.
Configurações possíveis
| Nome do parâmetro | Valor padrão | Descrição |
|---|---|---|
| Language (hl) | en | Escolha do idioma dos resultados (parâmetro hl=) |
| Country (gl) | Auto (Based on IP) | Escolha do país de onde a pesquisa é realizada (parâmetro gl=) |
| Headless browser | ☐ | Iniciar o navegador em segundo plano sem GUI. Recomendado deixar desativado para melhor compatibilidade com o Google |
| Timeout (seconds) | 60 | Tempo máximo de espera pela resposta da página em segundos |
| Max browser pages | 10 | Número máximo de páginas abertas simultaneamente no navegador |
| Util::ReCaptcha2 preset | default | Predefinição para resolver o captcha do Google (página /sorry/). default — o captcha está desativado, o proxy é apenas rotacionado |