SE::AOL::Suggest - Scraper di suggerimenti di ricerca AOL
Panoramica dello scraper
Scraper di suggerimenti di ricerca per parole chiave in AOL. Grazie allo scraper SE::AOL::Suggest potrai raccogliere automaticamente database di chiavi dai suggerimenti del motore di ricerca AOL su richiesta. Utilizzando lo scraper SE::AOL::Suggest è possibile estrarre facilmente e velocemente i suggerimenti di AOL per query.
Grazie al multithreading di A-Parser, la velocità di elaborazione delle query può raggiungere 4700 richieste al minuto, il che consente mediamente di ottenere fino a 13500-14500 risultati al minuto.
Puoi utilizzare la moltiplicazione automatica delle query, la sostituzione di sotto-query da file, l'iterazione di combinazioni alfanumeriche e liste per ottenere il massimo numero possibile di risultati. Utilizzando la filtrazione dei risultati puoi pulire immediatamente il risultato, rimuovendo tutta la spazzatura non necessaria (utilizzando le parole negative).
La funzionalità di A-Parser consente di salvare le impostazioni di scraping dello scraper SE::AOL::Suggest per un utilizzo futuro (preset), impostare pianificazioni di scraping e molto altro.
Il salvataggio dei risultati è possibile nella forma e struttura di cui hai bisogno, grazie al potente motore di modelli integrato Template Toolkit che consente di applicare logica aggiuntiva ai risultati e di esportare i dati in vari formati, inclusi JSON, SQL e CSV.
Dati raccolti
- Numero di risultati per query
- Suggerimenti per la query
Funzionalità
- Supporto per tutti gli operatori di ricerca AOL (site: ecc.)
- Estrae il numero massimo di risultati forniti da AOL - 100 pagine con 20 elementi per pagina
Casi d'uso
- Raccolta di database di parole chiave
Query
Come query è necessario indicare frasi di ricerca, ad esempio:
write essay
Football
Speak in english
forex
cheap essay
Sostituzioni nelle query
Puoi utilizzare i macro integrati per la sostituzione automatica di sotto-query da file, ad esempio se vogliamo aggiungere a ogni query una lista di altre parole, indichiamo alcune query principali:
essay
article
thesis
Nel formato delle query indichiamo il macro di sostituzione di parole aggiuntive dal file Keywords.txt, questo metodo permette di aumentare esponenzialmente la variabilità delle query:
{subs:Keywords} $query
Questo macro creerà tante query aggiuntive quante sono presenti nel file per ogni query di ricerca iniziale, il che risulterà in [numero di query iniziali] x [numero di query nel file Keywords] = [numero totale di query] come risultato del lavoro del macro.
Ad esempio, se il file Keywords.txt contiene:
buy
cheap
Alla fine il macro di sostituzione trasformerà 3 query principali in 6:
buy essay
cheap essay
buy article
cheap article
buy thesis
cheap thesis
Esempi di output dei risultati
A-Parser supporta la formattazione flessibile dei risultati grazie al motore di modelli integrato Template Toolkit, che gli consente di produrre risultati in forma libera o strutturata, come CSV o JSON
Esportazione della lista di suggerimenti
Analogamente a SE::Google::Suggest.
Output in tabella CSV
Analogamente a SE::Google::Suggest.
Salvataggio in formato SQL
Formato del risultato:
[% FOREACH results;
"INSERT INTO serp VALUES('" _ query _ "', '"; suggest _ "')\n";
END %]
Esempio di risultato:
INSERT INTO serp VALUES('write essay', 'write essay for me')
INSERT INTO serp VALUES('write essay', 'write essay')
INSERT INTO serp VALUES('write essay', 'write essay online')
INSERT INTO serp VALUES('write essay', 'write essay for you')
INSERT INTO serp VALUES('write essay', 'write essay free')
INSERT INTO serp VALUES('write essay', 'write essay conclusion')
INSERT INTO serp VALUES('write essay', 'write essay today')
INSERT INTO serp VALUES('write essay', 'write essays for money')
...
Dump dei risultati in JSON
Analogamente a SE::Google::Suggest.
Elaborazione dei risultati
A-Parser consente di elaborare i risultati direttamente durante lo scraping, in questa sezione abbiamo riportato i casi più popolari per lo scraper SE::AOL::Suggest
Opzione Parse to level
Analogamente a SE::Google::Suggest.
Filtrazione dei risultati (uso di parole negative)
Analogamente a SE::Google::Suggest.