SE::Yahoo::Suggest - Yahoo Suggest Scraper
Overzicht van de scraper
Scraper voor zoeksuggesties op basis van trefwoorden in Yahoo. De Yahoo suggesties scraper lost een van de belangrijkste SEO-taken op, namelijk het snel en geautomatiseerd verkrijgen van een uitgebreide semantische kern. Dankzij de SE::Yahoo::Suggest scraper kunt u automatisch databases met zoekwoorden verzamelen uit de suggesties van de zoekmachine Yahoo op basis van een query. Met de SE::Yahoo::Suggest scraper kunt u eenvoudig en snel Yahoo-suggesties scrapen voor een query op basis van het geselecteerde domein.
Dankzij de multithreading van A-Parser kan de verwerkingssnelheid oplopen tot 7700 query's per minuut, wat gemiddeld tot 51000 resultaten per minuut oplevert.
U kunt automatische query-vermenigvuldiging gebruiken, subquery's uit bestanden invoegen, alfanumerieke combinaties en lijsten doorlopen om het maximaal mogelijke aantal resultaten te verkrijgen. Met behulp van resultaatfiltering kunt u het resultaat direct opschonen door alle ongewenste ruis te verwijderen (met behulp van uitsluitingswoorden).
De functionaliteit van A-Parser maakt het mogelijk om de instellingen voor gegevensextractie van de SE::Yahoo::Suggest scraper op te slaan voor toekomstig gebruik (presets), een schema voor gegevensextractie in te stellen en nog veel meer.
Het opslaan van resultaten is mogelijk in de vorm en structuur die u nodig heeft, dankzij de ingebouwde krachtige sjabloon-engine Template Toolkit waarmee u extra logica op de resultaten kunt toepassen en gegevens in verschillende formaten kunt uitvoeren, waaronder JSON, SQL en CSV.
Verzamelde gegevens
- Aantal resultaten per query
- Suggesties bij de query
Mogelijkheden
- Domeinkeuze
Toepassingen
- Verzamelen van zoekwoorddatabases
Query's
Als query's moeten zoekfrasen worden opgegeven, bijvoorbeeld:
write essay
Football
Waterfall
Speak in english
Cats and dogs
forex
cheap essay
Query-substituties
U kunt ingebouwde macro's gebruiken voor de automatische substitutie van subquery's uit bestanden. Als we bijvoorbeeld aan elke query een lijst met andere woorden willen toevoegen, geven we enkele basisquery's op:
essay
article
thesis
In het query-formaat geven we de macro op voor de substitutie van extra woorden uit het bestand Keywords.txt. Deze methode maakt het mogelijk de variatie van query's aanzienlijk te vergroten:
{subs:Keywords} $query
Deze macro maakt voor elke oorspronkelijke zoekopdracht evenveel extra query's aan als er in het bestand staan, wat resulteert in [aantal oorspronkelijke query's(domeinen)] x [aantal query's in het bestand Keywords] = [totaal aantal query's] als resultaat van de macro.
Bijvoorbeeld, als het bestand Keywords.txt het volgende bevat:
buy
cheap
Uiteindelijk zal de substitutie-macro de 3 basisquery's veranderen in 6:
buy essay
cheap essay
buy article
cheap article
buy thesis
cheap thesis
Voorbeelden van resultaatuitvoer
A-Parser ondersteunt flexibele formattering van resultaten dankzij de ingebouwde sjabloon-engine Template Toolkit, waardoor resultaten in een vrije vorm kunnen worden uitgevoerd, evenals in gestructureerde formaten zoals CSV of JSON.
Exporteren van een lijst met suggesties
Vergelijkbaar met SE::Google::Suggest.
Uitvoer naar een CSV-tabel
Vergelijkbaar met SE::Google::Suggest.
Zoekwoordconcurrentie
Opslaan in SQL-formaat
Resultaatformaat:
[% FOREACH results;
"INSERT INTO serp VALUES('" _ query _ "', '"; suggest _ "')\n";
END %]
Voorbeeld van resultaat:
INSERT INTO serp VALUES('write essay', 'write essay for me')
INSERT INTO serp VALUES('write essay', 'write essay online')
INSERT INTO serp VALUES('write essay', 'write essay for you')
INSERT INTO serp VALUES('write essay', 'write essay free')
INSERT INTO serp VALUES('write essay', 'write essays')
INSERT INTO serp VALUES('write essay', 'write essay conclusion')
INSERT INTO serp VALUES('write essay', 'write essay on covid 19')
INSERT INTO serp VALUES('write essay', 'write essay today')
INSERT INTO serp VALUES('write essay', 'write essays for money')
INSERT INTO serp VALUES('write essay', 'write essay online for free')
...
Dump van resultaten in JSON
Vergelijkbaar met SE::Google::Suggest.
Verwerking van resultaten
A-Parser maakt het mogelijk om resultaten direct tijdens de gegevensextractie te verwerken. In deze sectie hebben we de meest populaire use-cases voor de SE::Yahoo::Suggest scraper verzameld.
Optie Scrapen tot niveau (Parse to level)
Vergelijkbaar met SE::Google::Suggest.
Resultaatfiltering (gebruik van uitsluitingswoorden)
Vergelijkbaar met SE::Google::Suggest.
Mogelijke instellingen
| Naam parameter | Standaardwaarde | Beschrijving |
|---|---|---|
| Yahoo domain | sugg.search.yahoo.com | Keuze van het Yahoo-domein, hiermee kunt u de zoektaal selecteren |