Ga naar de hoofdinhoud

SE::Ask - Scraper voor Amerikaanse Google-zoekresultaten via Ask.com

img

Overzicht van de scraper

Scraper van de Ask zoekresultaten. Dankzij de Ask scraper kunt u grote databases met links verkrijgen, klaar voor verder gebruik. U kunt zoekopdrachten gebruiken op dezelfde manier als u ze invoert in de Ask-zoekbalk, inclusief zoekoperators (site, inurl, enz.).

De functionaliteit van A-Parser maakt het mogelijk om instellingen voor de Ask scraper op te slaan voor toekomstig gebruik (presets), een schema voor gegevensextractie in te stellen en nog veel meer. U kunt automatische query-vermenigvuldiging gebruiken, subquery's uit bestanden invoegen, alfanumerieke combinaties en lijsten doorlopen om het maximaal mogelijke aantal resultaten te verkrijgen.

Het opslaan van resultaten is mogelijk in de vorm en structuur die u nodig heeft, dankzij de ingebouwde krachtige sjabloon-engine Template Toolkit waarmee u extra logica op de resultaten kunt toepassen en gegevens in verschillende formaten kunt uitvoeren, waaronder JSON, SQL en CSV.

Verzamelde gegevens

  • Links, ankers en snippets uit de zoekresultaten
  • Gerelateerde trefwoorden
Verzamelde gegevens

Mogelijkheden

  • Scrapt het maximaal aantal geleverde resultaten - 10 pagina's
  • Scrapt tot 100 resultaten van de Amerikaanse zoekresultaten van Ask.com
  • Mogelijkheid om gerelateerde trefwoorden te verzamelen

Toepassingen

  • Verzamelen van linkdatabases - voor A-Poster, XRumer, AllSubmitter, enz.
  • Beoordeling van concurrentie voor zoekwoorden
  • Zoeken naar backlinks (vermeldingen) van websites
  • Controle van website-indexering
  • Zoeken naar kwetsbare websites
  • Alle andere scenario's die het scrapen van Ask.com in een of andere vorm inhouden

Zoekopdrachten

Als zoekopdrachten moeten zoektermen worden opgegeven, precies zoals ze rechtstreeks in het zoekformulier van Ask.com zouden worden ingevoerd, bijvoorbeeld:

test
ramen Moskou

Query-substituties

U kunt ingebouwde macro's gebruiken voor query-vermenigvuldiging, bijvoorbeeld als we een zeer grote database met forums willen verkrijgen, geven we enkele basiszoekopdrachten in verschillende talen op:

forum
forum
foro
论坛

In het query-formaat geven we het doorlopen van tekens aan van a tot zzzz, deze methode maakt het mogelijk om de zoekresultaten maximaal te roteren en veel nieuwe unieke resultaten te verkrijgen:

$query {az:a:zzzz}

Deze macro zal 475254 extra zoekopdrachten maken voor elke oorspronkelijke zoekopdracht, wat in totaal 4 x 475254 = 1901016 zoekopdrachten oplevert, een indrukwekkend getal, maar dit is absoluut geen probleem voor A-Parser. Bij een snelheid van 2000 zoekopdrachten per minuut wordt een dergelijke taak in slechts 16 uur verwerkt.

Gebruik van operators

U kunt zoekoperators gebruiken in het query-formaat, zodat deze automatisch aan elke zoekopdracht uit uw lijst worden toegevoegd:

site:$query

Voorbeelden van resultaatuitvoer

A-Parser ondersteunt flexibele formattering van resultaten dankzij de ingebouwde sjabloon-engine Template Toolkit, waardoor resultaten in een willekeurige vorm kunnen worden uitgevoerd, evenals in gestructureerde formaten zoals CSV of JSON

Export van een lijst met links

Hetzelfde als in SE::Google.

Hetzelfde als in SE::Google.

Hetzelfde als in SE::Google.

Hetzelfde als in SE::Google.

Opslaan in SQL-formaat

Hetzelfde als in SE::Google.

Dump van resultaten in JSON

Hetzelfde als in SE::Google.

Verwerking van resultaten

A-Parser maakt het mogelijk om resultaten direct tijdens het scrapen te verwerken, in deze sectie hebben we de meest populaire cases voor de Ask scraper opgenomen

Hetzelfde als in SE::Google.

Hetzelfde als in SE::Google.

Domeinen extraheren

Hetzelfde als in SE::Google.

Tags verwijderen uit ankers en snippets

Hetzelfde als in SE::Google.

Hetzelfde als in SE::Google.

Mogelijke instellingen

Naam parameterStandaardwaardeBeschrijving
Pages count5Aantal pagina's om te scrapen (van 1 tot 10)
Use http2Gebruik http2