Zum Hauptinhalt springen

SE::Bing - Bing-Suchergebnis-Parser

Bing

Übersicht über den Parser​

Parser für die Bing-Suchergebnisse. Dank des SE::Bing-Parsers können Sie umfangreiche Datenbanken mit Links erhalten, die für die weitere Verwendung bereit sind. Sie können Abfragen in derselben Form verwenden, in der Sie sie in die Bing-Suchleiste eingeben, einschließlich Suchoperatoren (contains, intitle, language, site usw.). Weitere Details finden Sie auf der offiziellen Seite Advanced search keywords.

Die Funktionalität von A-Parser ermöglicht es Ihnen, die Datenerfassung-Einstellungen für den Bing-Parser zur späteren Verwendung zu speichern (Presets), Zeitpläne für die Datenerfassung festzulegen und vieles mehr. Sie können die automatische Abfragevervielfachung, die Substitution von Unterabfragen aus Dateien, das Durchlaufen von alphanumerischen Kombinationen und Listen verwenden, um die maximal mögliche Anzahl an Ergebnissen zu erzielen.

Das Speichern der Ergebnisse ist in der von Ihnen benötigten Form und Struktur möglich, dank des integrierten leistungsstarken Template-Engines Template Toolkit, der es ermöglicht, zusätzliche Logik auf die Ergebnisse anzuwenden und Daten in verschiedenen Formaten auszugeben, einschließlich JSON, SQL und CSV.

Anwendungsbeispiele für den Parser​

Gesammelte Daten​

  • Anzahl der Ergebnisse pro Abfrage
  • Links, Ankertexte und Snippets aus den Suchergebnissen
  • Liste verwandter Keywords (Related keywords)
  • Links, sichtbare Links, Ankertexte, Snippets und Anzeigenposition aus den Werbeergebnissen
Gesammelte Daten

Funktionen​

  • Unterstützung aller Bing-Suchoperatoren (site:, ip: usw.). Weitere Details zu Suchoperatoren auf der offiziellen Seite Advanced search keywords.
  • Extrahiert die von Bing maximal ausgegebene Anzahl an Ergebnissen - bis zu 200 Seiten der Suchergebnisse
  • Kann automatisch mehr als 1000 Ergebnisse pro Abfrage extrahieren - fügt zusätzliche Zeichen hinzu (Option Parse all results)
  • Möglichkeit zur Tiefenerfassung nach verwandten Keywords (Parse related to level)
  • Möglichkeit zur Suche nach verwandten Keywords
  • Möglichkeit, Links zu gecachten Seiten zu extrahieren
  • Möglichkeit, die mobile Suche zu extrahieren
  • Unterstützung für das Laden von Daten beim Scrollen im mobilen Layout

Auf Basis des Bing-Parsers arbeiten folgende Scraper:

  • SE::Bing::PositionSE::Bing::Position - Bestimmung der Positionen beliebiger Websites in den Suchergebnissen für eine Liste von Abfragen

Anwendungsfälle​

  • Sammeln von Linkdatenbanken - für A-Poster, XRumer, AllSubmitter usw.
  • Bewertung des Wettbewerbs für Keywords
  • Suche nach Backlinks (Erwähnungen) von Websites
  • Überprüfung der Indexierung von Websites
  • Suche nach anfälligen Websites
  • Suche nach Websites auf derselben IP-Adresse
  • Alle anderen Varianten, die das Scraping von Bing in der einen oder anderen Form beinhalten

Abfragen​

Als Abfragen müssen Suchphrasen angegeben werden, genau so, als ob sie direkt in das Bing-Suchformular eingegeben würden, zum Beispiel:

test
fenster Berlin   
site:http://lenta.ru  
ip:222.36.12.12

Abfrage-Substitutionen​

Sie können integrierte Makros zur Vervielfachung von Abfragen verwenden. Wenn wir beispielsweise eine sehr große Datenbank von Foren erhalten möchten, geben wir einige Hauptabfragen in verschiedenen Sprachen an:

forum
forum
foro
论坛

Im Abfrageformat geben wir den Durchlauf von Zeichen von a bis zzzz an. Diese Methode ermöglicht es, die Suchergebnisse maximal zu rotieren und viele neue einzigartige Ergebnisse zu erhalten:

$query {az:a:zzzz}

Dieses Makro erstellt 475254 zusätzliche Abfragen für jede ursprüngliche Suchanfrage, was insgesamt 4 x 475254 = 1901016 Suchanfragen ergibt. Eine beeindruckende Zahl, aber für A-Parser absolut kein Problem. Bei einer Geschwindigkeit von 2000 Anfragen pro Minute wird eine solche Aufgabe in nur 16 Stunden abgearbeitet.

Verwendung von Operatoren​

Sie können Suchoperatoren im Abfrageformat verwenden, sodass diese automatisch zu jeder Abfrage aus Ihrer Liste hinzugefügt werden:

site:$query

Beispiele für die Ergebnisausgabe​

A-Parser unterstützt eine flexible Formatierung der Ergebnisse dank des integrierten Template-Engines Template Toolkit, was es ermöglicht, Ergebnisse in beliebiger Form sowie strukturiert, zum Beispiel als CSV oder JSON, auszugeben.

Export einer Linkliste​

Analog wie in SE::Google.

Analog wie in SE::Google.

Analog wie in SE::Google.

Analog wie in SE::Google.

Keyword-Wettbewerb​

Analog wie in SE::Google.

Überprüfung der Link-Indexierung​

Analog wie in SE::Google.

Speichern im SQL-Format​

Analog wie in SE::Google.

Ergebnis-Dump in JSON​

Analog wie in SE::Google.

Ergebnisverarbeitung​

A-Parser ermöglicht es, Ergebnisse direkt während der Datenerfassung zu verarbeiten. In diesem Abschnitt haben wir die beliebtesten Anwendungsfälle für den Bing-Parser aufgeführt.

Analog wie in SE::Google.

Analog wie in SE::Google.

Domain-Extraktion​

Analog wie in SE::Google.

Entfernen von Tags aus Ankern und Snippets​

Analog wie in SE::Google.

Analog wie in SE::Google.

Mögliche Einstellungen​

Hinweis

Allgemeine Einstellungen für alle Parser

Name des ParametersStandardwertBeschreibung
Pages count10Anzahl der zu scrapenden Seiten (von 1 bis 200)
RegionBased on IPAuswahl der Region. Liste der Regionen.
Interface languageAnyAuswahl der Oberflächensprache. Liste der Sprachen.
Safe SearchModerateAuswahl der SafeSearch-Option (Strict / Moderate / Off)
DeviceDesktopAuswahl des Suchgeräts (Desktop / Mobile)
Show inaccessible results☐Ermöglicht die Anzeige ausgeblendeter Ergebnisse
Stop pagination by results count0Stoppt den Durchlauf der Paginierung bei Erreichen einer festgelegten Anzahl von Ergebnissen. Arbeitet zusätzlich zu Pages count; das Scraping stoppt je nachdem, was zuerst erreicht wird: die festgelegte Seitenanzahl oder die festgelegte Anzahl an Ergebnissen.