Zum Hauptinhalt springen

Mehrere Scraper in einer Aufgabe

Funktionen​

A-Parser unterstützt die Verarbeitung von Abfragen durch mehrere Scraper gleichzeitig, was Folgendes ermöglicht:

  • Die Ergebnisse mehrerer Suchmaschinen gleichzeitig extrahieren
  • Domänen nach einer Vielzahl von Parametern analysieren
  • Gleichzeitig Keywords aus Vorschlägen verschiedener Suchmaschinen und Yandex.Wordstat sammeln
  • Whois- und DNS-Informationen für Domänen sammeln
  • Viele weitere Anwendungsszenarien

Einen Parser hinzufügen​

Um einen neuen Parser hinzuzufügen, klicken Sie einfach auf die Schaltfläche Add Parser (Parser hinzufügen) im Task-Editor:

Schaltfläche Parser hinzufügen im Task-Editor

Jeder Parser ist nummeriert. Die Ergebnisse für jeden Parser im Ergebnis-Builder und bei der Ergebnisformatierung sind über Kürzel verfügbar:

$p1, $p2... - wobei die Zahl die Nummer des Parsers angibt.

Im allgemeinen Ergebnisformat werden standardmäßig nacheinander die Ergebnisse für jeden Parser ausgegeben, in dem Format, das in den Einstellungen jedes Parsers festgelegt ist.

Die Verwendung mehrerer Scraper in einer Aufgabe erhöht die Gesamtgeschwindigkeit der Datenerfassung, da die Anzahl der gleichzeitigen Anfragen an einen einzelnen Parser sinkt, wodurch Proxy-Sperren oder Captcha-Anzeigen seltener auftreten.

Jeder Parser verarbeitet die ursprüngliche Abfrage oder deren Variation bei Verwendung des Abfrage-Builders und hat in den Einstellungen sein eigenes Abfrageformat. Es ist jedoch nicht möglich, die Ergebnisse eines vorherigen Parsers als Abfragen an einen nachfolgenden Parser zu übergeben (diese Funktion ist für die Zukunft geplant).

Beispiel für eine Domänenanalyse​

Beispiel für eine Domänenanalyse

In diesem Beispiel verwenden wir als Abfragen eine Liste von Domänen, die bald ablaufen (wieder zur Registrierung verfügbar werden). Wir sind daran interessiert, Domänen mit guten Parametern auszuwählen. Dazu haben wir sechs verschiedene Scraper verwendet:

  • SE::GoogleSE::Google - Abfrage bei Google im Format site:$query, um die Anzahl der indexierten Seiten zu ermitteln
  • Rank::BingAnalyticsRank::BingAnalytics - ermittelt das globale Domain-Ranking
  • SE::GoogleSE::Google - Abfrage bei Google im Format "$query", um die Anzahl der Domain-Erwähnungen zu ermitteln
  • SE::Google::TrustCheckSE::Google::TrustCheck - ermittelt, wie sehr Google der Website vertraut
  • SE::Google::SafeBrowsingSE::Google::SafeBrowsing - prüft, ob die Website als unsicher eingestuft ist
  • Rank::AhrefsRank::Ahrefs - ermittelt die Anzahl der Backlinks, die auf die Domain verweisen, über den Ahrefs-Dienst

Im Ergebnisformat geben wir die ursprüngliche Abfrage (Domäne) und die Ergebnisse jedes Parsers in der von uns gewünschten Reihenfolge aus:

$query, $p1.totalcount, $p2.globalRank, $p3.totalcount, $p4.trustrank, $p5.exists, $p6.bl\n
Beispiel herunterladen

Wie man ein Beispiel in A-Parser importiert

eJy1Vd1v2zYQ/1cMIg/bYKhxuvZBb47X7ANZ7dnOU1wEjHSSWVMkS1J2PCP/++5I
yrLTFOiADXrR8b5+v7vj8cA8dxs3s+DAO5bfH5gJ/yxnY8Xl/m8Y/KIbLpQbXGWX
bMgMtw4smd6zxYc8/1XrWgIqZrwGN5joVvlB62Aws/ppz4YH5vcGMJzegrWiJFNR
ovylBbuvtG24x6Mtly1ZOeEhvwg69vxpeM/mXG3y/FqoOuDxonBoXkLFW+kZWfwP
KFYsQlixCKJPkedL2zo/WUOxOcHxbxOsvTf5mzenRE9zLHgF11bvHNL+b7PEco7X
Fir3XZHvvJAPy9Yqhz/wkKajzzFW2BJufLHmmOHTkKEBRnQ3EUyeKjkcXJhR5rXn
sqDmkHyV1VI/ckmYSH77Qv9z5qnWNqnfZfAknHf0/z57lKuVYsd0C76FpcZ0lQhz
0KFA6SNvCOhFyT2QNot1+uHHzD8RE16WwguN0xUx02z3PO6U+BKIKo22xEWAu7G6
wSMPIUAg2PG9T4RxNFkbfP+KPiyvuHQwZA6h3nAEUr7U4Oxb7rWdGsKD5wem1VjK
W9iC7M1C/OtWyBIv4rhCp9+T4+sm069iPB/pnabCzu8sYjhGCdL19M/eq9S3uu6K
IUUjPMouXDc8pf2wATDHmn0ks0ZbOKZJkVN23DsGFI1Z37Kx6Y/OaJy15fyw0KoS
9TSNbmfZqiUut6ma6MZIIF6qlRLb4mDej8fYpTaQ0AN86TwJKRDW8cowr7V0fywi
VGMFjt87AthgJU+zppAFl/JufnuqIUfntZmqD9a+aF8YDMblVjjdZIVuVoo3Da9l
/C/WAmsT/7EQvNzFf5Ca21KrJDnP7b7mUfrcqoIWaJSkrrGBLukaTphsFJCLg1Ik
lRO1Es6kZG6jpeEqSbu1qCVXZZT2equtXycojDh7qDXeBuwI7p/u9Ti+N4fT7Y3S
6+sbFacLrtsp3WuktK/QA2dmROWfxG00Rzahhm+HrJapSRi+SMM6Ck3D8GGXAxaf
/YRHazIFwl6Gdw+l3W6X1QEi8aLGiwZ0i0HeXw7jgpx3Wa8eju9nPyjIxEQiCFBV
BnOhIy4PyyOROAhgDUWOktRYO7wzUcII+Ll4h0aETfkl38AiHoZ4uNs80RjRzVQb
ZzAe8iWql3HN/QY83pkuXTe6iM125YrWFhCZ8yVIvg/RS9iKAgItt8GR7fweuVJQ
FhK4ag1VhJCEPsWbeuxWPrjo13u3u1PVZty51Gp0l9QL9ozr5rXHPz+g4hsP8le6
s4c0aM8eQDzBo89uFseSNkBKgKskFnb0/A8Hayy4

⏩ Video-Beispiel zur Erstellung eines Presets aus mehreren Parsern​

In diesem Video-Tutorial wird gezeigt, wie man ein Preset erstellt, um thematische Domänen basierend auf einem Keyword aus den Google-Suchergebnissen zu extrahieren und verschiedene Parameter für diese Domänen abzurufen.

Im Tutorial wird behandelt:

  • Datenerfassung der Google-Suchergebnisse
  • Ausgabe eindeutiger Ergebnisse als Hauptdomänen
  • Abrufen von Parametern wie:
    • ob die Domäne registriert ist oder nicht
    • Registrierungsdatum und Ablaufdatum der Domäne
    • Sprache der Website
    • Title und Description
    • Website-Qualitätsindex
    • Position im globalen Alexa-Ranking
    • Land mit dem meisten Traffic laut Alexa
    • Position im Ranking dieses Landes laut Alexa