SE::AOL - Scraper wyników wyszukiwania search.aol.com

Przegląd scrapera
Scraper AOL to scraper wyników wyszukiwania AOL. Dzięki scraperowi AOL będziesz mógł pozyskiwać ogromne bazy linków, gotowych do dalszego wykorzystania. Możesz używać zapytań w takiej samej formie, w jakiej wpisujesz je w pasek wyszukiwania AOL, wliczając w to operatory wyszukiwania (contains, intitle, language, site itp.). Więcej szczegółów na oficjalnej stronie AOL Search FAQs.
Funkcjonalność A-Parser pozwala zapisywać ustawienia scrapowania scrapera AOL do dalszego wykorzystania (presety), ustalać harmonogram scrapowania i wiele więcej. Możesz korzystać z automatycznego mnożenia zapytań, podstawiania podzapytań z plików, generowania kombinacji alfanumerycznych i list, aby uzyskać maksymalną możliwą liczbę wyników.
Zapisywanie wyników jest możliwe w dowolnej formie i strukturze, której potrzebujesz, dzięki wbudowanemu potężnemu silnikowi szablonów Template Toolkit, który pozwala stosować dodatkową logikę do wyników i eksportować dane w różnych formatach, w tym JSON, SQL i CSV.
Zbierane dane
- Liczba wyników dla zapytania
- Linki, anchory i snippety z wyników wyszukiwania

Możliwości
Scraper wyszukiwarki AOL posiada następujące możliwości i ustawienia:
- Wsparcie dla wszystkich operatorów wyszukiwania AOL (site:, prefer:, url:, feed: itp.). Więcej szczegółów na oficjalnej stronie AOL Search FAQs
- Scrapuje maksymalną liczbę wyników zwracaną przez AOL - 100 stron po 20 elementów w wynikach każdej strony
- Wsparcie dla okresów wyszukiwania (Anytime, Day, Week, Month)
Warianty wykorzystania
- Zbieranie baz linków - dla A-Poster, XRumer, AllSubmitter itp.
- Ocena konkurencji dla słów kluczowych
- Scrapowanie amerykańskich wyników Google
- Wyszukiwanie backlinków (wspomnień) o stronach
- Sprawdzanie indeksacji stron
- Wyszukiwanie podatnych stron
- Wszelkie inne warianty zakładające scrapowanie AOL w tej czy innej formie
Zapytania
Jako zapytania należy podawać frazy wyszukiwania dokładnie tak samo, jak gdyby były wpisywane bezpośrednio w formularz wyszukiwania AOL, na przykład:
test
buy house
site:www.realtor.com
feed:football
a-parser loc:ca
Podstawianie zapytań
Możesz używać wbudowanych makr do mnożenia zapytań, na przykład chcemy uzyskać bardzo dużą bazę forów, podajmy kilka głównych zapytań w różnych językach:
forum
forum
foro
论坛
W formacie zapytań określimy generowanie znaków od a do zzzz, ta metoda pozwala maksymalnie rotować wyniki wyszukiwania i uzyskiwać mnóstwo nowych unikalnych wyników:
$query {az:a:zzzz}
To makro utworzy 475254 dodatkowych zapytań dla każdego wyjściowego zapytania, co w sumie da 4 x 475254 = 1901016 zapytań, liczba imponująca, ale to żaden problem dla A-Parsera. Przy prędkości 2000 zapytań na minutę takie zadanie zostanie przetworzone w zaledwie 16 godzin.
Użycie operatorów
Możesz używać operatorów wyszukiwania w formacie zapytania, dzięki czemu zostaną one automatycznie dodane do każdego zapytania z Twojej listy:
site:$query
Warianty wyprowadzania wyników
A-Parser obsługuje elastyczne formatowanie wyników dzięki wbudowanemu silnikowi szablonów Template Toolkit, co pozwala mu wyprowadzać wyniki w dowolnej formie, a także w ustrukturyzowanej, np. CSV lub JSON
Eksport listy linków
Analogicznie jak w SE::Google.
Linki + anchory + snippety z wyprowadzeniem pozycji
Analogicznie jak w SE::Google.
Wyprowadzanie linków, anchorów i snippetów do tabeli CSV
Analogicznie jak w SE::Google.
Zapisywanie powiązanych słów kluczowych
Analogicznie jak w SE::Google.
Konkurencja słów kluczowych
Analogicznie jak w SE::Google.
Sprawdzanie indeksacji linków
Analogicznie jak w SE::Google.
Zapisywanie w formacie SQL
Analogicznie jak w SE::Google.
Zrzut wyników do JSON
Analogicznie jak w SE::Google.
Obróbka wyników
A-Parser pozwala przetwarzać wyniki bezpośrednio podczas scrapowania, w tej sekcji przedstawiliśmy najpopularniejsze przypadki dla scrapera AOL
Usuwanie duplikatów linków
Analogicznie jak w SE::Google.
Usuwanie duplikatów linków według domeny
Analogicznie jak w SE::Google.
Wyodrębnianie domen
Analogicznie jak w SE::Google.
Usuwanie tagów z anchorów i snippetów
Analogicznie jak w SE::Google.
Filtrowanie linków według występowania
Analogicznie jak w SE::Google.
Możliwe ustawienia
| Nazwa parametru | Wartość domyślna | Opis |
|---|---|---|
| Pages count | 5 | Liczba stron do scrapowania (od 1 do 100) |
| Period | Anytime | Okres wyników (Anytime, Day, Week, Month) |
| AOL domain | search.aol.com | Wybór kraju wyników wyszukiwania (search.aol.com, search.aol.co.uk, recherche.aol.fr, suche.aol.de) |