Przegląd i zastosowanie
Lista tematyczna wszystkich istniejących wbudowanych scraperów w A-Parser wraz z opisem i linkami do ich stron.
Scrapery wyszukiwarek
| Nazwa scrapera | Opis |
|---|---|
 SE::Google | Scrapowanie wszystkich danych z wyników wyszukiwania Google: linki, anchory, snippety, Related keywords, scrapowanie bloków reklamowych. Wielowątkowość, omijanie ReCaptcha |
 SE::Yandex | Scrapowanie wszystkich danych z wyników wyszukiwania Yandex: linki, anchory, snippety, Related keywords, scrapowanie bloków reklamowych. Maksymalna głębokość scrapowania |
 SE::AOL | Scrapowanie wszystkich danych z wyników wyszukiwania AOL: linki, anchory, snippety |
 SE::Bing | Scrapowanie wszystkich danych z wyników wyszukiwania Bing: linki, anchory, snippety, Related keywords, Maksymalna głębokość scrapowania |
 SE::Baidu | Scrapowanie wszystkich danych z wyników wyszukiwania Baidu: linki, anchory, snippety, Related keywords |
| SE::Baidu | Scrapowanie wszystkich danych z wyników wyszukiwania Baidu: linki, anchory, snippety, Related keywords |
 SE::Dogpile | Scrapowanie wszystkich danych z wyników wyszukiwania Dogpile: linki, anchory, snippety, Related keywords |
 SE::DuckDuckGo | Scrapowanie wszystkich danych z wyników wyszukiwania DuckDuckGo: linki, anchory, snippety |
 SE::Seznam | Scraper czeskiej wyszukiwarki seznam.cz: linki, anchory, snippety, Related keywords |
 SE::Yahoo | Scrapowanie wszystkich danych z wyników wyszukiwania Yahoo: linki, anchory, snippety, Related keywords, Maksymalna głębokość scrapowania |
 SE::Youtube | Scrapowanie danych z wyników wyszukiwania Youtube: linki, tytuł, opis, nazwa użytkownika, link do miniatury, liczba wyświetleń, długość filmu |
 SE::Ask | Scraper amerykańskich wyników wyszukiwania Google przez Ask.com: linki, anchory, snippety, Related keywords |
 SE::Rambler | Scrapowanie wszystkich danych z wyników wyszukiwania Rambler: linki, anchory, snippety |
 SE::Startpage | Scrapowanie wszystkich danych z wyników wyszukiwania Startpage: linki, anchory, snippety |
Przykłady
🔗 Indeksacja stron w Google i Yandex
Indeksacja stron w Google i Yandex
🔗 Wideo: Scrapowanie domen tematycznych według frazy kluczowej z Google
Wideo: Scrapowanie domen tematycznych według frazy kluczowej z Google
🔗 Pytania i odpowiedzi z wyników wyszukiwania Google
Pytania i odpowiedzi z wyników wyszukiwania Google
🔗 Scrapowanie domen tematycznych według frazy kluczowej z Google i pobieranie różnych parametrów domen
Scrapowanie domen tematycznych według frazy kluczowej z Google i pobieranie różnych parametrów domen
🔗 Scrapowanie Google News z datą i jej konwersja
Scrapowanie Google News z datą i jej konwersja
🔗 Scrapowanie tylko snippetów z Google
Scrapowanie tylko snippetów z Google
🔗 Sprawdzanie pisowni w Google
Sprawdzanie pisowni w Google
🔗 Scrapowanie linków i anchorów z Google do CSV
Scrapowanie linków i anchorów z Google do CSV
🔗 Scrapowanie tekstu z wyszukiwarki Google przy użyciu łańcucha zadań
Scrapowanie tekstu z wyszukiwarki Google przy użyciu łańcucha zadań
🔗 Scraper pamięci podręcznej Yandex
Scraper pamięci podręcznej Yandex
🔗 Scrapowanie tylko snippetów z Yandex
Scrapowanie tylko snippetów z Yandex
🔗 Pobieranie wyników Yandex i numeru pozycji wyniku
Pobieranie wyników Yandex i numeru pozycji wyniku
🔗 Liczba stron witryny w Yandex
Liczba stron witryny w Yandex
🔗 Scrapowanie konkurencji według słowa kluczowego z Yandex
Scrapowanie konkurencji według słowa kluczowego z Yandex
🔗 Wyszukiwanie wolnych nisz w segmencie internetu RU
Wyszukiwanie wolnych nisz w segmencie internetu RU
Scrapery pozycji w wyszukiwarkach
| Nazwa scrapera | Opis |
|---|---|
 SE::Google::Position | Sprawdzanie pozycji witryny według słów kluczowych w Google: linki, lista wszystkich pozycji |
 SE::Yandex::Position | Sprawdzanie pozycji witryny według słów kluczowych w Yandex: linki, lista wszystkich pozycji |
 SE::Bing::Position | Sprawdzanie pozycji witryny według słów kluczowych w Bing: linki, lista wszystkich pozycji |
Przykłady
🔗 Pobieranie pozycji witryny jednocześnie dla kilku regionów
Pobieranie pozycji witryny jednocześnie dla kilku regionów
🔗 Pobieranie pozycji witryny jednocześnie dla kilku regionów
Pobieranie pozycji witryny jednocześnie dla kilku regionów
🔗 Przegląd opcji prezentacji wyników
Przegląd opcji prezentacji wyników
Scrapery podpowiedzi wyszukiwarek
| Nazwa scrapera | Opis |
|---|---|
 SE::Google::Suggest | Scraper podpowiedzi Google: liczba wyników dla zapytania, podpowiedzi do zapytania, typ zapytania |
 SE::Yandex::Suggest | Scraper podpowiedzi Yandex: liczba wyników dla zapytania, podpowiedzi do zapytania |
 SE::Bing::Suggest | Scraper podpowiedzi Bing: liczba wyników dla zapytania, podpowiedzi do zapytania |
 SE::Aol::Suggest | Scraper podpowiedzi Aol: liczba wyników dla zapytania, podpowiedzi do zapytania |
 SE::Yahoo::Suggest | Scraper podpowiedzi Yahoo: liczba wyników dla zapytania, podpowiedzi do zapytania |
 SE::Youtube::Suggest | Scraper podpowiedzi Youtube: podpowiedzi do zapytania |
Przykłady
🔗 Preset do scrapowania podpowiedzi z możliwością wykluczenia z wyników podpowiedzi zawierających słowa wykluczające
Preset do scrapowania podpowiedzi z możliwością wykluczenia z wyników podpowiedzi zawierających słowa wykluczające
Scrapery słów kluczowych
| Nazwa scrapera | Opis |
|---|---|
 SE::Google::Trends | Scraper słów kluczowych w trendach według Google |
 SE::Yandex::WordCraft | Scraper zapytań użytkowników i popularnych witryn w wyszukiwarce Yandex z Yandex Webmaster WordCraft |
 SE::Yandex::Wordstat | Scraper słów kluczowych i statystyk wyświetleń z serwisu wordstat.yandex.ru |
 SE::Yandex::Wordstat::ByDate | Scraper statystyk wyświetleń Yandex WordStat według miesięcy lub tygodni, statystyki słów kluczowych |
 Rank::Bukvarix::Domain | Zbieranie słów kluczowych według domeny z Bukvarix: słowo kluczowe, częstotliwość, pozycja |
 Rank::Bukvarix::Keyword | Zbieranie słów kluczowych według słowa kluczowego z Bukvarix: słowo kluczowe, częstotliwość, pozycja |
 Rank::Ahrefs::KeywordDifficulty | Trudność słów kluczowych, słowa kluczowe, liczba słów kluczowych |
 Rank::Ahrefs::KeywordGenerator | Zbieranie słów kluczowych Ahrefs: pomysły na słowa kluczowe, pytania ze słowami kluczowymi |
 SE::Google::KeywordPlanner | Zbieranie podpowiedzi, słów kluczowych, konkurencja, min. i maks. stawki |
 SE::Yandex::Direct | Liczba ogłoszeń dla konkretnego zapytania, title, tekst i domena, linki, anchory, tagi |
Przykłady
🔗 Sezonowość słów kluczowych
Sezonowość słów kluczowych
🔗 Ocena częstotliwości według WordStat
Ocena częstotliwości według WordStat
🔗 Głębokie scrapowanie Wordstat
Głębokie scrapowanie Wordstat
🔗 Pobieranie listy kategorii Google Trends
Pobieranie listy kategorii Google Trends
🔗 Formatowanie daty Google Trends
Formatowanie daty Google Trends
Rejestracja kont
| Nazwa scrapera | Opis |
|---|---|
 SE::Yandex::Register | Rejestracja kont w Yandex |
Przykłady
🔗 Pobieranie pełnej listy regionów Yandex
Pobieranie pełnej listy regionów Yandex
🔗 Automatyzacja rejestracji kont Yandex
Automatyzacja rejestracji kont Yandex
Scrapery parametrów witryn i domen
| Nazwa scrapera | Opis |
|---|---|
 SE::Google::TrustCheck | Sprawdzanie zaufania (trust) witryny |
 SE::Google::Compromised | Sprawdzanie obecności napisu „This site may be hacked” |
 SE::Google::SafeBrowsing | Sprawdzanie domeny na czarnej liście Google |
 SE::Yandex::SafeBrowsing | Sprawdzanie domeny na czarnej liście Yandex |
 SE::Yandex::SQI | Sprawdzanie Indeksu Jakości Witryny (IKS) w Yandex |
 Net::Whois | Określa, czy domena jest zarejestrowana, datę utworzenia domeny oraz datę zakończenia rejestracji |
 Net::Dns | Scraper rozwiązuje domeny na adresy IP |
 Rank::Cms | Rozpoznaje wszystkie popularne fora, blogi, CMS, księgi gości, wiki i wiele innych typów silników |
 Rank::Archive | Scraper daty pierwszego i ostatniego buforowania witryny w archiwum internetowym |
 Rank::MajesticSEO | Scraper liczby linków zwrotnych z serwisu majesticseo.com |
 Rank::Mustat | Ocena ruchu na witrynie, a także koszt i ranking domeny |
 Rank::Social::Signal | Scraper sygnałów społecznościowych |
 Rank::Curlie | Sprawdzanie obecności witryny w katalogu Curlie (odpowiednik DMOZ) |
 Rank::Ahrefs | Scraper ahrefs.com |
 Rank::KeysSo | Scraper keys.so |
 Rank::MOZ | Scraper MOZ |
 SecurityTrails::Ip | Zbiera domeny według IP |
 SecurityTrails::Domain | Scraper SecurityTrails |
Przykłady
🔗 Scrapowanie domen tematycznych według frazy kluczowej z Google i pobieranie różnych parametrów domen
Scrapowanie domen tematycznych według frazy kluczowej z Google i pobieranie różnych parametrów domen
🔗 Informacje o witrynie
Informacje o witrynie
🔗 Net::Whois wybieranie dowolnych danych
Net::Whois wybieranie dowolnych danych
🔗 Otrzymywanie powiadomień w Telegram o wygaśnięciu rejestracji domen
Otrzymywanie powiadomień w Telegram o wygaśnięciu rejestracji domen
🔗 Zbieranie bazy adresów e-mail
Zbieranie bazy adresów e-mail
🔗 Określanie listy domen na IP
Określanie listy domen na IP
🔗 Określanie CMS dla 1 000 000 domen w 15 godzin
Określanie CMS dla 1 000 000 domen w 15 godzin
🔗 Scrapowanie domen witryn według określonego CMS
Scrapowanie domen witryn według określonego CMS
🔗 Witryny wordpress z subskrypcjami
Witryny wordpress z subskrypcjami
Scrapery różnych serwisów
| Nazwa scrapera | Opis |
|---|---|
| SE::Yandex::Register | Pozwala rejestrować konta w Yandex |
 SE::Bing::Translator | Tłumacz przez serwis www.bing.com/translator/ |
 SE::Google::Translate | Tłumacz Google |
 SE::Yandex::Translate | Tłumacz Yandex |
 SE::Bing::Images | Scraper obrazów z wyszukiwarki Bing |
 SE::Google::Images | Scraper obrazów według słów kluczowych Google |
 SE::Google::ByImage | Wyszukiwanie obrazów według linku |
 SE::Yandex::Images | Scraper obrazów według słów kluczowych Yandex |
 SE::Yandex::ByImage | Scraper obrazów według linku z Yandex |
 SE::DuckDuckGo::Images | Scraper obrazów z DuckDuckGo |
 SE::Dogpile::Images | Scraper obrazów z Dogpile |
 Util::AntiGate | Rozpoznawanie captcha przez serwis AntiGate |
 Util::YandexRecognize | Rozpoznawanie captcha od Yandex |
 Util::ReCaptcha2 | Rozpoznawanie recaptcha z zasobów Anti-captcha.com, Rucaptcha.com, Capmonster, Capmonster.cloud, Xevil, 2captcha, R.I.P.captcha |
 SEO::Ping | Masowe wysyłanie zapytań Ping do serwisów obsługujących Weblog API (Google Blog Search, Feed Burner, Ping-o-Matic itp.) |
 Check::RosKomNadzor | Sprawdzanie witryny w bazie Roskomnadzoru |
 SE::Yandex::Speller | Sprawdzanie stron pod kątem błędów w tekście przez Yandex.Speller |
 GooglePlay::Apps | Scraper aplikacji Google Play |
 Social::Instagram::Post | Scraper danych o postach na Instagramie |
 Social::Instagram::Profile | Scraper danych z profili na Instagramie |
 Social::Instagram::Tag | Scraper postów według tagów na Instagramie |
 Social::Instagram::Geo | Scraper postów na Instagramie w określonej lokalizacji |
 Telegram::GroupScraper | Scraper danych z grup publicznych w Telegramie |
 API::Server::Redis | Praca z A-Parser przez Redis |
 SE::Google::Cache | Sprawdzanie obecności stron w pamięci podręcznej Google |
| Social::Instagram::Geo | Scraper postów na Instagramie w określonej lokalizacji |
 DeepL::Translator | Tłumacz tekstu przez serwis www.deepl.com |
 CoinMarketCap::LastPrice | Scraper sklepu CoinMarketCap: nazwa tokena, aktualna cena w USD |
Przykłady
🔗 Automatyzacja rejestracji kont Yandex
Automatyzacja rejestracji kont Yandex
🔗 Porównanie szybkości tłumaczy
Porównanie szybkości tłumaczy
🔗 Używanie całych plików jako zapytań
Używanie całych plików jako zapytań
🔗 Wczytywanie plików z katalogu do tłumaczenia w DeepL
Wczytywanie plików z katalogu do tłumaczenia w DeepL
🔗 Pobieranie obrazów o określonej rozdzielczości i rozmiarze
Pobieranie obrazów o określonej rozdzielczości i rozmiarze
🔗 Tworzenie scraperów JS. Praca z CAPTCHA
Tworzenie scraperów JS. Praca z CAPTCHA
🔗 Tworzenie scraperów JS. Praca z ReCaptcha2
Tworzenie scraperów JS. Praca z ReCaptcha2
🔗 Przykład pracy z SEO::Ping
Przykład pracy z SEO::Ping
🔗 Scraper linków lokalizacji dla Social::Instagram::Geo
Scraper linków lokalizacji dla Social::Instagram::Geo
🔗 Scrapowanie informacji o użytkownikach Instagram
Scrapowanie informacji o użytkownikach Instagram
🔗 Scrapowanie użytkowników grup publicznych w Telegram
Scrapowanie użytkowników grup publicznych w Telegram
Scrapery sklepów
| Nazwa scrapera | Opis |
|---|---|
 Shop::Amazon | Scraper wyników wyszukiwania amazon.com |
 Shop::Yandex::Market | Scraper Yandex.Market |
 Shop::AliExpress | Scraper wyników wyszukiwania Shop::AliExpress |
 Shop::eBay | Scraper wyników wyszukiwania Ebay |
 Shop::Wildberries::ProductsList | Scraper listy produktów Wildberries |
 Shop::Wildberries::ProductInfo | Scraper strony produktu Wildberries |
 Shop::Wildberries::Suggest | Scraper podpowiedzi wyszukiwania Wildberries |
| Shop::Yandex::Market | Scraper produktów z YANDEX.MARKET |
Przykłady
🔗 Scrapowanie produktów z witryny
Scrapowanie produktów z witryny
Scrapery map
| Nazwa scrapera | Opis |
|---|---|
 Maps::Google | Scraper Google Maps: nazwa organizacji, adres i współrzędne, ocena, liczba opinii i polityka cenowa, witryna, telefon, zdjęcie |
 Maps::Yandex | Scraper Yandex Maps: nazwa organizacji, adres i współrzędne, ocena, liczba opinii i polityka cenowa, witryna, telefon, zdjęcie, media społecznościowe |
Przykłady
🔗 Scrapowanie Google Maps w celu zebrania wszystkich organizacji w określonej okolicy
Scrapowanie Google Maps w celu zebrania wszystkich organizacji w określonej okolicy
Scrapery treści
| Nazwa scrapera | Opis |
|---|---|
 Check::BackLink | Sprawdza obecność Twojego linku (linków) w bazie linków |
 HTML::LinkExtractor | Scraper linków zewnętrznych i wewnętrznych z podanej witryny, może przechodzić po linkach wewnętrznych do wybranego poziomu |
 HTML::ArticleExtractor | Scraper artykułów |
 HTML::TextExtractor | Scraper bloków tekstowych |
 HTML::TextExtractor::LangDetect | Określanie języka strony bez użycia zewnętrznych serwisów |
 HTML::EmailExtractor | Scrapowanie adresów e-mail ze stron witryn |
 Net::HTTP | Pobiera wskazaną stronę, obsługuje scrapowanie wielostronicowe |
Przykłady
🔗 Sprawdzanie, czy istnieją linki do strony w pamięci podręcznej Yandex
Sprawdzanie, czy istnieją linki do strony w pamięci podręcznej Yandex
🔗 Głębokie scrapowanie witryny na podstawie scrapera HTML::LinkExtractor
Głębokie scrapowanie witryny na podstawie scrapera HTML::LinkExtractor
🔗 Wideo: Scrapowanie zasobu Booking.com przy użyciu Net::HTTP
Wideo: Scrapowanie zasobu Booking.com przy użyciu Net::HTTP
🔗 Okresowe sprawdzanie linków zwrotnych z dopisywaniem wyników do tabeli
Okresowe sprawdzanie linków zwrotnych z dopisywaniem wyników do tabeli
🔗 Głębokie scrapowanie witryny na podstawie scrapera HTML::LinkExtractor
Głębokie scrapowanie witryny na podstawie scrapera HTML::LinkExtractor
🔗 Zbieranie powiązanych tematów
Zbieranie powiązanych tematów
🔗 Wyszukiwanie subdomen witryny
Wyszukiwanie subdomen witryny
🔗 Głębokie scrapowanie witryn na podstawie scrapera HTML::LinkExtractor
Głębokie scrapowanie witryn na podstawie scrapera HTML::LinkExtractor
🔗 Scrapowanie adresów e-mail z witryn
Scrapowanie adresów e-mail z witryn
🔗 Scrapowanie tekstu z witryn
Scrapowanie tekstu z witryn
🔗 Scrapowanie numerów telefonów z witryn
Scrapowanie numerów telefonów z witryn
🔗 Scrapowanie linków do sieci społecznościowych z witryn
Scrapowanie linków do sieci społecznościowych z witryn
🔗 Scrapowanie cen produktów z witryn
Scrapowanie cen produktów z witryn
🔗 Scrapowanie meta tagów z witryn
Scrapowanie meta tagów z witryn