爬虫工具,用于搜索引擎、SEO 服务和网站

110+ 个预装爬虫工具

使用内置爬虫工具,轻松抓取并分析任意数据。

14 个搜索引擎

搜索引擎爬虫工具

抓取搜索结果中的所有数据:链接、锚文本、摘要、广告结果数据以及相关搜索模块。
谷歌搜索爬虫
SE::Google

用于抓取 Google 搜索结果的爬虫工具。

Yandex 爬虫工具
SE::Yandex

用于抓取 Yandex 搜索结果的爬虫工具。

AOL 爬虫工具
SE::AOL

用于抓取 AOL 搜索结果的爬虫工具。

Bing 爬虫工具
SE::Bing

用于抓取 Bing 搜索结果的爬虫工具。

百度爬虫工具
SE::Baidu

用于抓取百度搜索结果的爬虫工具。

Dogpile 爬虫工具
SE::Dogpile

用于抓取 Dogpile 搜索结果的爬虫工具。

DuckDuckGo 爬虫工具
SE::DuckDuckGo

用于抓取 DuckDuckGo 搜索结果的爬虫工具。

Seznam 爬虫工具
SE::Seznam

用于抓取捷克搜索引擎 Seznam.cz 的搜索结果的爬虫工具。

Yahoo 爬虫工具
SE::Yahoo

用于抓取 Yahoo 搜索结果的爬虫工具。

YouTube 爬虫工具
SE::YouTube

用于抓取 YouTube 搜索结果的爬虫工具。

Ask.com 爬虫工具
SE::Ask

通过 Ask.com 抓取美国谷歌搜索结果的爬虫工具。

Rambler 爬虫工具
SE::Rambler

用于抓取 Rambler 搜索结果的爬虫工具。

Startpage 爬虫工具
SE::Startpage

用于抓取 Startpage.com 搜索结果的爬虫工具。

内容与创意生成

AI 服务爬虫工具

从热门 AI 服务中采集数据,用于文本生成、创意发现、信息分析和任务自动化。
ChatGPT 爬虫工具
FreeAI::ChatGPT

用于从最受欢迎的 AI 服务 ChatGPT 收集信息的爬虫工具。

Copilot 爬虫工具
FreeAI::Copilot

用于代码处理和 AI 生成回复的 Copilot 服务爬虫工具。

Deep AI 爬虫工具
FreeAI::DeepAI

用于从 Deep AI 搜索引擎收集结构化信息的爬虫工具。

谷歌 AI 爬虫工具
FreeAI::GoogleAI

用于基于 Gemini 的谷歌 AI 模式收集结构化信息的爬虫工具。

Kimi 爬虫工具
FreeAI::Kimi

用于从 Kimi AI 搜索引擎收集信息的爬虫工具。

Perplexity 爬虫工具
FreeAI::Perplexity

用于从 Perplexity AI 搜索引擎收集结构化信息的爬虫工具。

OpenAI 服务器爬虫工具
FreeAI::Server::OpenAI

部署一个兼容 OpenAI 的 API 服务器,用于访问 A-Parser 内置的 AI 模型。

OpenAI ChatGPT 爬虫工具
OpenAI::ChatGPT

用于通过官方 API 与 ChatGPT 集成的爬虫工具。可接收回复、设置系统提示词,并控制令牌用量。

OpenAI Completions 爬虫工具
OpenAI::Completions

用于处理 OpenAI 的 Completions API 的爬虫工具。可基于多种模型,使用 API key 进行文本和代码生成。

PBN 专用

参数爬虫工具

抓取域名的 SEO 指标,检查域名历史,并评估流量、反向链接和其他参数。
谷歌 TrustCheck 爬虫工具
SE::Google::TrustCheck

检查网站在 Google 中的信任等级。

谷歌被黑检查爬虫工具
SE::Google::Compromised

检查 Google 上是否出现“此网站可能已被入侵”的提示。

谷歌 SafeBrowsing 爬虫工具
SE::Google::SafeBrowsing

检查域名是否被列入 Google 黑名单(用于在 SERP 中显示“有害”标签)。

Yandex SafeBrowsing 爬虫工具
SE::Yandex::SafeBrowsing

检查域名是否在 Yandex 黑名单中。

Yandex SQI 爬虫工具
SE::Yandex::SQI

检查 Yandex 中的网站质量指数(SQI)。

Whois 爬虫工具
Net::Whois

判断域名是否已注册、创建日期、到期日期以及 NS 服务器。

DNS 爬虫工具
Net::DNS

将域名解析为 IP 地址。

Rank::CMS 爬虫工具
Rank::CMS

根据属性识别 600+ 种 CMS。

网络档案爬虫工具
Rank::Archive

抓取网站在网络档案中的最早和最晚缓存日期。

MajesticSEO 爬虫工具
Rank::MajesticSEO

从 majesticseo.com 服务抓取反向链接数量。

Mustat 爬虫工具
Rank::Mustat

抓取网站的流量估算,以及域名成本和评分。

社交信号爬虫工具
Rank::Social::Signal

抓取社交信号。

Curlie 爬虫工具
Rank::Curlie

抓取 Curlie.org 目录。

Ahrefs 爬虫工具
Rank::Ahrefs

抓取 Ahrefs.com。

Keys.so 爬虫工具
Rank::KeysSo

抓取 keys.so。

Moz 爬虫工具
Rank::MOZ

抓取 moz.com。

SecurityTrails IP 爬虫工具
SecurityTrails::IP

按 IP 收集域名及相关信息。

SecurityTrails 域名爬虫工具
SecurityTrails::Domain

从 SecurityTrails 收集域名数据。

Cloudflare Radar 爬虫工具
Cloudflare::Radar

根据域名判断网站类别。

Ahrefs TrafficChecker 爬虫工具
Rank::Ahrefs::TrafficChecker

获取域名流量、成本、近六个月的流量历史等信息。

Ahrefs 失效链接爬虫工具
Rank::Ahrefs::BrokenLinks

获取失效入站和出站链接的数量及列表(TOP 10)。

地图数据采集

组织信息采集工具

收集联系方式信息:组织名称、地址和坐标、评分、评论数量、网站、电话号码等。
谷歌地图数据采集
Maps::Google

抓取谷歌地图数据。

Yandex 地图爬虫工具
Maps::Yandex

抓取 Yandex 地图数据。

语义数据采集

搜索查询爬虫工具

从各种来源对搜索查询进行多线程抓取,以支持尽可能广泛的关键词研究。
Yandex Wordstat 爬虫工具
SE::Yandex::Wordstat

从 wordstat.yandex.ru 抓取关键词和展示次数统计。

Yandex Wordstat 按日期爬虫工具
SE::Yandex::Wordstat::ByDate

按月和按周抓取 Wordstat 展示次数统计。

Google Trends 爬虫工具
SE::Google::Trends

抓取 Google Trends 中的热门关键词。

Bukvarix 域名爬虫工具
Rank::Bukvarix::Domain

按域名从 Bukvarix 收集关键词。

Bukvarix 关键词爬虫工具
Rank::Bukvarix::Keyword

按关键词从 Bukvarix 收集关键词。

Ahrefs 关键词生成器爬虫工具
Rank::Ahrefs::KeywordGenerator

在几秒内获取成千上万的关键词创意。

Ahrefs 关键词难度爬虫工具
Rank::Ahrefs::KeywordDifficulty

抓取关键词难度。

Yandex Wordstat 按地区爬虫工具
SE::Yandex::Wordstat::ByRegion

从 Wordstat 抓取按地区和城市划分的关键词统计。

通用内容爬虫工具

内容与外链爬虫工具

对任意网站进行多页文本抓取,清理无用字符,收集内链和外链等。
反向链接爬虫工具
Check::BackLink

检查一组网站中是否存在反向链接。

邮箱抓取工具
HTML::EmailExtractor

从网页中抓取电子邮件地址。

语言检测爬虫工具
HTML::TextExtractor::LangDetect

在不使用第三方服务的情况下识别页面语言。

链接抓取工具
HTML::LinkExtractor

从指定网站抓取外链和内链,并可按指定深度继续抓取站内链接。

文本块爬虫工具
HTML::TextExtractor

抓取文本块,让你可以从任意网站收集内容。

文章爬虫工具
HTML::ArticleExtractor

从网页中收集文章:标题、包含和不包含 HTML 标记的内容、文章长度。

Net::HTTP 爬虫工具
Net::HTTP

下载指定页面,支持多页抓取。

Yandex Balaboba 爬虫工具
SE::Yandex::Balaboba

从 Yandex Balaboba 抓取文本。

电商自动化

电商平台爬虫工具

从商品卡片、商品链接、价格变动监控、评分、评论等收集信息。
Amazon 爬虫工具
Shop::Amazon

抓取 Amazon.com 搜索结果。

Yandex.Market 爬虫工具
Shop::Yandex::Market

抓取 Yandex.Market。

AliExpress 爬虫工具
Shop::AliExpress

抓取 AliExpress 搜索结果。

Wildberries 商品信息爬虫工具
Shop::Wildberries::ProductInfo

抓取 Wildberries 商品页面。

Wildberries 商品列表爬虫工具
Shop::Wildberries::ProductsList

抓取 Wildberries 商品列表。

eBay 爬虫工具
Shop::eBay

抓取 eBay 搜索结果。

关键词建议

搜索引擎建议爬虫工具

根据所选国家、语言或域名收集查询建议。处理速度最高可达每分钟 6000 个查询。
AOL 建议爬虫工具
SE::AOL::Suggest

抓取 AOL 搜索建议。

谷歌建议爬虫工具
SE::Google::Suggest

抓取谷歌搜索建议。

Yandex 建议爬虫工具
SE::Yandex::Suggest

抓取 Yandex 搜索建议。

Bing 建议爬虫工具
SE::Bing::Suggest

抓取 Bing 搜索建议。

Yahoo 建议爬虫工具
SE::Yahoo::Suggest

抓取 Yahoo 搜索建议。

YouTube 建议爬虫工具
SE::YouTube::Suggest

抓取 YouTube 搜索建议。

Pinterest 建议爬虫工具
SE::Pinterest::Suggest

抓取 Pinterest 搜索建议。

Wildberries 建议爬虫工具
Shop::Wildberries::Suggest

抓取 Wildberries 关键词建议。

排名监控

搜索引擎排名爬虫工具

这些爬虫工具可自动检查你自己的域名数据库在搜索引擎结果中的排名。
谷歌排名爬虫工具
SE::Google::Position

按关键词检查网站在 Google 中的排名。

Bing 排名爬虫工具
SE::Bing::Position

按关键词检查网站在 Bing 中的排名。

Yandex 排名爬虫工具
SE::Yandex::Position

按关键词检查网站在 Yandex 中的排名。

DuckDuckGo 排名爬虫工具
SE::DuckDuckGo::Position

按关键词检查网站在 DuckDuckGo 中的排名。

通用部分

其他服务爬虫工具

用于图片、文本翻译、社交网络和即时通讯工具(Instagram、Telegram)等的爬虫工具。
Yandex 注册爬虫工具
SE::Yandex::Register

自动注册 Yandex 账号。

Bing 翻译爬虫工具
SE::Bing::Translator

通过 Bing Translator 翻译文本。

Google 翻译爬虫工具
SE::Google::Translate

通过 Google Translate 翻译文本。

Yandex 翻译爬虫工具
SE::Yandex::Translate

使用 Yandex Translator 翻译文本。

Bing 图片爬虫工具
SE::Bing::Images

从 Bing 搜索引擎抓取图片。

谷歌图片爬虫工具
SE::Google::Images

按关键词抓取谷歌图片。

谷歌按图片链接爬虫工具
SE::Google::ByImage

通过图片链接抓取谷歌图片。

Google 关键词规划师爬虫工具
SE::Google::KeywordPlanner

抓取 Google Keyword Planner。

Yandex 图片爬虫工具
SE::Yandex::Images

抓取 Yandex 图片。

Yandex 按链接图片爬虫工具
SE::Yandex::ByImage

通过图片链接抓取 Yandex 图片。

DuckDuckGo 图片爬虫工具
SE::DuckDuckGo::Images

抓取 DuckDuckGo 图片。

Dogpile 图片爬虫工具
SE::Dogpile::Images

抓取 Dogpile 图片。

Yandex.Direct 广告爬虫工具
SE::Yandex::Direct

从 direct.yandex.ru 服务按关键词抓取广告。

AntiGate 识别爬虫工具
Util::AntiGate

通过支持 AntiGate API 的服务识别验证码。

Yandex 识别爬虫工具
Util::Yandex::Recognize

识别验证码。

reCAPTCHA v2 识别爬虫工具
Util::ReCaptcha2

识别 reCAPTCHA v2。

SEO Ping
SEO::Ping

发送批量 ping 请求。

Roskomnadzor 爬虫工具
Check::RosKomNadzor

检查网站是否在 Roskomnadzor 数据库中。

Yandex Speller 爬虫工具
SE::Yandex::Speller

使用 Yandex.Speller 检查页面文本错误。

Google Play 应用爬虫工具
GooglePlay::Apps

抓取 Google Play 应用。

Instagram 帖子爬虫工具
Social::Instagram::Post

抓取 Instagram 帖子数据。

Instagram 个人资料爬虫工具
Social::Instagram::Profile

抓取 Instagram 个人资料数据。

Instagram 标签爬虫工具
Social::Instagram::Tag

按标签抓取 Instagram 帖子。

按地点抓取 Instagram 帖子爬虫工具
Social::Instagram::Geo

从指定地点抓取 Instagram 帖子。

Telegram 群组爬虫工具
Telegram::GroupScraper

从公开 Telegram 群组中抓取数据。

Pinterest 爬虫工具
SE::Pinterest

抓取 Pinterest 搜索结果。

通过 Redis 使用 A-Parser
API::Server::Redis

使 A-Parser 能通过 Redis 工作。

Google 缓存爬虫工具
SE::Google::Cache

抓取 Google 缓存中的页面。

Google SitemapPing 爬虫工具
SE::Google::SitemapPing

用于向 Google 提交站点地图的爬虫工具。

DeepL 翻译工具
DeepL::Translator

通过 DeepL 提供快速的多线程文本翻译。

reCAPTCHA v3 识别爬虫工具
Util::ReCaptcha3

识别 reCAPTCHA v3。

CoinMarketCap 爬虫工具
CoinMarketCap::LastPrice

抓取 CoinMarketCap 平台。

Quora 爬虫工具
SE::Quora

抓取 Quora 搜索结果。

YouTube 视频爬虫工具
SE::YouTube::Video

抓取 YouTube 视频数据。