大家好,这是我们要向开发者社区介绍的一款数据采集基础设施工具:Pangolinfo API。
随着 Google 全面铺开 AI Overview (SGE),传统的 SERP 抓取逻辑正在失效。DOM 结构动态化、反爬策略升级( Cloudflare/验证码)、加上 AI 生成内容的随机性,让维护一套稳定的自建爬虫成本越来越高。
对于做跨境电商工具、SEO 分析软件、或者构建 AI Agent 的开发者来说,数据获取( Data Acquisition ) 不应该成为核心业务的绊脚石。
Pangolinfo 是一个面向开发者的数据采集 API 服务。我们封装了底层的无头浏览器集群、代理池维护和验证码对抗逻辑,只向你交付清洗后的结构化 JSON 数据。
获取 Google 搜索结果中的 AI Overview 内容:
curl --request POST \
--url https://scrapeapi.pangolinfo.com/api/v2/scrape \
--header 'Authorization: Bearer YOUR_TOKEN' \
--header 'Content-Type: application/json' \
--data '{
"url": "https://www.google.com/search?q=best+mechanical+keyboard",
"parserName": "googleAISearch",
"screenshot": false
}'
{
"code": 0,
"message": "ok",
"data": {
"ai_overview": 1,
"json": {
"type": "organic",
"items": [
{
"type": "ai_overview",
"content": [
"Mechanical keyboards are known for their durability...",
"Key features to look for include switch type (linear, tactile, clicky)..."
],
"references": [
{
"title": "Mechanical Keyboard Guide",
"url": "https://example.com/guide",
"domain": "example.com"
}
]
}
]
}
}
}
目前我们开放了注册赠送活动。
无需绑定信用卡,文档清晰,欢迎 V2EX 的朋友们试用反馈。如果有特定的数据采集需求,也可以在评论区留言,我们支持定制解析器。