Tavily
为 Agent 提供搜索、提取、抓取与研究 API
排序
Scrapy
用官方教程站建立分页 Spider
Zyte
用同一商品 URL 对照三种材料后再固化抽取策略
ScrapeGraphAI
用 Schema 约束字段并以 status 验收
ScrapingBee
按页面复杂度配置抓取请求并验证结构化结果
Hyperbrowser
先 Scrape 验收，再升级 Session 并 stop
Diffbot
先 Analyze 验样本，再启动可控 Crawl
Browserbase
用 Session 回放验收登录态与 Context 复用
FireCrawl
分清 Scrape、Map、Crawl 并控制额度
Crawl4AI
自托管浏览器抓取并输出结构化数据
Jina Reader API
将公开网页转成 Markdown 或 JSON
Browse AI
训练无代码机器人提取网页字段并监控后续变化
