Spicrawl 集成38
Spicrawl 运行一个托管的 MCP 服务器。任何能连接到它的智能体都会获得 25 个用于读取网页的 spicrawl_* 工具。
/
对每个客户端都相同
https://mcp.spicrawl.com/mcpStreamable HTTPBearer API key无 OAuth25 个 spicrawl_* 工具终端
# first: export SPICRAWL_API_KEY=spicrawl_live_...claude mcp add --transport http spicrawl https://mcp.spicrawl.com/mcp \ --header "Authorization: Bearer $SPICRAWL_API_KEY"所有集成
38 / 38
编码智能体13
框架7
须知
- 不支持爬取。 Spicrawl 不会跟随链接或查找页面。请把 URL 交给智能体。
- 每次请求的积分。 普通抓取 1 积分。JavaScript 渲染 3。完整浏览器渲染 8。
- 失败免费。 失败的请求费用为 0 积分。
- 缓存节省的是时间,而不是积分。 缓存命中的费用与存储它的那次获取相同。
- 为每次调用设置上限。 设置
max_cost后,可能超出预算的请求会在运行前被拒绝。 - 即将推出: 托管代理、隐身模式、远程浏览器,以及基于自然语言提示词的 AI 提取。目前你可以自带代理。
常见问题
哪些工具可以与 Spicrawl 搭配使用?
任何支持 Streamable HTTP 且能发送自定义请求头的 MCP 客户端。文档为 Claude Code、Cursor、Codex、GitHub Copilot、Windsurf、Gemini CLI 等众多客户端提供了设置页面,也涵盖 LangChain 和 OpenAI Agents SDK 等智能体框架。
MCP 服务器使用 OAuth 吗?
不使用。它只接受 API key。请在 Authorization: Bearer 中发送你的 key。仅支持 OAuth 的客户端无法连接。
我的客户端只支持 stdio。还能连接吗?
可以。用 npx -y mcp-remote https://mcp.spicrawl.com/mcp 进行桥接,并通过环境变量传递 Authorization 请求头。文档页面“More MCP clients”给出了确切的命令。
我需要 MCP 服务器,还是可以直接调用 API?
两种方式都可以。当由模型决定抓取什么时,MCP 服务器最合适。当你自己的代码已经知道 URL 时,直接调用 POST /v1/scrape 更简单,也不消耗工具 schema 的 token。
每个页面要多少钱?
普通抓取 1 积分,JavaScript 渲染 3,完整浏览器渲染 8。失败的请求为 0。缓存命中的费用与存入该缓存的那次抓取相同。让智能体在每次请求上设置 max_cost,这样花费就不会超出你的预期。
刚开始使用?请先 获取免费 API key。