Spicrawl nay hoạt động với OpenAI Agents SDK, LangChain, Codex, Claude Code và nhiều hơn nữa.Xem các tích hợp
Chuyển đến nội dung

Dữ liệu thế giới trực tiếp cho agent

Mở khóa dữ liệu thế giới cho agent/hệ thống của bạn, xây dựng sản phẩm tốt hơn.

Đăng ký(miễn phí trong thời gian beta)
Thử:

Dùng thử miễn phí: mọi trang công khai thành Markdown sạch, không cần đăng ký.

Mọi thứ API web scraping của Spicrawl làm được

Đầu ra Markdown và JSON, render JavaScript, xử lý Cloudflare và anti-bot, hành động trên trình duyệt, session, batch job tối đa 10,000 URL, trích xuất có cấu trúc, bắt network, ảnh chụp màn hình và PDF, và caching. Mỗi thứ là một tham số trên cùng một API, và mỗi thứ cũng có sẵn từ CLI và MCP server.

3/3Được phục vụ, tính phí theo tầng đó

Thường, JavaScript hoặc trình duyệt đầy đủ

  • 1, 3 hoặc 8 credit tùy tầng. mode: auto bắt đầu từ rẻ và chỉ nâng lên khi cần.
  • Bạn trả tiền cho tầng đã phục vụ. Thất bại tốn 0.
  • js_render
  • mode
  • wait_for
render.sh
curl https://api.spicrawl.com/v1/scrape \  -H "Authorization: Bearer spicrawl_live_…" \  -H "Content-Type: application/json" \  -d '{    "url": "https://example.com/products",    "js_render": true,    "wait_for": ".product-card",    "response_format": "json"  }'

spicrawl scrape <url> --render

Đọc hướng dẫn

Khám phá tài liệu API

Thử trên một trang bạn đang scrape hôm nay

Một API key, 1,000 credit miễn phí mỗi tháng, không cần thẻ tín dụng.

Up to 97% fewer tokens than raw HTML

Menus, scripts and ads are stripped before the page reaches your model, so the same facts take a fraction of the context. Raw HTML on the left, Spicrawl Markdown on the right.

Trang tài liệu Spicrawl
−97%token
GitHub README
−94%token
Bài viết Wikipedia
−76%token
Xem cách chúng tôi đo

Đo mức tiết kiệm trên chính các URL của bạn

Chạy cùng các trang theo cả hai cách và so sánh số token.

Two ways in: ask your agent, or call the API

Describe the page in plain words, or send one POST request. Both return the same clean output.

  1. Cứ hỏi AI của bạn

    Kết nối một lần, rồi hỏi bằng lời thường. Không cần viết code.

    Thiết lập trong Claude Code
  2. Gọi API

    Một POST trả về Markdown, JSON hoặc HTML. Batch tối đa 10,000 URL.

    Đọc tài liệu API

Kết nối AI agent của bạn với Spicrawl MCP

Một MCP server được lưu trữ sẵn: scrape, batch, session và hành động trên trình duyệt, không cần code kết nối.

Endpoint MCP: https://mcp.spicrawl.com/mcp

  • Scrape
  • Batch job
  • Session
  • Hành động
  • Lịch sử request
  • Mức dùng
  • Tài liệu
Claude Code scrape một trang

Bạn có phải là AI agent không?

Tải skill và bắt đầu scraping.

$curl -s https://docs.spicrawl.com/skill.md

Xem skill llms.txt

Hoạt động với các công cụ bạn đã dùng

Trao web cho agent của bạn chỉ với một prompt

Hoạt động với Claude Code, Cursor, Codex và mọi MCP client.

Get Markdown, JSON or structured data from one request

Pick the format your next step needs: Markdown for a prompt, JSON for your app, a screenshot or PDF for a record.

example.com/product/1
Giới thiệu Model X — Chính xác trong từng cú click
Wireless Mouse — Model X
Wireless Mouse — Model X
$49.00Còn hàng★ 4.6 (1,284)
Bộ thu 2.4 GHz độ trễ thấp, pin 70 ngày và công tắc im lặng.
Thông sốGiá trị
Kết nối2.4 GHz, BT5Pin70 ngày
<script type="application/ld+json">
result.md
# Wireless Mouse — Model X**$49.00** · Còn hàng · 4.6 (1,284 đánh giá)Bộ thu -latency 2.4 GHz, 70-day pinvà các công tắc im lặng.| Spec      | Value        || --------- | ------------ || Kết nối   | 2.4 GHz, BT5 || Pin       | 70 ngày      |
Đang đọc trang
HTML thô12,480 token
Markdown0 token

Đã loại bỏ menu, footer và quảng cáo: 3% đến 24% số token của HTML thô. Trang ví dụ.

Chuyển bất kỳ website nào sang Markdown cho LLM

Scrape JavaScript sites, logins and dynamic pages

Start with a plain fetch. Spicrawl moves up to a real browser only when the page needs one. Keep a session to stay logged in, or bring your own proxy.

Bảng điều khiển Spicrawl
Tự động nâng cấp
Trình duyệt
Fingerprint
Proxy
Proxy được quản lý: sắp ra mắt
Session
Hành động
Chặn tài nguyên
Bắt network
Cache
POST /v1/scrape
{  "url": "https://shop.example/product/1",  "mode": "auto",  "cache": true,  "response_format": "markdown"}
Header phản hồi ví dụ
X-Target-Status
200
X-Engine
fetch
X-Proxy-Source
trực tiếp
Cache-State
hit
X-Credits-Charged
1
Tự động nâng cấp

Bắt đầu bằng một request thường và chỉ nâng lên trình duyệt nếu trang web chặn nó. Request bị chặn không tốn gì.

Chỉ là ví dụ, không phải request thật. Beta miễn phí.

Test in the dashboard, then ship with the API or CLI

Try a URL, copy the request, and run it from your code or your terminal.

CLI

Scrape một URL, batch hàng nghìn URL và quản lý session từ terminal của bạn.

Đọc tài liệu CLI

Dashboard

Chạy request thử, đọc log và mức dùng, và quản lý API key.

Mở dashboard

Tài liệu

Hướng dẫn, tham chiếu API và một đặc tả OpenAPI cho công cụ của bạn.

Đọc tài liệu

Try what people build with Spicrawl

Small working tools, each built on the Spicrawl API.

  1. change-monitor.spicrawl.com

    Theo dõi thay đổi

    Kiểm tra lại một trang và xem điều gì đã thay đổi.

    Dùng thử trực tiếp
  2. price-tracker.spicrawl.com

    Theo dõi giá

    Dán một liên kết sản phẩm, nhận giá của nó.

    Dùng thử trực tiếp
  3. docs2skill.spicrawl.com

    Tài liệu → Skill

    Biến một trang tài liệu thành agent skill.

    Dùng thử trực tiếp

What you can build with a web scraping API

Each job links to a guide in the docs, with working code.

  1. 01

    Cấp dữ liệu cho LLM và pipeline RAG

    Biến bài viết, tài liệu và PDF thành Markdown sạch, sẵn sàng để embed.

    Markdown cho LLM
  2. 02

    Cho AI agent truy cập web

    Kết nối Claude Code, Cursor hoặc Codex để đọc các trang trực tiếp.

    Xây dựng với agent
  3. 03

    Thu thập dữ liệu sản phẩm và giá

    Lấy tên, giá và tồn kho vào JSON.

    Trích xuất dữ liệu có cấu trúc
  4. 04

    Scrape hàng nghìn URL

    Gửi tối đa 10,000 URL trong một batch job.

    Chạy một batch job
  5. 05

    Đọc các trang sau màn hình đăng nhập

    Đăng nhập một lần, dùng lại session trên mọi trang.

    Dùng session
  6. 06

    Bắt dữ liệu đằng sau một trang

    Đọc JSON mà một trang tải thay vì phân tích HTML.

    Bắt các lệnh gọi mạng

Trả tiền theo trang, chỉ khi nó chạy được

Bạn nhận 1,000 credit miễn phí mỗi tháng, không cần thẻ tín dụng. Một request thất bại, bot challenge hoặc timeout không tốn gì. Miễn phí trong beta.

1credit mỗi trang
Fetch thường
Trang tĩnh. Mặc định.
3credit mỗi trang
Render JavaScript
Các trang tự dựng lên trong trình duyệt.
8credit mỗi trang
Trình duyệt đầy đủ
Ảnh chụp màn hình, PDF, click và biểu mẫu.

1,000 credit miễn phí mỗi tháng tương đương 1,000 trang thường, 333 trang JavaScript hoặc 125 trang trình duyệt đầy đủ.

Câu hỏi thường gặp

Spicrawl là gì?

Spicrawl là một API web scraping biến mọi URL thành Markdown, HTML, PDF hoặc JSON có cấu trúc sạch cho code hoặc AI agent của bạn, qua API, CLI hoặc MCP server.

Spicrawl có miễn phí không?

Có. Nó miễn phí trong beta, với 1,000 credit mỗi tháng và không cần thẻ tín dụng.

Tôi có thể scrape các trang web JavaScript không?

Yes. Set js_render to true to load the page in a real browser. With mode=auto, Spicrawl tries a plain request first and uses a browser only if needed.

Spicrawl có vượt được cơ chế chống bot như Cloudflare không?

Thường là được, nhưng không phải lúc nào cũng vậy. Hãy dùng fingerprint trình duyệt thật, render bằng trình duyệt hoặc proxy của riêng bạn. Một bot challenge trả về một lỗi rõ ràng và không tốn gì. Chế độ stealth và proxy được quản lý chưa có trong beta.

Tôi có thể dùng Spicrawl với AI agent không?

Có. MCP server được lưu trữ sẵn cho phép Claude Code, Cursor và Codex scrape trang, chạy batch, dùng lại session và chạy hành động trên trình duyệt. Chạy spicrawl init để thiết lập.

Request thất bại có tốn credit không?

Không. Chỉ request thành công mới tốn credit: 1 cho request thường, 3 cho render JavaScript và 8 cho trình duyệt đầy đủ. Lỗi, bot challenge và timeout là miễn phí.

Tất cả câu hỏi