Spicrawl kini bekerja dengan OpenAI Agents SDK, LangChain, Codex, Claude Code, dan lainnya.Lihat integrasi
Lewati ke konten

Data dunia nyata langsung untuk agen

Buka data dunia untuk agen/sistem Anda, bangun produk yang lebih baik.

Daftar(gratis selama beta)
Coba:

Coba gratis: halaman publik apa pun sebagai Markdown bersih, tanpa pendaftaran.

Semua yang dilakukan API web scraping Spicrawl

Output Markdown dan JSON, rendering JavaScript, penanganan Cloudflare dan anti-bot, aksi browser, session, job batch hingga 10,000 URL, ekstraksi terstruktur, capture jaringan, screenshot dan PDF, dan caching. Masing-masing adalah parameter pada API yang sama, dan masing-masing juga tersedia dari CLI dan server MCP.

3/3Dilayani, ditagih untuk tingkat itu

Biasa, JavaScript, atau browser penuh

  • 1, 3, atau 8 kredit sesuai tingkatan. mode: auto mulai dari yang murah dan naik hanya bila perlu.
  • Anda membayar tingkat yang melayani. Kegagalan berbiaya 0.
  • js_render
  • mode
  • wait_for
render.sh
curl https://api.spicrawl.com/v1/scrape \  -H "Authorization: Bearer spicrawl_live_…" \  -H "Content-Type: application/json" \  -d '{    "url": "https://example.com/products",    "js_render": true,    "wait_for": ".product-card",    "response_format": "json"  }'

spicrawl scrape <url> --render

Baca panduannya

Jelajahi dokumentasi API

Coba pada halaman yang Anda scrape hari ini

Satu API key, 1,000 kredit gratis per bulan, tanpa kartu kredit.

Up to 97% fewer tokens than raw HTML

Menus, scripts and ads are stripped before the page reaches your model, so the same facts take a fraction of the context. Raw HTML on the left, Spicrawl Markdown on the right.

Halaman dokumentasi Spicrawl
−97%token
GitHub README
−94%token
Artikel Wikipedia
−76%token
Lihat cara kami mengukur

Ukur penghematan pada URL Anda sendiri

Jalankan halaman yang sama dengan kedua cara dan bandingkan jumlah token.

Two ways in: ask your agent, or call the API

Describe the page in plain words, or send one POST request. Both return the same clean output.

  1. Tanyakan saja ke AI Anda

    Hubungkan sekali, lalu bertanya dengan kata-kata biasa. Tanpa kode yang perlu ditulis.

    Siapkan di Claude Code
  2. Panggil API

    Satu POST mengembalikan Markdown, JSON, atau HTML. Batch hingga 10,000 URL.

    Baca dokumentasi API

Hubungkan agen AI Anda dengan Spicrawl MCP

Server MCP hosted: scrape, batch, session, dan aksi browser, tanpa kode perekat.

Endpoint MCP: https://mcp.spicrawl.com/mcp

  • Scrape
  • Job batch
  • Session
  • Aksi
  • Riwayat permintaan
  • Penggunaan
  • Dokumentasi
Claude Code melakukan scrape halaman

Apakah Anda agen AI?

Ambil skill dan mulai scraping.

$curl -s https://docs.spicrawl.com/skill.md

Lihat skill llms.txt

Bekerja dengan tool yang sudah Anda pakai

Beri agen Anda web dalam satu prompt

Bekerja dengan Claude Code, Cursor, Codex, dan klien MCP apa pun.

Get Markdown, JSON or structured data from one request

Pick the format your next step needs: Markdown for a prompt, JSON for your app, a screenshot or PDF for a record.

example.com/product/1
Kenali Model X — Presisi di setiap klik
Wireless Mouse — Model X
Wireless Mouse — Model X
$49.00Tersedia★ 4.6 (1,284)
Receiver 2.4 GHz latensi rendah, baterai tahan 70 hari, dan switch senyap.
SpesifikasiNilai
Koneksi2.4 GHz, BT5Baterai70 hari
<script type="application/ld+json">
result.md
# Wireless Mouse — Model X**$49.00** · Tersedia · 4.6 (1,284 ulasan)Low-latency 2.4 GHz receiver, 70-day battery lifedan switch senyap.| Spec      | Value        || --------- | ------------ || Koneksi   | 2.4 GHz, BT5 || Baterai   | 70 hari      |
Membaca halaman
HTML mentah12,480 token
Markdown0 token

Menu, footer, dan iklan dihapus: 3% hingga 24% dari token HTML mentah. Halaman contoh.

Ubah situs web apa pun menjadi Markdown untuk LLM

Scrape JavaScript sites, logins and dynamic pages

Start with a plain fetch. Spicrawl moves up to a real browser only when the page needs one. Keep a session to stay logged in, or bring your own proxy.

Panel kontrol Spicrawl
Eskalasi otomatis
Browser
Fingerprint
Proxy
Proxy terkelola: segera hadir
Session
Aksi
Blokir aset
Capture jaringan
Cache
POST /v1/scrape
{  "url": "https://shop.example/product/1",  "mode": "auto",  "cache": true,  "response_format": "markdown"}
Contoh header respons
X-Target-Status
200
X-Engine
fetch
X-Proxy-Source
direct
Cache-State
hit
X-Credits-Charged
1
Eskalasi otomatis

Dimulai dengan permintaan biasa dan naik ke browser hanya jika situs memblokirnya. Permintaan yang diblokir tidak berbiaya.

Hanya contoh, bukan permintaan langsung. Beta ini gratis.

Test in the dashboard, then ship with the API or CLI

Try a URL, copy the request, and run it from your code or your terminal.

CLI

Scrape satu URL, batch ribuan, dan kelola session dari terminal Anda.

Baca dokumentasi CLI

Dashboard

Jalankan permintaan uji, baca log dan penggunaan, dan kelola API key.

Buka dasbor

Dokumentasi

Panduan, referensi API, dan spesifikasi OpenAPI untuk tooling Anda.

Baca dokumentasi

Try what people build with Spicrawl

Small working tools, each built on the Spicrawl API.

  1. change-monitor.spicrawl.com

    Pemantau perubahan

    Periksa ulang halaman dan lihat apa yang berubah.

    Coba langsung
  2. price-tracker.spicrawl.com

    Pelacak harga

    Tempel tautan produk, dapatkan harganya.

    Coba langsung
  3. docs2skill.spicrawl.com

    Dokumentasi → Skill

    Ubah situs dokumentasi menjadi skill agen.

    Coba langsung

What you can build with a web scraping API

Each job links to a guide in the docs, with working code.

  1. 01

    Beri makan LLM dan pipeline RAG

    Ubah artikel, dokumentasi, dan PDF menjadi Markdown bersih, siap di-embed.

    Markdown untuk LLM
  2. 02

    Beri agen AI akses web

    Hubungkan Claude Code, Cursor, atau Codex untuk membaca halaman langsung.

    Bangun dengan agen
  3. 03

    Kumpulkan data produk dan harga

    Ambil nama, harga, dan stok ke dalam JSON.

    Ekstrak data terstruktur
  4. 04

    Scrape ribuan URL

    Kirim hingga 10,000 URL dalam satu job batch.

    Jalankan batch job
  5. 05

    Baca halaman di balik login

    Login sekali, pakai ulang session di setiap halaman.

    Gunakan session
  6. 06

    Tangkap data di balik halaman

    Baca JSON yang dimuat halaman, bukan mengurai HTML-nya.

    Tangkap panggilan jaringan

Bayar per halaman, hanya saat berhasil

Anda mendapat 1,000 kredit gratis setiap bulan, tanpa kartu kredit. Permintaan gagal, tantangan bot, atau timeout tidak berbiaya. Gratis selama beta.

1kredit per halaman
Fetch biasa
Halaman statis. Default.
3kredit per halaman
Rendering JavaScript
Halaman yang dibangun sendiri di browser.
8kredit per halaman
Browser penuh
Screenshot, PDF, klik, dan form.

1,000 kredit gratis per bulan setara 1,000 halaman biasa, 333 halaman JavaScript, atau 125 halaman browser penuh.

Pertanyaan yang sering diajukan

Apa itu Spicrawl?

Spicrawl adalah API web scraping yang mengubah URL apa pun menjadi Markdown bersih, HTML, PDF, atau JSON terstruktur untuk kode atau agen AI Anda, lewat API, CLI, atau server MCP.

Apakah Spicrawl gratis?

Ya. Gratis selama beta, dengan 1,000 kredit per bulan dan tanpa kartu kredit.

Bisakah saya melakukan scrape situs JavaScript?

Yes. Set js_render to true to load the page in a real browser. With mode=auto, Spicrawl tries a plain request first and uses a browser only if needed.

Bisakah Spicrawl melewati perlindungan bot seperti Cloudflare?

Sering, tetapi tidak selalu. Gunakan fingerprint browser asli, rendering browser, atau proxy Anda sendiri. Tantangan bot mengembalikan error yang jelas dan tidak berbiaya. Mode stealth dan proxy terkelola tidak ada di beta.

Bisakah saya memakai Spicrawl dengan agen AI?

Ya. Server MCP hosted memungkinkan Claude Code, Cursor, dan Codex melakukan scrape halaman, menjalankan batch, memakai ulang session, dan menjalankan aksi browser. Jalankan spicrawl init untuk menyiapkannya.

Apakah permintaan gagal memakan kredit?

Tidak. Hanya permintaan yang berhasil memakan kredit: 1 untuk biasa, 3 untuk rendering JavaScript, dan 8 untuk browser penuh. Error, tantangan bot, dan timeout gratis.

Semua pertanyaan