Spicrawl werkt nu met OpenAI Agents SDK, LangChain, Codex, Claude Code en meer.Bekijk integraties
Naar inhoud springen

Live wereldwijde data voor agents

Ontgrendel wereldwijde data voor je agents/systemen, bouw betere producten.

Aanmelden(gratis tijdens de beta)
Probeer:

Probeer het gratis: elke openbare pagina als schone Markdown, zonder aanmelding.

Alles wat de Spicrawl web scraping-API doet

Markdown- en JSON-uitvoer, JavaScript-rendering, Cloudflare- en anti-botafhandeling, browseracties, sessies, batchjobs tot 10.000 URL's, gestructureerde extractie, netwerkcapture, screenshots en PDF's, en caching. Elk daarvan is een parameter op dezelfde API en elk is ook beschikbaar via de CLI en de MCP-server.

3/3Geleverd, gerekend voor die tier

Gewoon, JavaScript of volledige browser

  • 1, 3 of 8 credits per niveau. mode: auto begint goedkoop en schaalt alleen op als dat nodig is.
  • Je betaalt voor de tier die het verzoek afhandelde. Mislukkingen kosten 0.
  • js_render
  • mode
  • wait_for
render.sh
curl https://api.spicrawl.com/v1/scrape \  -H "Authorization: Bearer spicrawl_live_…" \  -H "Content-Type: application/json" \  -d '{    "url": "https://example.com/products",    "js_render": true,    "wait_for": ".product-card",    "response_format": "json"  }'

spicrawl scrape <url> --render

Lees de gids

Bekijk de API-docs

Probeer het op een pagina die je nu scrapet

Eén API-sleutel, 1.000 gratis credits per maand, geen creditcard.

Up to 97% fewer tokens than raw HTML

Menus, scripts and ads are stripped before the page reaches your model, so the same facts take a fraction of the context. Raw HTML on the left, Spicrawl Markdown on the right.

Spicrawl docs-pagina
−97%tokens
GitHub README
−94%tokens
Wikipedia-artikel
−76%tokens
Zie hoe we hebben gemeten

Meet de besparing op je eigen URL's

Draai dezelfde pagina's op beide manieren en vergelijk de tokenaantallen.

Two ways in: ask your agent, or call the API

Describe the page in plain words, or send one POST request. Both return the same clean output.

  1. Vraag het gewoon aan je AI

    Verbind één keer en vraag dan in gewone woorden. Geen code om te schrijven.

    Instellen in Claude Code
  2. Roep de API aan

    Eén POST geeft Markdown, JSON of HTML terug. Batch tot 10.000 URL's.

    Lees de API-docs

Verbind je AI-agent met Spicrawl MCP

Een gehoste MCP-server: scrape, batch, sessies en browseracties, zonder glue code.

MCP-endpoint: https://mcp.spicrawl.com/mcp

  • Scrapen
  • Batchjobs
  • Sessies
  • Acties
  • Verzoekgeschiedenis
  • Gebruik
  • Docs
Claude Code scrapet een pagina

Ben je een AI-agent?

Haal de skill op en begin met scrapen.

$curl -s https://docs.spicrawl.com/skill.md

Bekijk de skill llms.txt

Werkt met de tools die je al gebruikt

Geef je agent het web in één prompt

Werkt met Claude Code, Cursor, Codex en elke MCP-client.

Get Markdown, JSON or structured data from one request

Pick the format your next step needs: Markdown for a prompt, JSON for your app, a screenshot or PDF for a record.

example.com/product/1
Maak kennis met Model X — Precisie bij elke klik
Wireless Mouse — Model X
Wireless Mouse — Model X
$49.00Op voorraad★ 4.6 (1,284)
Ontvanger met lage latency op 2.4 GHz, 70 dagen batterijduur en stille schakelaars.
SpecWaarde
Verbinding2.4 GHz, BT5Batterij70 dagen
<script type="application/ld+json">
result.md
# Wireless Mouse — Model X**$49.00** · Op voorraad · 4.6 (1.284 reviews)Lage-latency 2.4 GHz-ontvanger, 70-day batterijduuren stille omschakelingen.| Spec      | Value        || --------- | ------------ || Verbinding| 2.4 GHz, BT5 || Batterij  | 70 dagen     |
De pagina lezen
Ruwe HTML12.480 tokens
Markdown0 tokens

Menu's, footers en advertenties verwijderd: 3% tot 24% van de tokens van de ruwe HTML. Voorbeeldpagina.

Zet elke website om naar Markdown voor LLM's

Scrape JavaScript sites, logins and dynamic pages

Start with a plain fetch. Spicrawl moves up to a real browser only when the page needs one. Keep a session to stay logged in, or bring your own proxy.

Spicrawl-controlepaneel
Automatisch opschalen
Browser
Fingerprint
Proxy
Beheerde proxy's: binnenkort
Sessie
Acties
Assets blokkeren
Netwerkcapture
Cache
POST /v1/scrape
{  "url": "https://shop.example/product/1",  "mode": "auto",  "cache": true,  "response_format": "markdown"}
Voorbeeld van responseheaders
X-Target-Status
200
X-Engine
fetch
X-Proxy-Source
direct
Cache-State
hit
X-Credits-Charged
1
Automatisch opschalen

Begint met een gewoon verzoek en gaat alleen naar een browser als de site het blokkeert. Geblokkeerde verzoeken kosten niets.

Alleen een voorbeeld, geen live verzoek. De beta is gratis.

Test in the dashboard, then ship with the API or CLI

Try a URL, copy the request, and run it from your code or your terminal.

CLI

Scrape één URL, batch duizenden en beheer sessies vanuit je terminal.

Lees de CLI-docs

Dashboard

Voer testverzoeken uit, lees logs en gebruik, en beheer API-sleutels.

Dashboard openen

Docs

Gidsen, de API-referentie en een OpenAPI-spec voor je tooling.

Lees de docs

Try what people build with Spicrawl

Small working tools, each built on the Spicrawl API.

  1. change-monitor.spicrawl.com

    Change monitor

    Controleer een pagina opnieuw en zie wat er is veranderd.

    Probeer het live
  2. price-tracker.spicrawl.com

    Prijstracker

    Plak een productlink, krijg de prijs.

    Probeer het live
  3. docs2skill.spicrawl.com

    Docs → Skill

    Maak van een docssite een agent skill.

    Probeer het live

What you can build with a web scraping API

Each job links to a guide in the docs, with working code.

  1. 01

    Voed LLM's en RAG-pipelines

    Zet artikelen, docs en PDF's om in schone Markdown, klaar om te embedden.

    Markdown voor LLM's
  2. 02

    Geef AI-agents toegang tot het web

    Verbind Claude Code, Cursor of Codex om live pagina's te lezen.

    Bouw met agents
  3. 03

    Verzamel product- en prijsdata

    Haal namen, prijzen en voorraad in JSON.

    Gestructureerde data extraheren
  4. 04

    Scrape duizenden URL's

    Stuur tot 10.000 URL's in één batchjob.

    Voer een batchjob uit
  5. 05

    Lees pagina's achter een login

    Log één keer in, hergebruik de sessie op elke pagina.

    Gebruik sessies
  6. 06

    Leg de data achter een pagina vast

    Lees de JSON die een pagina laadt in plaats van HTML te parsen.

    Netwerkaanroepen vastleggen

Betaal per pagina, alleen als het werkt

Je krijgt elke maand 1.000 gratis credits, zonder creditcard. Een mislukt verzoek, botchallenge of timeout kost niets. Gratis tijdens de beta.

1credit per pagina
Gewone fetch
Statische pagina's. De standaard.
3credits per pagina
JavaScript-rendering
Pagina's die zichzelf in de browser opbouwen.
8credits per pagina
Volledige browser
Screenshots, PDF's, klikken en formulieren.

1.000 gratis credits per maand is 1.000 gewone, 333 JavaScript- of 125 full-browser-pagina's.

Veelgestelde vragen

Wat is Spicrawl?

Spicrawl is een web scraping-API die elke URL omzet in schone Markdown, HTML, een PDF of gestructureerde JSON voor je code of AI-agent, via een API, CLI of MCP-server.

Is Spicrawl gratis?

Ja. Het is gratis tijdens de beta, met 1.000 credits per maand en zonder creditcard.

Kan ik JavaScript-websites scrapen?

Yes. Set js_render to true to load the page in a real browser. With mode=auto, Spicrawl tries a plain request first and uses a browser only if needed.

Kan Spicrawl langs botbescherming zoals Cloudflare komen?

Vaak wel, maar niet altijd. Gebruik een echte browser-fingerprint, browserrendering of je eigen proxy. Een botchallenge geeft een duidelijke fout en kost niets. Stealth-modus en beheerde proxy's zitten niet in de beta.

Kan ik Spicrawl met AI-agents gebruiken?

Ja. Met de gehoste MCP-server kunnen Claude Code, Cursor en Codex pagina's scrapen, batches draaien, sessies hergebruiken en browseracties uitvoeren. Voer spicrawl init uit om het in te stellen.

Kosten mislukte verzoeken credits?

Nee. Alleen geslaagde verzoeken kosten credits: 1 voor gewoon, 3 voor JavaScript-rendering en 8 voor een volledige browser. Fouten, botchallenges en timeouts zijn gratis.

Alle vragen