Extraheer gestructureerde data van elke website
Kies de velden die je nodig hebt. Krijg ze terug als schone JSON.


# Wireless Mouse — Model X**$49.00** · Op voorraad · 4.6 (1.284 reviews)Lage-latency 2.4 GHz-ontvanger, 70-day batterijduuren stille omschakelingen.| Spec | Value || --------- | ------------ || Verbinding| 2.4 GHz, BT5 || Batterij | 70 dagen |Menu's, footers en advertenties verwijderd: 3% tot 24% van de tokens van de ruwe HTML. Voorbeeldpagina.
Het volledige antwoord: status, URL, engine en data. Voorbeeldpagina.
Pagina-info, CSS-regels of een JSON Schema met selectors. Voorbeeldpagina.
Stappen die op de pagina worden uitgevoerd, in volledige browserrendering.
Hoe het werkt
- Benoem je velden en geef elk veld een CSS-selector.
- Stuur ze in
extractmet de URL van de pagina. - Lees de JSON. Je velden staan onder
data.
curl https://api.spicrawl.com/v1/scrape \
-H "Authorization: Bearer $SPICRAWL_API_KEY" \
-H "Content-Type: application/json" \
-d '{
"url": "https://example.com/products/42",
"extract": { "title": "h1", "price": ".price", "next_page": "a.next@href" }
}'import os, requests
r = requests.post(
"https://api.spicrawl.com/v1/scrape",
headers={"Authorization": f"Bearer {os.environ['SPICRAWL_API_KEY']}"},
json={
"url": "https://example.com/products/42",
"extract": {"title": "h1", "price": ".price", "next_page": "a.next@href"},
},
timeout=120,
)
env = r.json()
print(env["data"], env.get("empty_fields"))spicrawl scrape https://example.com/products/42 \
--extract '{"title":"h1","price":".price","next_page":"a.next@href"}'{
"status": 200,
"data": {
"title": "Walnut Desk",
"price": "$349.00"
},
"empty_fields": ["next_page"]
}empty_fields toont velden die nergens mee overeenkwamen. Het is vaak het eerste teken dat een site zijn layout heeft veranderd.
Drie manieren om data te krijgen
| Manier | Wat je stuurt | Wat je krijgt |
|---|---|---|
autoparse | "autoparse": true | De eigen JSON-LD, OpenGraph, microdata, metadata en app-state van de pagina |
| Selectormap | Veldnamen en CSS-selectors | Precies die velden, als tekst |
| JSON Schema | Een schema waarvan de velden selectors hebben | Getypeerde, gecontroleerde waarden, dus "$1,234.56" wordt 1234.56 |
Goed om te weten
- Geen extra credits voor extractie. Je betaalt alleen voor het verzoek: 1 credit gewoon, 3 met JavaScript.
- Binnenkort: extractie op basis van een prompt in gewone taal. Gebruik nu selectors, een schema of autoparse.
- Niet bij batch. Extractie draait alleen bij losse scrapes.
- Jouw verantwoordelijkheid: extraheer alleen data die je mag gebruiken. Zie onze voorwaarden.
Veelgestelde vragen
Hoe haal ik data van een website als JSON?
Stuur extract met een map van veldnamen naar CSS-selectors, zoals "title": "h1" en "price": ".price". De waarden komen terug onder data in de JSON-respons.
Wat doet autoparse?
Het geeft terug wat de pagina zelf al over zichzelf zegt, zonder selectors: JSON-LD, OpenGraph, Twitter Card, microdata, RDFa, head-metadata en ingebedde app-state.
Kan het getallen teruggeven in plaats van tekst?
Ja. Gebruik een JSON Schema waarvan de properties een selector hebben. Waarden worden omgezet naar het gedeclareerde type, dus "$1,234.56" wordt 1234.56, en het resultaat wordt gecontroleerd tegen het schema.
Hoe weet ik wanneer een site zijn lay-out wijzigt?
Controleer empty_fields in de respons. Daar staan de velden in waarvan de selector niets vond, wat vaak het eerste teken is dat de markup is veranderd.
Kan ik de velden in gewone woorden beschrijven in plaats van met selectors?
Nog niet. Extractie met een modelprompt komt binnenkort. Gebruik nu selectors, een JSON Schema of autoparse.