Strukturierte Daten aus jeder Website extrahieren
Wähle die Felder, die du brauchst. Bekomme sie als sauberes JSON zurück.


# Wireless Mouse — Model X**$49.00** · Auf Lager · 4.6 (1,284 Bewertungen)Low-latency 2.4 GHz receiver, 70-day battery lifeund stille Schalter.| Spec | Value || --------- | ------------ || Verbindung| 2.4 GHz, BT5 || Akku | 70 Tage |Menüs, Footer und Werbung entfernt: 3 % bis 24 % der Tokens des rohen HTML. Beispielseite.
Die volle Antwort: Status, URL, Engine und Daten. Beispielseite.
Seiteninfos, CSS-Regeln oder ein JSON Schema mit Selektoren. Beispielseite.
Schritte, die auf der Seite im Rendering im vollen Browser ausgeführt werden.
So funktioniert es
- Benenne deine Felder und gib jedem einen CSS-Selektor.
- Sende sie in
extractmit der Seiten-URL. - Lies das JSON. Deine Felder stehen unter
data.
curl https://api.spicrawl.com/v1/scrape \
-H "Authorization: Bearer $SPICRAWL_API_KEY" \
-H "Content-Type: application/json" \
-d '{
"url": "https://example.com/products/42",
"extract": { "title": "h1", "price": ".price", "next_page": "a.next@href" }
}'import os, requests
r = requests.post(
"https://api.spicrawl.com/v1/scrape",
headers={"Authorization": f"Bearer {os.environ['SPICRAWL_API_KEY']}"},
json={
"url": "https://example.com/products/42",
"extract": {"title": "h1", "price": ".price", "next_page": "a.next@href"},
},
timeout=120,
)
env = r.json()
print(env["data"], env.get("empty_fields"))spicrawl scrape https://example.com/products/42 \
--extract '{"title":"h1","price":".price","next_page":"a.next@href"}'{
"status": 200,
"data": {
"title": "Walnut Desk",
"price": "$349.00"
},
"empty_fields": ["next_page"]
}empty_fields listet Felder auf, die nichts getroffen haben. Oft ist das das erste Zeichen, dass eine Website ihr Layout geändert hat.
Drei Wege zu Daten
| Weg | Was du sendest | Was du bekommst |
|---|---|---|
autoparse | "autoparse": true | Das eigene JSON-LD, OpenGraph, Microdata, Metadaten und der App-State der Seite |
| Selektor-Map | Feldnamen und CSS-Selektoren | Genau diese Felder, als Text |
| JSON Schema | Ein Schema, dessen Felder Selektoren haben | Typisierte, geprüfte Werte, aus "$1,234.56" wird 1234.56 |
Gut zu wissen
- Keine zusätzlichen Credits für die Extraktion. Du zahlst nur für die Anfrage: 1 Credit einfach, 3 mit JavaScript.
- Kommt bald: Extraktion aus einem Prompt in einfacher Sprache. Heute nutze Selektoren, ein Schema oder Autoparse.
- Nicht im Batch. Extraktion läuft nur bei einzelnen Scrapes.
- Deine Verantwortung: Extrahiere nur Daten, die du nutzen darfst. Siehe unsere Bedingungen.
Häufig gestellte Fragen
Wie extrahiere ich Daten aus einer Website als JSON?
Sende extract mit einer Map aus Feldnamen und CSS-Selektoren, etwa "title": "h1" und "price": ".price". Die Werte kommen in der JSON-Antwort unter data zurück.
Was macht autoparse?
Es gibt zurück, was die Seite schon über sich selbst sagt, ohne Selektoren: JSON-LD, OpenGraph, Twitter Card, Microdata, RDFa, Head-Metadaten und eingebetteten App-State.
Kann es Zahlen statt Text zurückgeben?
Ja. Nutze ein JSON Schema, dessen Properties einen Selektor haben. Werte werden in den deklarierten Typ umgewandelt, aus "$1,234.56" wird also 1234.56, und das Ergebnis wird gegen das Schema geprüft.
Woran erkenne ich, dass eine Seite ihr Layout ändert?
Prüfe empty_fields in der Antwort. Das Feld listet die Felder auf, deren Selektor nichts getroffen hat, oft das erste Zeichen dafür, dass sich das Markup geändert hat.
Kann ich die Felder in einfachen Worten beschreiben statt mit Selektoren?
Noch nicht. Extraktion mit einem Modell-Prompt kommt bald. Nutze heute Selektoren, ein JSON Schema oder autoparse.