Spicrawl artık OpenAI Agents SDK, LangChain, Codex, Claude Code ve daha fazlasıyla çalışıyor.Entegrasyonları görün
İçeriğe geç

Her web sitesinden yapılandırılmış veri çıkarın

İhtiyacınız olan alanları seçin. Temiz JSON olarak geri alın.

example.com/product/1
Model X ile tanışın — Her tıklamada hassasiyet
Kablosuz Fare — Model X
Kablosuz Fare — Model X
$49.00Stokta★ 4.6 (1,284)
Düşük gecikmeli 2.4 GHz alıcı, 70 günlük pil ömrü ve sessiz anahtarlar.
ÖzellikDeğer
Bağlantı2.4 GHz, BT5Pil70 gün
<script type="application/ld+json">
result.md
# Kablosuz Fare — Model X**$49.00** · Stokta · 4.6 (1,284 yorum)Low-latency 2.4 GHz receiver, 70-day battery lifeve sessiz anahtarlar.| Spec      | Value        || --------- | ------------ || Connection| 2.4 GHz, BT5 || Pil       | 70 gün       |
Sayfayı okuma
Ham HTML12.480 token
Markdown0 token

Menüler, alt bilgiler ve reklamlar çıkarıldı: ham HTML token’larının %3 ila %24’ü. Örnek sayfa.

Nasıl çalışır

  1. Alanlarınızı adlandırın ve her birine bir CSS seçici verin.
  2. Gönderin extract ile, sayfa URL’siyle birlikte.
  3. JSON’u okuyun. Alanlarınız data altındadır.
curl https://api.spicrawl.com/v1/scrape \
  -H "Authorization: Bearer $SPICRAWL_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "url": "https://example.com/products/42",
    "extract": { "title": "h1", "price": ".price", "next_page": "a.next@href" }
  }'
json
{
  "status": 200,
  "data": {
    "title": "Walnut Desk",
    "price": "$349.00"
  },
  "empty_fields": ["next_page"]
}

empty_fields hiçbir şeyle eşleşmeyen alanları listeler. Bir sitenin yerleşimini değiştirdiğinin çoğu zaman ilk işaretidir.

Veri almanın üç yolu

YolGönderdiklerinizNe elde edersiniz
autoparse"autoparse": trueSayfanın kendi JSON-LD, OpenGraph, microdata, meta verileri ve uygulama durumu
Seçici eşlemesiAlan adları ve CSS seçicileriTam olarak bu alanlar, metin olarak
JSON SchemaAlanlarının seçicileri olan bir şemaTipli, kontrol edilmiş değerler: "$1,234.56" değeri 1234.56 olur

Bilmekte fayda var

  • Ek kredi yok çıkarma için. Yalnızca istek için ödersiniz: düz istekte 1 kredi, JavaScript ile 3.
  • Yakında: Düz dilde bir prompt’tan çıkarma. Bugün seçicileri, bir şemayı veya autoparse’ı kullanın.
  • Toplu işte yok. Çıkarma yalnızca tekli scrape’lerde çalışır.
  • Sorumluluğunuz: yalnızca kullanma hakkınız olan verileri çıkarın. şartlar sayfamıza bakın.

Sık sorulan sorular

Bir web sitesinden veriyi JSON olarak nasıl çıkarırım?

Alan adlarından CSS seçicilerine bir eşleme ile extract gönderin, örneğin "title": "h1" ve "price": ".price". Değerler JSON yanıtında data altında döner.

autoparse ne yapar?

Sayfanın kendisi hakkında zaten söylediklerini seçici olmadan döndürür: JSON-LD, OpenGraph, Twitter Card, microdata, RDFa, head meta verileri ve gömülü uygulama durumu.

Metin yerine sayı döndürebilir mi?

Evet. Özelliklerinin seçicisi olan bir JSON Schema kullanın. Değerler bildirilen türe dönüştürülür, böylece "$1,234.56" 1234.56 olur ve sonuç şemaya karşı kontrol edilir.

Bir site yerleşimini değiştirdiğinde nasıl anlarım?

Yanıttaki empty_fields alanını kontrol edin. Seçicisi hiçbir şeyle eşleşmeyen alanları listeler; bu, işaretlemenin değiştiğinin çoğu zaman ilk işaretidir.

Alanları seçiciler yerine düz sözcüklerle tarif edebilir miyim?

Henüz değil. Model istemiyle veri çıkarma yakında geliyor. Bugün seçicileri, bir JSON Schema’yı veya autoparse’ı kullanın.