Spicrawl artık OpenAI Agents SDK, LangChain, Codex, Claude Code ve daha fazlasıyla çalışıyor.Entegrasyonları görün
İçeriğe geç

Şunun için canlı dünya verisi: agent’lar

Agent’larınız/sistemleriniz için dünya verisinin kilidini açın, daha iyi ürünler geliştirin.

Kayıt(beta süresince ücretsiz)
Deneyin:

Ücretsiz deneyin: herhangi bir herkese açık sayfa temiz Markdown olarak, kayıt gerekmez.

Spicrawl web scraping API’sinin yaptığı her şey

Markdown ve JSON çıktısı, JavaScript işleme, Cloudflare ve bot engeli aşma, tarayıcı eylemleri, oturumlar, 10.000 URL’ye kadar toplu işler, yapılandırılmış veri çıkarma, ağ yakalama, ekran görüntüleri ve PDF’ler, ve önbellekleme. Her biri aynı API’de bir parametredir ve her biri CLI ile MCP sunucusundan da kullanılabilir.

3/3Sunuldu, o katman için faturalanır

Düz, JavaScript veya tam tarayıcı

  • Katmana göre 1, 3 veya 8 kredi. mode: auto ucuz başlar ve yalnızca gerektiğinde yükselir.
  • Sunan katman için ödersiniz. Hatalar 0 tutar.
  • js_render
  • mod
  • wait_for
render.sh
curl https://api.spicrawl.com/v1/scrape \  -H "Authorization: Bearer spicrawl_live_…" \  -H "Content-Type: application/json" \  -d '{    "url": "https://example.com/products",    "js_render": true,    "wait_for": ".product-card",    "response_format": "json"  }'

spicrawl scrape <url> --render

Rehberi okuyun

API dokümanlarını keşfedin

Bugün scrape ettiğiniz bir sayfada deneyin

Tek API anahtarı, ayda 1.000 ücretsiz kredi, kredi kartı yok.

Up to 97% fewer tokens than raw HTML

Menus, scripts and ads are stripped before the page reaches your model, so the same facts take a fraction of the context. Raw HTML on the left, Spicrawl Markdown on the right.

Spicrawl doküman sayfası
−97%token
GitHub README
−94%token
Wikipedia makalesi
−76%token
Nasıl ölçtüğümüzü görün

Tasarrufu kendi URL’lerinizde ölçün

Aynı sayfaları iki şekilde çalıştırın ve token sayılarını karşılaştırın.

Two ways in: ask your agent, or call the API

Describe the page in plain words, or send one POST request. Both return the same clean output.

  1. Yapay zekanıza sadece sorun

    Bir kez bağlanın, sonra düz sözcüklerle isteyin. Yazılacak kod yok.

    Claude Code’da kurun
  2. API’yi çağırın

    Tek bir POST Markdown, JSON veya HTML döndürür. 10.000 URL’ye kadar toplu iş.

    API dokümanlarını okuyun

Yapay zeka agent’ınızı Spicrawl MCP ile bağlayın

Barındırılan bir MCP sunucusu: scrape, toplu iş, oturumlar ve tarayıcı eylemleri, yapıştırıcı kod gerektirmeden.

MCP uç noktası: https://mcp.spicrawl.com/mcp

  • Scrape
  • Toplu işler
  • Oturumlar
  • Eylemler
  • İstek geçmişi
  • Kullanım
  • Dokümanlar
Claude Code bir sayfayı scrape eder

Bir yapay zeka agent’ı mısınız?

Skill’i alın ve scraping’e başlayın.

$curl -s https://docs.spicrawl.com/skill.md

Skill’i görüntüleyin llms.txt

Zaten kullandığınız araçlarla çalışır

Agent’ınıza web’i tek istemle verin

Claude Code, Cursor, Codex ve her MCP istemcisiyle çalışır.

Get Markdown, JSON or structured data from one request

Pick the format your next step needs: Markdown for a prompt, JSON for your app, a screenshot or PDF for a record.

example.com/product/1
Model X ile tanışın — Her tıklamada hassasiyet
Kablosuz Fare — Model X
Kablosuz Fare — Model X
$49.00Stokta★ 4.6 (1,284)
Düşük gecikmeli 2.4 GHz alıcı, 70 günlük pil ömrü ve sessiz anahtarlar.
ÖzellikDeğer
Bağlantı2.4 GHz, BT5Pil70 gün
<script type="application/ld+json">
result.md
# Kablosuz Fare — Model X**$49.00** · Stokta · 4.6 (1,284 yorum)Low-latency 2.4 GHz receiver, 70-day battery lifeve sessiz anahtarlar.| Spec      | Value        || --------- | ------------ || Connection| 2.4 GHz, BT5 || Pil       | 70 gün       |
Sayfayı okuma
Ham HTML12.480 token
Markdown0 token

Menüler, alt bilgiler ve reklamlar çıkarıldı: ham HTML token’larının %3 ila %24’ü. Örnek sayfa.

Her web sitesini LLM’ler için Markdown’a dönüştürün

Scrape JavaScript sites, logins and dynamic pages

Start with a plain fetch. Spicrawl moves up to a real browser only when the page needs one. Keep a session to stay logged in, or bring your own proxy.

Spicrawl kontrol paneli
Otomatik yükseltme
Tarayıcı
Parmak izi
Proxy
Yönetilen proxy’ler: yakında
Oturum
Eylemler
Varlıkları engelle
Ağ yakalama
Önbellek
POST /v1/scrape
{  "url": "https://shop.example/product/1",  "mode": "auto",  "cache": true,  "response_format": "markdown"}
Örnek yanıt başlıkları
X-Target-Status
200
X-Engine
fetch
X-Proxy-Source
doğrudan
Cache-State
isabet
X-Credits-Charged
1
Otomatik yükseltme

Düz bir istekle başlar ve yalnızca site engellerse tarayıcıya yükselir. Engellenen istekler ücretsizdir.

Yalnızca örnek, canlı istek değil. Beta ücretsizdir.

Test in the dashboard, then ship with the API or CLI

Try a URL, copy the request, and run it from your code or your terminal.

CLI

Terminalinizden tek bir URL’yi scrape edin, binlercesini toplu işleyin ve oturumları yönetin.

CLI dokümanlarını okuyun

Kontrol paneli

Test istekleri çalıştırın, günlükleri ve kullanımı okuyun ve API anahtarlarını yönetin.

Panoyu açın

Dokümanlar

Rehberler, API başvurusu ve araçlarınız için bir OpenAPI spesifikasyonu.

Dokümanları okuyun

Try what people build with Spicrawl

Small working tools, each built on the Spicrawl API.

  1. change-monitor.spicrawl.com

    Değişiklik izleyici

    Bir sayfayı yeniden kontrol edin ve neyin değiştiğini görün.

    Canlı deneyin
  2. price-tracker.spicrawl.com

    Fiyat takipçisi

    Bir ürün bağlantısı yapıştırın, fiyatını alın.

    Canlı deneyin
  3. docs2skill.spicrawl.com

    Dokümanlar → Skill

    Bir doküman sitesini agent skill’ine çevirin.

    Canlı deneyin

What you can build with a web scraping API

Each job links to a guide in the docs, with working code.

  1. 01

    LLM’leri ve RAG işlem hatlarını besleyin

    Makaleleri, dokümanları ve PDF’leri gömmeye hazır temiz Markdown’a çevirin.

    LLM’ler için Markdown
  2. 02

    Yapay zeka agent’larına web erişimi verin

    Canlı sayfaları okumak için Claude Code, Cursor veya Codex’i bağlayın.

    Agent’larla geliştirin
  3. 03

    Ürün ve fiyat verisi toplayın

    İsimleri, fiyatları ve stoku JSON’a çekin.

    Yapılandırılmış veri çıkarın
  4. 04

    Binlerce URL’yi scrape edin

    Tek toplu işte 10.000 URL’ye kadar gönderin.

    Bir toplu iş çalıştırın
  5. 05

    Giriş arkasındaki sayfaları okuyun

    Bir kez giriş yapın, oturumu her sayfada yeniden kullanın.

    Oturumları kullanın
  6. 06

    Bir sayfanın arkasındaki veriyi yakalayın

    Bir sayfanın yüklediği JSON’u HTML’i ayrıştırmak yerine okuyun.

    Ağ çağrılarını yakalayın

Sayfa başına öde, yalnızca çalıştığında

Her ay kredi kartı olmadan 1.000 ücretsiz kredi alırsınız. Başarısız bir istek, bot doğrulaması veya zaman aşımı ücretsizdir. Betada ücretsiz.

1sayfa başına kredi
Düz fetch
Statik sayfalar. Varsayılan.
3sayfa başına kredi
JavaScript işleme
Kendini tarayıcıda oluşturan sayfalar.
8sayfa başına kredi
Tam tarayıcı
Ekran görüntüleri, PDF’ler, tıklamalar ve formlar.

Ayda 1.000 ücretsiz kredi 1.000 düz, 333 JavaScript veya 125 tam tarayıcı sayfası eder.

Sık sorulan sorular

Spicrawl nedir?

Spicrawl, herhangi bir URL’yi kodunuz veya yapay zeka agent’ınız için temiz Markdown, HTML, PDF veya yapılandırılmış JSON’a çeviren bir web scraping API’sidir; API, CLI veya MCP sunucusu üzerinden.

Spicrawl ücretsiz mi?

Evet. Beta süresince ücretsizdir, ayda 1.000 kredi ile ve kredi kartı gerekmez.

JavaScript web sitelerini scrape edebilir miyim?

Yes. Set js_render to true to load the page in a real browser. With mode=auto, Spicrawl tries a plain request first and uses a browser only if needed.

Spicrawl, Cloudflare gibi bot korumalarını aşabilir mi?

Çoğu zaman, ama her zaman değil. Gerçek bir tarayıcı parmak izi, tarayıcıda işleme veya kendi proxy’nizi kullanın. Bir bot doğrulaması net bir hata döndürür ve ücretsizdir. Stealth modu ve yönetilen proxy’ler betada yok.

Spicrawl’ı yapay zeka agent’larıyla kullanabilir miyim?

Evet. Barındırılan MCP sunucusu Claude Code, Cursor ve Codex’in sayfaları scrape etmesini, toplu işler çalıştırmasını, oturumları yeniden kullanmasını ve tarayıcı eylemleri çalıştırmasını sağlar. Kurmak için spicrawl init çalıştırın.

Başarısız istekler kredi tutar mı?

Hayır. Yalnızca başarılı istekler kredi tutar: düz için 1, JavaScript işleme için 3 ve tam tarayıcı için 8. Hatalar, bot doğrulamaları ve zaman aşımları ücretsizdir.

Tüm sorular