O Spicrawl agora funciona com OpenAI Agents SDK, LangChain, Codex, Claude Code e mais.Ver integrações
Pular para o conteúdo

Dados do mundo ao vivo para agentes

Desbloqueie dados do mundo para os seus agentes/sistemas e construa produtos melhores.

Cadastro(grátis durante o beta)
Experimente:

Experimente grátis: qualquer página pública como Markdown limpo, sem cadastro.

Tudo o que a API de web scraping do Spicrawl faz

Saída em Markdown e JSON, renderização JavaScript, tratamento de Cloudflare e anti-bot, ações de navegador, sessões, jobs em batch de até 10.000 URLs, extração estruturada, captura de rede, screenshots e PDFs, e cache. Cada um é um parâmetro da mesma API e também está disponível na CLI e no servidor MCP.

3/3Atendido, cobrado por esse nível

Simples, JavaScript ou navegador completo

  • 1, 3 ou 8 créditos por nível. mode: auto começa barato e só sobe quando necessário.
  • Você paga pelo nível que atendeu. Falhas custam 0.
  • js_render
  • modo
  • wait_for
render.sh
curl https://api.spicrawl.com/v1/scrape \  -H "Authorization: Bearer spicrawl_live_…" \  -H "Content-Type: application/json" \  -d '{    "url": "https://example.com/products",    "js_render": true,    "wait_for": ".product-card",    "response_format": "json"  }'

spicrawl scrape <url> --render

Ler o guia

Explorar a documentação da API

Experimente em uma página que você faz scrape hoje

Uma chave de API, 1.000 créditos grátis por mês, sem cartão de crédito.

Up to 97% fewer tokens than raw HTML

Menus, scripts and ads are stripped before the page reaches your model, so the same facts take a fraction of the context. Raw HTML on the left, Spicrawl Markdown on the right.

Página da documentação do Spicrawl
−97%tokens
README do GitHub
−94%tokens
Artigo da Wikipedia
−76%tokens
Veja como medimos

Meça a economia nas suas próprias URLs

Rode as mesmas páginas das duas formas e compare a contagem de tokens.

Two ways in: ask your agent, or call the API

Describe the page in plain words, or send one POST request. Both return the same clean output.

  1. É só perguntar à sua IA

    Conecte uma vez e depois peça em palavras simples. Sem código para escrever.

    Configurar no Claude Code
  2. Chame a API

    Um POST retorna Markdown, JSON ou HTML. Batch de até 10.000 URLs.

    Ler a documentação da API

Conecte seu agente de IA com o Spicrawl MCP

Um servidor MCP hospedado: scrape, batch, sessões e ações de navegador, sem código de ligação.

Endpoint MCP: https://mcp.spicrawl.com/mcp

  • Scrape
  • Jobs em batch
  • Sessões
  • Ações
  • Histórico de requisições
  • Uso
  • Docs
O Claude Code faz scrape de uma página

Você é um agente de IA?

Busque a skill e comece a fazer scraping.

$curl -s https://docs.spicrawl.com/skill.md

Ver a skill llms.txt

Funciona com as ferramentas que você já usa

Dê a web ao seu agente em um único prompt

Funciona com Claude Code, Cursor, Codex e qualquer cliente MCP.

Get Markdown, JSON or structured data from one request

Pick the format your next step needs: Markdown for a prompt, JSON for your app, a screenshot or PDF for a record.

example.com/product/1
Conheça o Modelo X — Precisão em cada clique
Mouse sem fio — Modelo X
Mouse sem fio — Modelo X
$49.00Em estoque★ 4.6 (1,284)
Receptor de 2.4 GHz de baixa latência, bateria de 70 dias e switches silenciosos.
EspecificaçõesValor
Conexão2.4 GHz, BT5Bateria70 dias
<script type="application/ld+json">
result.md
# Mouse sem fio — Modelo X**$49.00** · Em estoque · 4.6 (1,284 avaliações)Receptor de 2.4 GHz de baixa-latency, bateria de 70-daye switches silenciosos.| Spec      | Value        || --------- | ------------ || Conexão   | 2.4 GHz, BT5 || Bateria   | 70 dias      |
Lendo a página
HTML bruto12.480 tokens
Markdown0 tokens

Sem menus, rodapés e anúncios: de 3% a 24% dos tokens do HTML bruto. Página de exemplo.

Converta qualquer site em Markdown para LLMs

Scrape JavaScript sites, logins and dynamic pages

Start with a plain fetch. Spicrawl moves up to a real browser only when the page needs one. Keep a session to stay logged in, or bring your own proxy.

Painel de controle do Spicrawl
Escalonamento automático
Navegador
Fingerprint
Proxy
Proxies gerenciados: em breve
Sessão
Ações
Bloquear assets
Captura de rede
Cache
POST /v1/scrape
{  "url": "https://shop.example/product/1",  "mode": "auto",  "cache": true,  "response_format": "markdown"}
Exemplo de cabeçalhos de resposta
X-Target-Status
200
X-Engine
fetch
X-Proxy-Source
direct
Cache-State
acerto
X-Credits-Charged
1
Escalonamento automático

Começa com uma requisição simples e só sobe para um navegador se o site a bloquear. Requisições bloqueadas não custam nada.

Apenas um exemplo, não é uma requisição real. O beta é grátis.

Test in the dashboard, then ship with the API or CLI

Try a URL, copy the request, and run it from your code or your terminal.

CLI

Faça scrape de uma URL, processe milhares em batch e gerencie sessões pelo seu terminal.

Ler a documentação da CLI

Painel

Rode requisições de teste, leia logs e uso e gerencie chaves de API.

Abrir o painel

Documentação

Guias, a referência da API e uma especificação OpenAPI para as suas ferramentas.

Ler a documentação

Try what people build with Spicrawl

Small working tools, each built on the Spicrawl API.

  1. change-monitor.spicrawl.com

    Monitor de mudanças

    Verifique uma página de novo e veja o que mudou.

    Teste ao vivo
  2. price-tracker.spicrawl.com

    Monitor de preços

    Cole o link de um produto e veja o preço.

    Teste ao vivo
  3. docs2skill.spicrawl.com

    Docs → Skill

    Transforme um site de documentação em uma agent skill.

    Teste ao vivo

What you can build with a web scraping API

Each job links to a guide in the docs, with working code.

  1. 01

    Alimente LLMs e pipelines de RAG

    Transforme artigos, documentação e PDFs em Markdown limpo, pronto para embeddings.

    Markdown para LLMs
  2. 02

    Dê aos agentes de IA acesso à web

    Conecte o Claude Code, o Cursor ou o Codex para ler páginas ao vivo.

    Crie com agentes
  3. 03

    Colete dados de produtos e preços

    Extraia nomes, preços e estoque para JSON.

    Extraia dados estruturados
  4. 04

    Faça scrape de milhares de URLs

    Envie até 10.000 URLs em um job em batch.

    Rode um job em batch
  5. 05

    Leia páginas atrás de um login

    Faça login uma vez e reutilize a sessão em cada página.

    Use sessões
  6. 06

    Capture os dados por trás de uma página

    Leia o JSON que uma página carrega em vez de analisar o HTML.

    Capture chamadas de rede

Pague por página, só quando funcionar

Você recebe 1.000 créditos grátis todo mês, sem cartão de crédito. Uma requisição com falha, um desafio de bot ou um timeout não custa nada. Grátis durante o beta.

1crédito por página
Fetch simples
Páginas estáticas. O padrão.
3créditos por página
Renderização JavaScript
Páginas que se montam sozinhas no navegador.
8créditos por página
Navegador completo
Screenshots, PDFs, cliques e formulários.

1.000 créditos grátis por mês equivalem a 1.000 páginas simples, 333 com JavaScript ou 125 em navegador completo.

Perguntas frequentes

O que é o Spicrawl?

O Spicrawl é uma API de web scraping que transforma qualquer URL em Markdown limpo, HTML, PDF ou JSON estruturado para o seu código ou agente de IA, por meio de uma API, CLI ou servidor MCP.

O Spicrawl é grátis?

Sim. É grátis durante o beta, com 1.000 créditos por mês e sem cartão de crédito.

Posso fazer scrape de sites com JavaScript?

Yes. Set js_render to true to load the page in a real browser. With mode=auto, Spicrawl tries a plain request first and uses a browser only if needed.

O Spicrawl consegue passar por proteção anti-bot como a da Cloudflare?

Muitas vezes, mas nem sempre. Use um fingerprint de navegador real, renderização em navegador ou o seu próprio proxy. Um desafio de bot retorna um erro claro e não custa nada. O modo stealth e os proxies gerenciados não estão no beta.

Posso usar o Spicrawl com agentes de IA?

Sim. O servidor MCP hospedado permite que o Claude Code, o Cursor e o Codex façam scrape de páginas, rodem batches, reutilizem sessões e executem ações de navegador. Rode spicrawl init para configurar.

Requisições com falha custam créditos?

Não. Só requisições bem-sucedidas custam créditos: 1 para simples, 3 para renderização JavaScript e 8 para navegador completo. Erros, desafios de bot e timeouts são grátis.

Todas as perguntas