이제 Spicrawl은 OpenAI Agents SDK, LangChain, Codex, Claude Code 등과 함께 작동합니다.통합 보기
본문으로 건너뛰기

다음을 위한 실시간 세계 데이터: 에이전트

에이전트와 시스템을 위한 세계 데이터를 열고 더 나은 제품을 만드세요.

가입(베타 기간 무료)
사용해 보기:

무료로 체험하세요: 가입 없이 공개된 모든 페이지를 깔끔한 Markdown으로.

Spicrawl 웹 스크래핑 API의 모든 기능

Markdown 및 JSON 출력, JavaScript 렌더링, Cloudflare 및 봇 차단 대응, 브라우저 작업, 세션, 최대 10,000개 URL의 배치 작업, 구조화된 추출, 네트워크 캡처, 스크린샷과 PDF, 캐싱. 각 기능은 같은 API의 파라미터이며, CLI와 MCP 서버에서도 모두 사용할 수 있습니다.

3/3제공됨, 해당 단계 요금으로 과금

일반, JavaScript 또는 풀 브라우저

  • 단계에 따라 1, 3 또는 8 크레딧. mode: auto는 저렴하게 시작하고 필요할 때만 올라갑니다.
  • 실제로 처리한 단계에 대해서만 비용을 냅니다. 실패는 0입니다.
  • js_render
  • 모드
  • wait_for
render.sh
curl https://api.spicrawl.com/v1/scrape \  -H "Authorization: Bearer spicrawl_live_…" \  -H "Content-Type: application/json" \  -d '{    "url": "https://example.com/products",    "js_render": true,    "wait_for": ".product-card",    "response_format": "json"  }'

spicrawl scrape <url> --render

가이드 읽기

API 문서 살펴보기

지금 스크랩하는 페이지로 체험하기

API 키 하나, 매월 무료 1,000 크레딧, 신용카드 불필요.

Up to 97% fewer tokens than raw HTML

Menus, scripts and ads are stripped before the page reaches your model, so the same facts take a fraction of the context. Raw HTML on the left, Spicrawl Markdown on the right.

Spicrawl 문서 페이지
−97%토큰
GitHub README
−94%토큰
Wikipedia 문서
−76%토큰
측정 방법 보기

내 URL에서 절감 효과 측정하기

같은 페이지를 두 방식으로 실행해 토큰 수를 비교하세요.

Two ways in: ask your agent, or call the API

Describe the page in plain words, or send one POST request. Both return the same clean output.

  1. AI에게 그냥 물어보세요

    한 번 연결한 뒤 평범한 말로 요청하세요. 작성할 코드가 없습니다.

    Claude Code에서 설정하기
  2. API 호출하기

    POST 한 번으로 Markdown, JSON, HTML을 받습니다. 최대 10,000개의 URL을 배치로 처리합니다.

    API 문서 읽기

Spicrawl MCP로 AI 에이전트 연결하기

호스팅형 MCP 서버: 스크랩, 배치, 세션, 브라우저 작업을 연동 코드 없이 사용할 수 있습니다.

MCP 엔드포인트: https://mcp.spicrawl.com/mcp

  • 스크레이프
  • 배치 작업
  • 세션
  • 작업
  • 요청 기록
  • 사용량
  • 문서
Claude Code가 페이지를 스크랩합니다

AI 에이전트이신가요?

스킬을 가져와 스크래핑을 시작하세요.

$curl -s https://docs.spicrawl.com/skill.md

스킬 보기 llms.txt

이미 쓰고 있는 도구와 함께 작동합니다

프롬프트 하나로 에이전트에 웹 연결하기

Claude Code, Cursor, Codex 및 모든 MCP 클라이언트와 작동합니다.

Get Markdown, JSON or structured data from one request

Pick the format your next step needs: Markdown for a prompt, JSON for your app, a screenshot or PDF for a record.

example.com/product/1
Model X를 만나 보세요 — 클릭마다 정밀함
Wireless Mouse — Model X
Wireless Mouse — Model X
$49.00재고 있음★ 4.6 (1,284)
저지연 2.4 GHz 수신기, 70일 배터리 수명, 무소음 스위치.
사양값
연결2.4 GHz, BT5배터리70일
<script type="application/ld+json">
result.md
# Wireless Mouse — Model X**$49.00** · 재고 있음 · 4.6 (리뷰 1,284개)-latency 2.4 GHz 수신기, 70-day 배터리 수명, 그리고 무인 설치 옵션.| Spec      | Value        || --------- | ------------ || 연결 | 2.4 GHz, BT5 || 배터리 | 70일 |
페이지 읽기
원본 HTML토큰 12,480개
Markdown토큰 0개

메뉴, 푸터, 광고를 제거하면 원본 HTML 토큰의 3%에서 24%입니다. 예시 페이지.

모든 웹사이트를 LLM용 Markdown으로 변환

Scrape JavaScript sites, logins and dynamic pages

Start with a plain fetch. Spicrawl moves up to a real browser only when the page needs one. Keep a session to stay logged in, or bring your own proxy.

Spicrawl 제어판
자동 단계 상승
브라우저
핑거프린트
프록시
관리형 프록시: 곧 제공 예정
세션
작업
에셋 차단
네트워크 캡처
캐시
POST /v1/scrape
{  "url": "https://shop.example/product/1",  "mode": "auto",  "cache": true,  "response_format": "markdown"}
응답 헤더 예시
X-Target-Status
200
X-Engine
fetch
X-Proxy-Source
direct
Cache-State
적중
X-Credits-Charged
1
자동 단계 상승

일반 요청으로 시작하고, 사이트가 차단할 때만 브라우저로 올라갑니다. 차단된 요청은 비용이 없습니다.

예시일 뿐 실제 요청이 아닙니다. 베타는 무료입니다.

Test in the dashboard, then ship with the API or CLI

Try a URL, copy the request, and run it from your code or your terminal.

CLI

터미널에서 URL 하나를 스크랩하고, 수천 개를 배치로 처리하고, 세션을 관리하세요.

CLI 문서 읽기

대시보드

테스트 요청을 실행하고, 로그와 사용량을 확인하고, API 키를 관리합니다.

대시보드 열기

문서

가이드, API 레퍼런스, 그리고 도구에 쓸 수 있는 OpenAPI 사양.

문서 읽기

Try what people build with Spicrawl

Small working tools, each built on the Spicrawl API.

  1. change-monitor.spicrawl.com

    변경 모니터

    페이지를 다시 확인하고 무엇이 바뀌었는지 보세요.

    직접 체험하기
  2. price-tracker.spicrawl.com

    가격 추적기

    상품 링크를 붙여 넣으면 가격을 알려 줍니다.

    직접 체험하기
  3. docs2skill.spicrawl.com

    문서 → 스킬

    문서 사이트를 에이전트 스킬로 바꿉니다.

    직접 체험하기

What you can build with a web scraping API

Each job links to a guide in the docs, with working code.

  1. 01

    LLM과 RAG 파이프라인에 공급

    글, 문서, PDF를 임베딩할 수 있는 깔끔한 Markdown으로 바꿉니다.

    LLM용 Markdown
  2. 02

    AI 에이전트에 웹 접근 권한 부여

    Claude Code, Cursor, Codex를 연결해 실시간 페이지를 읽으세요.

    에이전트로 만들기
  3. 03

    제품 및 가격 데이터 수집

    이름, 가격, 재고를 JSON으로 가져오세요.

    구조화된 데이터 추출
  4. 04

    수천 개의 URL 스크랩

    한 번의 배치 작업으로 최대 10,000개의 URL을 보내세요.

    배치 작업 실행
  5. 05

    로그인이 필요한 페이지 읽기

    한 번 로그인하고 모든 페이지에서 세션을 재사용하세요.

    세션 사용하기
  6. 06

    페이지 뒤의 데이터 캡처

    HTML을 파싱하는 대신 페이지가 로드하는 JSON을 읽으세요.

    네트워크 호출 캡처

페이지당 과금, 성공했을 때만

매월 무료 1,000 크레딧을 받으며 신용카드가 필요하지 않습니다. 실패한 요청, 봇 챌린지, 타임아웃은 비용이 없습니다. 베타 기간 무료.

1크레딧 / 페이지
일반 fetch
정적 페이지. 기본값입니다.
3크레딧 / 페이지
JavaScript 렌더링
브라우저에서 스스로 구성되는 페이지.
8크레딧 / 페이지
풀 브라우저
스크린샷, PDF, 클릭, 폼.

매월 무료 1,000 크레딧 일반 페이지 1,000개, JavaScript 페이지 333개 또는 전체 브라우저 페이지 125개에 해당합니다.

자주 묻는 질문

Spicrawl이란 무엇인가요?

Spicrawl은 API, CLI, MCP 서버를 통해 모든 URL을 코드나 AI 에이전트에서 쓸 수 있는 깔끔한 Markdown, HTML, PDF, 구조화된 JSON으로 바꿔 주는 웹 스크래핑 API입니다.

Spicrawl은 무료인가요?

예. 베타 기간 무료이며 매월 1,000 크레딧이 제공되고 신용카드가 필요하지 않습니다.

JavaScript 웹사이트를 스크랩할 수 있나요?

Yes. Set js_render to true to load the page in a real browser. With mode=auto, Spicrawl tries a plain request first and uses a browser only if needed.

Spicrawl은 Cloudflare 같은 봇 방어를 통과할 수 있나요?

대체로 가능하지만 항상 그렇지는 않습니다. 실제 브라우저 핑거프린트, 브라우저 렌더링 또는 자체 프록시를 사용하세요. 봇 챌린지는 명확한 오류로 반환되며 비용이 없습니다. 스텔스 모드와 관리형 프록시는 베타에 없습니다.

Spicrawl을 AI 에이전트와 함께 쓸 수 있나요?

예. 호스팅형 MCP 서버를 통해 Claude Code, Cursor, Codex가 페이지를 스크랩하고, 배치를 실행하고, 세션을 재사용하고, 브라우저 작업을 실행할 수 있습니다. spicrawl init을 실행해 설정하세요.

실패한 요청도 크레딧이 드나요?

아니요. 성공한 요청만 크레딧이 듭니다. 일반은 1, JavaScript 렌더링은 3, 풀 브라우저는 8입니다. 오류, 봇 챌린지, 타임아웃은 무료입니다.

모든 질문