CRW Web Scraper

Name: CRW Web Scraper
Author: us

제작자: us버전 0.36.0i★ 1,250 (저장소 전체의 별)i내 컴퓨터에서 실행

레지스트리 이름io.github.us/crw

설치 방법

What it does

Open-source web scraper for AI agents with scrape, crawl, and map tools

Connects 내 컴퓨터에서 실행
Account or key No key needed
Category 웹 및 브라우저

설치

쓰고 있는 AI 앱을 고른 다음 설정을 복사하세요.

검사 3/3 통과 · 내 컴퓨터에서 실행돼요 · ✓ 명령 확인 2026년 11월 13일

먼저: 어떤 AI를 쓰시나요?

Claude웹 · 앱 · 모바일ChatGPT웹Claude Code터미널Cursor코드 에디터VS Code코드 에디터기타다른 앱

쓰는 앱을 고르면 아래에 단계가 나옵니다.

Claude에 연결할 수 있지만 먼저 준비가 필요해요

먼저 컴퓨터에 Docker를 설치하세요 (한 번만) · 컴퓨터용 Claude 앱(Windows 또는 Mac)에서만 되고 웹이나 모바일은 안 돼요

Docker 설치
한 번만 하면 Docker가 필요한 모든 서버에 쓸 수 있어요
Docker 다운로드 페이지 열기 ↗
완료
컴퓨터용 Claude 앱 설정 파일 열기
SettingsDeveloperEdit Config
완료

이 설정을 붙여 넣고 저장

{
  "mcpServers": {
    "crw": {
      "command": "docker",
      "args": [
        "run",
        "-i",
        "--rm",
        "ghcr.io/us/crw:latest",
        "crw-mcp"
      ]
    }
  }
}

완료

Claude를 끄고 다시 열기
완료
해 보기
CRW Web Scraper을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐
✓ Claude가 CRW Web Scraper을 쓰고 있다고 하거나 답에 CRW Web Scraper 도구 이름이 나오면 연결된 거예요

메뉴 이름은 2026년 11월 11일에 Anthropic 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요

ChatGPT는 아직 CRW Web Scraper에 연결할 수 없어요

CRW Web Scraper는 내 컴퓨터에 설치해서 쓰지만 ChatGPT는 웹에서 도는 서버만 연결할 수 있어요

대신 이렇게 할 수 있어요

A · CRW Web Scraper에 연결되는 앱 쓰기

Claude 단계 보기 →먼저 컴퓨터에 Docker를 설치하세요 (한 번만) · 컴퓨터용 Claude 앱(Windows 또는 Mac)에서만 되고 웹이나 모바일은 안 돼요
Claude Code 단계 보기 →먼저 컴퓨터에 Docker를 설치하세요 (한 번만)
Cursor 단계 보기 →먼저 컴퓨터에 Docker를 설치하세요 (한 번만)
VS Code 단계 보기 →먼저 컴퓨터에 Docker를 설치하세요 (한 번만)

B · 웹 및 브라우저에서 ChatGPT에 연결되는 다른 서버

같은 분류에서 많이 쓰는 것 중 키 없이 주소만으로 연결되는 것을 골랐어요

Firecrawl MCP Server✓ ChatGPT
webclaw✓ ChatGPT
Oxylabs MCP✓ ChatGPT

Claude Code에 연결할 수 있지만 먼저 준비가 필요해요

먼저 컴퓨터에 Docker를 설치하세요 (한 번만)

Docker 설치
한 번만 하면 Docker가 필요한 모든 서버에 쓸 수 있어요
Docker 다운로드 페이지 열기 ↗
완료
터미널 열기
Mac: Command+스페이스를 누르고 Terminal 입력 · Windows: PowerShell 열기
완료

이 명령을 붙여 넣고 Enter

claude mcp add --scope user crw -- docker run -i --rm ghcr.io/us/crw:latest crw-mcp

완료

Claude Code에서 /mcp 입력
CRW Web Scraper이 목록에 있고 연결됨으로 보이면 돼요
완료
해 보기
CRW Web Scraper을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐
✓ Claude Code가 CRW Web Scraper을 쓰고 있다고 하거나 답에 CRW Web Scraper 도구 이름이 나오면 연결된 거예요

메뉴 이름은 2026년 11월 11일에 Anthropic 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요

Cursor에 연결할 수 있지만 먼저 준비가 필요해요

먼저 컴퓨터에 Docker를 설치하세요 (한 번만)

Docker 설치
한 번만 하면 Docker가 필요한 모든 서버에 쓸 수 있어요
Docker 다운로드 페이지 열기 ↗
완료
이 버튼으로 Cursor 열기
Cursor에서 열기
Cursor가 설치를 확인하면 Install을 누르세요
완료
Cursor에서 AI 채팅을 Agent 모드로 열기
완료
해 보기
CRW Web Scraper을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐
✓ Cursor가 CRW Web Scraper을 쓰고 있다고 하거나 답에 CRW Web Scraper 도구 이름이 나오면 연결된 거예요

메뉴 이름은 2026년 11월 11일에 Cursor 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요

VS Code에 연결할 수 있지만 먼저 준비가 필요해요

먼저 컴퓨터에 Docker를 설치하세요 (한 번만)

Docker 설치
한 번만 하면 Docker가 필요한 모든 서버에 쓸 수 있어요
Docker 다운로드 페이지 열기 ↗
완료
이 버튼으로 VS Code 열기
VS Code에서 열기
VS Code가 설치를 확인하면 Install을 누르세요
완료
VS Code에서 AI 채팅을 Agent 모드로 열기
완료
해 보기
CRW Web Scraper을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐
✓ VS Code가 CRW Web Scraper을 쓰고 있다고 하거나 답에 CRW Web Scraper 도구 이름이 나오면 연결된 거예요

메뉴 이름은 2026년 11월 11일에 VS Code 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요

Windsurf, Zed, Gemini CLI 같은 다른 MCP 앱은 추가 방법이 저마다 달라요. 앱 목록에서 확인하세요

MCP를 쓰는 앱 모두 보기 →

JSON 설정은 아래 “개발자용”에 있어요

막혔나요? CRW Web Scraper을 쓰는 사람에게 물어보세요💬 토론 →

개발자용: 터미널 명령과 JSON 설정

컴퓨터에 설치

Claude Code

claude mcp add --scope user crw -- docker run -i --rm ghcr.io/us/crw:latest crw-mcp

Claude Desktop (claude_desktop_config.json)

{
  "mcpServers": {
    "crw": {
      "command": "docker",
      "args": [
        "run",
        "-i",
        "--rm",
        "ghcr.io/us/crw:latest",
        "crw-mcp"
      ]
    }
  }
}

Cursor (~/.cursor/mcp.json)

{
  "mcpServers": {
    "crw": {
      "command": "docker",
      "args": [
        "run",
        "-i",
        "--rm",
        "ghcr.io/us/crw:latest",
        "crw-mcp"
      ]
    }
  }
}

VS Code (mcp.json)

{
  "servers": {
    "crw": {
      "type": "stdio",
      "command": "docker",
      "args": [
        "run",
        "-i",
        "--rm",
        "ghcr.io/us/crw:latest",
        "crw-mcp"
      ]
    }
  }
}

이 설정은 제작자의 레지스트리 정보로 만들었어요. README와 다르면 README를 따르세요.

한눈에 보기

GitHub 스타 i: 1,250 (저장소 전체의 별)
이 저장소에는 MCP 항목이 여러 개 있어 별은 순위에서 한 번만 세요
주간 다운로드i: npm/PyPI에 없음
라이선스 i: AGPL-3.0
연결 방식: 내 컴퓨터에서 실행
전송 방식: stdio
최신 버전i: 0.36.0
카테고리i: 웹 및 브라우저
레지스트리 공개i: 2026년 9월 19일
코드 마지막 변경i: 2026년 11월 12일
제작자: us
패키지: oci: ghcr.io/us/crw:latest
저장소: fastcrw/crw
웹사이트: fastcrw.com
레지스트리 상태: 활성

어떤 앱에서 쓸 수 있나요

이 서버의 연결 방식과 각 앱의 공식 문서를 바탕으로 했어요. 2026년 11월 10일 확인.

내 컴퓨터에서 실행하는 앱

Claude Goose LM Studio Msty Studio Cherry Studio Cursor VS Code + GitHub Copilot Visual Studio Windsurf (Devin Desktop)Zed Kiro Cline Continue JetBrains AI Assistant Claude Code Codex CLI Gemini CLI OpenCode nodecode Warp LibreChat Raycast

모든 앱과 장단점 →

할 수 있는 일

내 컴퓨터에서 실행돼요. 설치하면 AI 앱에 도구 목록이 나타나요.

기본 점검i

누구나 볼 수 있는 정보를 점검했고, 코드는 읽지 않았어요. 해당하지 않는 항목은 개수에서 뺐어요. · 2026년 11월 13일 점검

✓ 통과
제작자와 저장소 일치
레지스트리 이름이 GitHub 계정 fastcrw 기준으로 확인되었고, 이 계정이 저장소를 소유하고 있어요
✓ 통과
계속 관리되고 있음
코드 마지막 변경: 어제
✓ 통과
라이선스 있음
AGPL-3.0 사용
– 해당 없음
엔드포인트 응답
내 컴퓨터에서 실행되는 서버라 인터넷 엔드포인트가 없어요
– 해당 없음
OAuth로 로그인
내 컴퓨터에서 실행되며, 대신 로컬 설정을 사용해요
… 아직 점검 안 함
도구 설명에 숨겨진 지시 없음
내 컴퓨터에서 실행돼요. 도구 목록은 인터넷 엔드포인트가 있는 서버에서만 읽을 수 있어요

토론

질문하고, 팁을 나누고, 안 되는 점을 알려 주세요. "도움이 됨"이 많은 순서예요.

아직 글이 없어요. 처음으로 질문하거나 공유해 보세요.

이곳의 글은 사용자가 쓴 것으로, PopNx 팀의 글이 아니에요.

Google로 로그인하고 글쓰기

사용자 리뷰

아직 리뷰가 없어요

Google로 로그인하고 리뷰 쓰기

웹 및 브라우저 카테고리의 다른 서버와 비교i

이 카테고리의 다른 서버 1499개 중 98%보다 스타가 많아요
이 카테고리의 다른 서버 1499개 중 33%보다 최근에 레지스트리에 공개됐어요
기본 점검 결과가 이 카테고리의 다른 서버 1499개 중 100%와 같거나 더 좋아요

레지스트리에서 이 카테고리의 활성 서버 전체와 비교했어요. 스타는 게시자가 저장소를 소유한 경우에만 세요.

자주 묻는 질문

CRW Web Scraper, 안전한가요?

해당하는 기본 점검 3개 중 3개를 통과했어요. 코드는 읽지 않았어요. 키나 토큰을 넣기 전에 서버가 어떤 권한을 요구하는지 확인하고, 꼭 필요한 권한만 있는 키를 쓰세요.

어떤 키나 코드가 필요한가요?

레지스트리에 필수 키가 나와 있지 않아요. 다만 처음 쓸 때 로그인을 요구하는 서버도 있어요.

내 컴퓨터에서 실행되나요, 클라우드에서 실행되나요?

내 컴퓨터에서 실행돼요. AI 앱이 필요할 때 실행하고, 데이터는 제작자의 서버를 거치지 않아요(서버 자체가 온라인 서비스를 호출하는 경우는 제외).

아직 관리되고 있나요?

GitHub 저장소는 마지막으로 어제 변경됐고, 최신 버전(0.36.0)은 2개월 전 레지스트리에 올라왔어요.

어떤 앱에서 쓸 수 있나요?

Claude Desktop, Claude Code, Cursor, VS Code처럼 MCP를 지원하는 앱에서 쓸 수 있어요. 내 컴퓨터에 Docker도 있어야 해요.

대신 쓸 수 있는 건 뭐가 있나요?

같은 카테고리에는: Browser Use, Scrapling MCP Server, Chrome DevTools MCP

같은 카테고리의 다른 것

같은 카테고리에서 다른 제작자가 만든 서버예요. 스타 순으로 정렬했어요.

카드 보는 법:↓ 주간 다운로드i★ GitHub 스타i세 기둥: 리뷰 · 점검 · 사용 정도i업데이트 = 최신 버전을 레지스트리에 공개한 날i

Browser Use

Browser agents and stealth cloud browsers for AI: run web tasks, fill forms, extract data.

제작자: browser-use널리 사용됨↓ 167.3만/주★ 12.1만23일 전 업데이트

컴퓨터 또는 클라우드✓ 서비스 회사 · browser-use.com

설치

Scrapling MCP Server

Web scraping with stealth HTTP, real browsers, and Cloudflare bypass. CSS selectors supported.

제작자: D4Vinci널리 사용됨↓ 39.7만/주★ 10.2만8일 전 업데이트

내 컴퓨터에서 실행

설치

Chrome DevTools MCP

MCP server for Chrome DevTools

제작자: ChromeDevTools널리 사용됨↓ 186.9만/주★ 5.5만그저께 업데이트

내 컴퓨터에서 실행

설치

제작자의 README

README 열기

제작자의 저장소에서 쓰인 그대로 가져왔어요. PopNx MCP가 검토하거나 보증한 내용이 아니에요. HTML, 이미지, 스크립트는 제거했어요. 링크를 누르면 이 사이트를 벗어나요.

fastCRW

Turn URLs into clean markdown or structured JSON with one engine for search, scrape, map, crawl, and extract.

Run it locally as a small Rust binary or use the managed API.

Get 1000 free credits → · Install · Docs

No credit card. Continue with GitHub.

One-command install

curl -fsSL https://fastcrw.com/install | sh

Runs local and free, no account needed. To use the Cloud, paste your key into the same command and it installs the binary, connects the key, and registers the MCP server with the AI coding tools you already have:

curl -fsSL https://fastcrw.com/install | CRW_API_KEY=crw_live_... sh

crw search "rust tutorials"

Claude Code, Cursor, Codex, Gemini CLI, OpenCode and Windsurf are picked up automatically when they are already set up; nothing else is touched, and your key stays in ~/.config/crw/config.toml rather than being copied into each tool. Add CRW_NO_AGENTS=1 to skip that step, or run crw setup on its own to choose interactively.

1000 free credits, no credit card. Managed proxies, JS rendering and search, with nothing to run or keep up to date. Get my free key →

macOS and Linux, Intel and ARM. More install options →

What it does

Operation	Outcome
Scrape	One URL to markdown, HTML, links, screenshots, or schema JSON
Crawl	Follow a bounded site crawl and collect its pages
Map	Discover URLs without scraping every page
Search	Search the web and optionally scrape selected results
Extract	Produce structured fields from one or many URLs

See the full API →

Why fastCRW

On Firecrawl's own public 1,000-URL dataset, fastCRW recovered more truth than Crawl4AI and Firecrawl, matched the fastest median latency, and idled at ~14 MB RAM.

Methodology, full numbers, and how to reproduce it

On a different benchmark entirely, answer accuracy rather than scrape recall, fastCRW answers 90.0% of the 600 AA-Omniscience questions correctly. Every product listed on the Artificial Analysis Search Index sits below it.

The full 14-product comparison, the control run, and how to reproduce it

Choose how you use it

CLI

crw https://example.com            # scrape, works right after install

crw search "rust async runtime" # search, after crw setup

Python SDK

Using Cloud? Get an API key, then export it once:

export CRW_API_KEY="crw_live_..."

pip install crw

from crw import CrwClient

client = CrwClient() page = client.scrape("https://example.com", formats=["markdown"])

print(page["markdown"])

Node.js

npm install crw-sdk

import { CrwClient } from "crw-sdk";

const client = new CrwClient();

const page = await client.scrape("https://example.com", { formats: ["markdown"], });

console.log(page.markdown);

Local mode and more SDK examples → · REST API →

MCP for AI agents

npx -y crw-mcp@latest install

Installs the CRW skill and MCP server in your detected AI tools. crw setup can also do this step, so either path is enough. Manual setup →

Choose where it runs

	Managed API	Local / self-hosted
Best for	Zero infrastructure and managed scaling	Data control, private networks, or custom infrastructure
Start	Create an API key, then `crw setup`	Install and run `crw`
Operations	Managed proxies, billing, and hosted capabilities	You choose renderers, search, auth, proxies, and capacity

Capabilities and response shapes can differ by deployment: /v1/capabilities · response shapes

Self-hosting guide →

Learn more

Contributing

The workspace requires Rust 1.85 or newer:

git clone https://github.com/fastcrw/crw

cd crw make check-fast

Read the contributor guide →

Contributors

crw is better because of these people. Thank you, all of you:

Engine and MCP server: AGPL-3.0. Python and TypeScript SDKs: MIT. Embedding license: hello@fastcrw.com.

Star History

Please respect website policies. Crawl and map follow robots.txt by default.

CRW Web Scraper

What it does

설치

Docker 설치

컴퓨터용 Claude 앱 설정 파일 열기

이 설정을 붙여 넣고 저장

Claude를 끄고 다시 열기

해 보기

대신 이렇게 할 수 있어요

Docker 설치

터미널 열기

이 명령을 붙여 넣고 Enter

Claude Code에서 /mcp 입력

해 보기

Docker 설치

이 버튼으로 Cursor 열기

Cursor에서 AI 채팅을 Agent 모드로 열기

해 보기

Docker 설치

이 버튼으로 VS Code 열기

VS Code에서 AI 채팅을 Agent 모드로 열기

해 보기

컴퓨터에 설치

한눈에 보기

어떤 앱에서 쓸 수 있나요

할 수 있는 일

기본 점검i

제작자와 저장소 일치

계속 관리되고 있음

라이선스 있음

엔드포인트 응답

OAuth로 로그인

도구 설명에 숨겨진 지시 없음

토론

사용자 리뷰

웹 및 브라우저 카테고리의 다른 서버와 비교i

자주 묻는 질문

같은 카테고리의 다른 것

Browser Use

Scrapling MCP Server

Chrome DevTools MCP

제작자의 README

One-command install

What it does

Why fastCRW

Choose how you use it

CLI

Python SDK

MCP for AI agents

Choose where it runs

Learn more

Contributing

Contributors

Star History