Webcrawl Anything

Name: Webcrawl Anything
Author: brainfish-ai

作者：brainfish-ai版本 1.4.2i★ –i电脑或云端

注册名称io.github.brainfish-ai/webcrawl

安装

概览

作者提供的说明（英文原文）

Scrape, map, crawl, search and monitor the web. Runs locally with no API key, cites every source.

PopNx MCP 的三大支柱

这三项永远不会合并成一个分数：意见、测量和人气是不同的东西。

用户评价i暂无评价评价功能将在后续阶段与账户功能一起开放
我们的基础检查i3 项中通过 3 项依据公开信息检查；尚未扫描代码
使用情况i尚未统计★ –

它能帮你做什么

我们还没有为它写通俗的介绍。下面是我们从注册中心读取到的事实。

连接方式: 电脑或云端
传输方式: stdio, Streamable HTTP
分类: 网页与浏览器
你需要填写：WEBCRAWL_API_KEY

安装

选择你使用的 AI 应用，然后复制设置。

安装之前

基础检查：3 项中通过 3 项
在作者的服务器上运行：你向它提出的内容会经过他们的服务器。
需要你自己填写： WEBCRAWL_API_KEY, WEBCRAWL_MODE, WEBCRAWL_MCP_SCHEMA_PROFILE

标为机密的值是你账户的钥匙。千万不要分享给别人，也不要粘贴到聊天里。

你需要

在云端运行无需安装任何东西，通过互联网连接
npm已安装 Node.js（用于 npx 命令）

你用的是哪个应用？

ClaudeClaude CodeCursorVS CodeChatGPT

在上方选择你的应用。我们会记住它，下次按钮会显示“安装到 …”。

适用于网页版、桌面版和手机版 Claude：

打开 Settings → Connectors
点击 Add custom connector
粘贴下面的地址，然后点击 Add
如果要求登录，请登录作者的服务

https://webcrawl.app/mcp

或者在你的电脑上运行

打开 Claude Desktop → Settings → Developer → Edit Config，把下面的内容粘贴到 claude_desktop_config.json

{
  "mcpServers": {
    "webcrawl": {
      "command": "npx",
      "args": [
        "-y",
        "@webcrawl/mcp"
      ],
      "env": {
        "WEBCRAWL_API_KEY": "your-value",
        "WEBCRAWL_MODE": "your-value",
        "WEBCRAWL_MCP_SCHEMA_PROFILE": "your-value"
      }
    }
  }
}

在终端中运行这条命令

claude mcp add --transport http webcrawl https://webcrawl.app/mcp

或者在你的电脑上运行

claude mcp add webcrawl --env WEBCRAWL_API_KEY=your-value --env WEBCRAWL_MODE=your-value --env WEBCRAWL_MCP_SCHEMA_PROFILE=your-value -- npx -y @webcrawl/mcp

运行前请先填写空着的值。

在 Cursor 中打开

或者自己复制设置

粘贴到项目中的 .cursor/mcp.json，或 ~/.cursor/mcp.json

{
  "mcpServers": {
    "webcrawl": {
      "url": "https://webcrawl.app/mcp"
    }
  }
}

或者在你的电脑上运行

在 Cursor 中打开

或者自己复制设置

粘贴到项目中的 .cursor/mcp.json，或 ~/.cursor/mcp.json

{
  "mcpServers": {
    "webcrawl": {
      "command": "npx",
      "args": [
        "-y",
        "@webcrawl/mcp"
      ],
      "env": {
        "WEBCRAWL_API_KEY": "your-value",
        "WEBCRAWL_MODE": "your-value",
        "WEBCRAWL_MCP_SCHEMA_PROFILE": "your-value"
      }
    }
  }
}

浏览器会先询问是否打开应用，然后应用会显示设置并请你确认。密钥的值会留空，由你自己填写。

在 VS Code 中打开

或者自己复制设置

粘贴到项目中的 .vscode/mcp.json

{
  "servers": {
    "webcrawl": {
      "type": "http",
      "url": "https://webcrawl.app/mcp"
    }
  }
}

或者在你的电脑上运行

在 VS Code 中打开

或者自己复制设置

粘贴到项目中的 .vscode/mcp.json

{
  "servers": {
    "webcrawl": {
      "type": "stdio",
      "command": "npx",
      "args": [
        "-y",
        "@webcrawl/mcp"
      ],
      "env": {
        "WEBCRAWL_API_KEY": "your-value",
        "WEBCRAWL_MODE": "your-value",
        "WEBCRAWL_MCP_SCHEMA_PROFILE": "your-value"
      }
    }
  }
}

浏览器会先询问是否打开应用，然后应用会显示设置并请你确认。密钥的值会留空，由你自己填写。

ChatGPT 只能连接互联网上的服务器：

打开网页版 ChatGPT → Settings → Connectors (Apps)
点击 Create 或 Add（部分套餐需要先在 Advanced 中开启 Developer mode）
粘贴下面的地址，起个名字，然后保存
如果要求登录，请登录作者的服务

https://webcrawl.app/mcp

菜单名称可能因套餐和版本不同而略有差异。

你的选择通过 Cookie 保存在这台设备上，无需账户。

需要你填写的值

WEBCRAWL_API_KEY 机密 env
Optional. Leave unset to run fully local. Set a webcrawl.app key to use the hosted cloud.
WEBCRAWL_MODE env
Optional: local, cloud or auto. Default auto runs local unless an API key is set.
WEBCRAWL_MCP_SCHEMA_PROFILE env
Set to compact for smaller tool schemas in context-limited clients.

这些设置是根据作者在注册中心的条目生成的。如果 README 的写法不同，请以 README 为准。

它能做什么

服务器要求先登录，才会列出它的工具。

基础检查i

我们检查的是任何人都能看到的信息；我们没有阅读代码。不适用的检查项不计入总数。 · 检查于 2026年11月7日

✓ 通过
作者与仓库一致
注册名称已通过 GitHub 账户 brainfish-ai 验证，该账户拥有此仓库
… 尚未检查
仍在维护
我们还没有从 GitHub 读取这个仓库
… 尚未检查
有许可证
我们还没有从 GitHub 读取这个仓库
✓ 通过
端点有响应
在 372 毫秒内响应（HTTP 401）
✓ 通过
使用 OAuth 登录
声明支持 OAuth 登录，你的 AI 应用可以带你去登录
… 尚未检查
工具描述中没有隐藏指令
尚未检查；我们会在检查端点时读取工具列表

与“网页与浏览器”中的其他服务器比较i

星标数多于此分类中其他 878 个服务器的 0%
发布到注册中心的时间比此分类中其他 878 个服务器的 92% 更新
基础检查结果等于或优于此分类中其他 878 个服务器的 100%

与注册中心里这个分类中所有活跃的服务器比较。只有当发布者拥有该仓库时，星标数才计入。

常见问题

Webcrawl Anything 安全吗？

它在 3 项适用的基础检查中通过了 3 项。我们没有阅读代码。在添加密钥或令牌之前，请先看看这个服务器要求哪些权限，并使用只具备所需权限的密钥。

它需要哪些密钥或代码？

你需要填写：WEBCRAWL_API_KEY

它在我的电脑上运行还是在云端？

两种方式都可以：安装在你的电脑上，或者连接云端版本。

它还在维护吗？

GitHub 仓库最后更新于–，最新版本（1.4.2）于3天前进入注册中心。

哪些应用可以使用它？

支持 MCP 的应用，例如 Claude Desktop、Claude Code、Cursor 和 VS Code。它通过 URL 连接，所以接受远程 MCP 服务器的应用也可以使用，例如开启开发者模式的 ChatGPT。

有什么可以替代它？

同一分类中有：Browser Use, Chrome DevTools MCP, MCP Server Browser

替代选择

同一分类中其他作者的服务器，按星标数排序。

如何看卡片：★ GitHub 星标i三大支柱：评价 · 检查 · 使用情况i更新 = 最新版本发布到注册中心的时间i

Browser Use

作者：browser-use

Browser agents and stealth cloud browsers for AI: run web tasks, fill forms, extract data.

电脑或云端★ 120,087MIT17天前更新

安装

Chrome DevTools MCP

作者：ChromeDevTools

MCP server for Chrome DevTools

在你的电脑上运行★ 54,821Apache-2.015天前更新

安装

MCP Server Browser

作者：bytedance

MCP server for browser use access

在你的电脑上运行★ 39,550Apache-2.014个月前更新

安装

作者的 README

打开 README

按原文从作者的仓库复制。PopNx MCP 没有审查或背书其内容。HTML、图片和脚本已被移除。链接会离开本站。

@webcrawl/mcp

Model Context Protocol (MCP) server for [Webcrawl Anything](https://github.com/brainfish-ai/webcrawl-anything).

Gives Claude Code, Cursor, Codex, Windsurf, and Gemini CLI live access to web search, structured verticals (shopping, flights, hotels, real-estate, local business, CVEs), page reading for JavaScript-heavy sites, and PDF/Office parsing. It runs on your machine with no API key and no account.

One-Command Agent Setup

npx webcrawl setup

Manual MCP Configuration

Add to .cursor/mcp.json, ~/.claude.json, or your MCP client config:

"mcpServers": { "webcrawl": { "command": "npx", "args": ["-y", "@webcrawl/mcp@latest"], "env": { "WEBCRAWL_MCP_SCHEMA_PROFILE": "compact" } } } }

Optional: webcrawl.app cloud

Local mode is the default and needs nothing else. To run the same tools on the hosted service, either:

add "WEBCRAWL_API_KEY": "wc_live_..." to env above (get a key at webcrawl.app), or
connect your client to the hosted endpoint https://webcrawl.app/mcp and sign in in the browser. No local install is needed.

WEBCRAWL_MODE can be local, cloud or auto (default: local unless a key is set).

Compact Schema Profile

Set WEBCRAWL_MCP_SCHEMA_PROFILE=compact (default when installed via npx webcrawl setup) to minimize tool schema token usage in context-constrained agents while keeping full server-side validation. Set WEBCRAWL_MCP_SCHEMA_PROFILE=full for verbose parameter descriptions.

Tools Provided

web_search — Search the web or structured verticals (shopping, flights, hotels, real-estate, business, security, academic, tech, news).
web_read — Fetch a URL and return clean Markdown with target evidence.
web_parse / web_parse_status — Parse PDFs (native + OCR), Word/Excel/PowerPoint files, YouTube videos, and audio/video into Markdown.
web_map — Discover all URLs on a domain (sitemap.xml, robots.txt, and link graph).
web_crawl — Crawl up to 25 pages starting from a URL.
web_extract — Extract structured JSON from a URL using a prompt or JSON Schema.
web_rerank — Rerank candidate documents by relevance to a query.
web_monitor — Watch a page, URL list or site on a schedule with trigger conditions and email/webhook alerts (cloud only).
search_categories — List all supported search categories, subcategories, and filters.

License

MIT

Webcrawl Anything

概览

PopNx MCP 的三大支柱

它能帮你做什么

安装

安装之前

或者在你的电脑上运行

或者在你的电脑上运行

或者在你的电脑上运行

或者在你的电脑上运行

需要你填写的值

它能做什么

基础检查i

作者与仓库一致

仍在维护

有许可证

端点有响应

使用 OAuth 登录

工具描述中没有隐藏指令

与“网页与浏览器”中的其他服务器比较i

常见问题

替代选择

Browser Use

Chrome DevTools MCP

MCP Server Browser

作者的 README

@webcrawl/mcp

One-Command Agent Setup

Manual MCP Configuration

Optional: webcrawl.app cloud

Compact Schema Profile

Tools Provided

License