Website to Markdown Crawler

Name: Website to Markdown Crawler
Author: prometheus-maker

作者：prometheus-makerバージョン 1.0.0i★ 0iクラウドで動く

レジストリ名io.github.prometheus-maker/website-to-markdown

インストール方法

What it does

Crawl a website into clean Markdown for LLMs/RAG: main content only, linked docs converted.

Connects クラウドで動く
Account or key Needs Authorization
Category ウェブ・ブラウザ

インストール

使っているAIアプリを選んで、設定をコピーしてください。

チェック 5/5 合格 · 質問内容は提供元のサーバー（mcp.apify.com）を通ります · ✓ コマンド確認済み 2026年11月13日

まず：どの AI を使っていますか？

ClaudeWeb · アプリ · スマホChatGPTWebClaude CodeターミナルCursorコードエディタVS Codeコードエディタその他その他のアプリ

使っているアプリを選ぶと、下に手順が表示されます。

Claude につなげます · 約 5 分

Website to Markdown Crawler のキーが必要です（提供元のサイトで作成） · claude.ai かデスクトップアプリで一度設定すれば、チャットで使えます · 無料アカウントは 1 つまで · Team/Enterprise はオーナー（Owner）が追加

Website to Markdown Crawler に登録してキーを作る
提供元のサイトで登録し、次の手順で使う API キーを作ります。料金や無料プランは提供元のサイトで確認してください。
Website to Markdown Crawler のサイトを開く ↗
完了
Claude の Connectors ページを開く
CustomizeConnectors
完了
「Add」→「Custom」→「Web」を押し、この 2 つを入力
ここからコピーして Claude の同じ名前の欄に貼り付け、Continue を押します
Name · 名前Website to Markdown Crawler
Remote MCP server URL · アドレスhttps://mcp.apify.com/?tools=prometheus-maker/website-to-markdown-crawler
Request headers に、この名前と値を追加
ヘッダー名Authorization
値Bearer <ここにキーを貼り付け>
キーはアプリの入力欄にだけ貼り付け、チャットに貼ったり人に送ったりしないでください
Claude が検出したサインイン設定の画面で Continue を押す · Authentication は作者の説明どおり（Sign in now・Sign in when needed・No sign in）を選び Add を押します
完了
チャットで有効にする
+ConnectorsWebsite to Markdown Crawler
完了
試してみる
Website to Markdown Crawler を使って、私に何ができるか教えて、1 つやってみせて
✓ Claude が Website to Markdown Crawler を使っていると言うか、回答に Website to Markdown Crawler のツール名が出れば接続成功です

メニュー名は 2026年11月11日に Anthropic のヘルプページで確認 · アプリのバージョンにより画面が少し違うことがあります

ChatGPT はまだ Website to Markdown Crawler につなげません

Website to Markdown Crawler は接続時に自分のキーが必要ですが、OpenAI のヘルプページは OAuth ログインしか説明しておらず、確認できたキー入力方法がありません

代わりにできること

A · Website to Markdown Crawler につなげるアプリを使う

Claude の手順 →Website to Markdown Crawler のキーが必要です（提供元のサイトで作成） · claude.ai かデスクトップアプリで一度設定すれば、チャットで使えます · 無料アカウントは 1 つまで · Team/Enterprise はオーナー（Owner）が追加
Claude Code の手順 →Website to Markdown Crawler のキーが必要です（提供元のサイトで作成）
Cursor の手順 →Website to Markdown Crawler のキーが必要です（提供元のサイトで作成）
VS Code の手順 →Website to Markdown Crawler のキーが必要です（提供元のサイトで作成）

B · ウェブ・ブラウザの中で ChatGPT につなげる別のサーバー

同じカテゴリでよく使われているものから、キーなしでアドレスだけでつなげるものを選びました

Firecrawl MCP Server✓ ChatGPT
webclaw✓ ChatGPT
Oxylabs MCP✓ ChatGPT

Claude Code につなげます · 約 5 分

Website to Markdown Crawler のキーが必要です（提供元のサイトで作成）

Website to Markdown Crawler に登録してキーを作る
提供元のサイトで登録し、次の手順で使う API キーを作ります。料金や無料プランは提供元のサイトで確認してください。
Website to Markdown Crawler のサイトを開く ↗
完了
ターミナルを開く
Mac：Command+スペースで Terminal と入力 · Windows：PowerShell を開く
完了
3
このコマンドを貼り付けて Enter
```
claude mcp add --transport http --scope user website-to-markdown 'https://mcp.apify.com/?tools=prometheus-maker/website-to-markdown-crawler' --header 'Authorization: Bearer your-value'
```
Enter の前に「your-value」を自分のキーに書き換えてください
キーはアプリの入力欄にだけ貼り付け、チャットに貼ったり人に送ったりしないでください
完了
Claude Code で /mcp と入力
Website to Markdown Crawler が一覧にあり、接続済みと表示されれば OK です
完了
試してみる
Website to Markdown Crawler を使って、私に何ができるか教えて、1 つやってみせて
✓ Claude Code が Website to Markdown Crawler を使っていると言うか、回答に Website to Markdown Crawler のツール名が出れば接続成功です

メニュー名は 2026年11月11日に Anthropic のヘルプページで確認 · アプリのバージョンにより画面が少し違うことがあります

Cursor につなげます · 約 5 分

Website to Markdown Crawler のキーが必要です（提供元のサイトで作成）

Website to Markdown Crawler に登録してキーを作る
提供元のサイトで登録し、次の手順で使う API キーを作ります。料金や無料プランは提供元のサイトで確認してください。
Website to Markdown Crawler のサイトを開く ↗
完了
このボタンで Cursor を開く
Cursor で開く
Cursor がインストールの確認をするので Install を押します
完了
キーを入力
Website to Markdown Crawler の設定で Authorization が空です。自分のキーを入れて保存します
キーはアプリの入力欄にだけ貼り付け、チャットに貼ったり人に送ったりしないでください
完了
Cursor の AI チャットを Agent モードで開く
完了
試してみる
Website to Markdown Crawler を使って、私に何ができるか教えて、1 つやってみせて
✓ Cursor が Website to Markdown Crawler を使っていると言うか、回答に Website to Markdown Crawler のツール名が出れば接続成功です

メニュー名は 2026年11月11日に Cursor のヘルプページで確認 · アプリのバージョンにより画面が少し違うことがあります

VS Code につなげます · 約 5 分

Website to Markdown Crawler のキーが必要です（提供元のサイトで作成）

Website to Markdown Crawler に登録してキーを作る
提供元のサイトで登録し、次の手順で使う API キーを作ります。料金や無料プランは提供元のサイトで確認してください。
Website to Markdown Crawler のサイトを開く ↗
完了
このボタンで VS Code を開く
VS Code で開く
VS Code がインストールの確認をするので Install を押します
完了
キーを入力
Website to Markdown Crawler の設定で Authorization が空です。自分のキーを入れて保存します
キーはアプリの入力欄にだけ貼り付け、チャットに貼ったり人に送ったりしないでください
完了
VS Code の AI チャットを Agent モードで開く
完了
試してみる
Website to Markdown Crawler を使って、私に何ができるか教えて、1 つやってみせて
✓ VS Code が Website to Markdown Crawler を使っていると言うか、回答に Website to Markdown Crawler のツール名が出れば接続成功です

メニュー名は 2026年11月11日に VS Code のヘルプページで確認 · アプリのバージョンにより画面が少し違うことがあります

Windsurf、Zed、Gemini CLI など MCP を使える他のアプリは追加方法がそれぞれ違います。アプリ一覧で確認してください

MCP を使えるアプリをすべて見る →

Web 経由でつなぐアプリ用のアドレス

アドレスhttps://mcp.apify.com/?tools=prometheus-maker/website-to-markdown-crawler

JSON 設定は下の「開発者向け」にあります

つまずいたら？Website to Markdown Crawler を使っている人に聞いてみましょう💬 ディスカッション →

開発者向け：ターミナルのコマンドと JSON 設定

Web 経由

Claude Code

claude mcp add --transport http --scope user website-to-markdown 'https://mcp.apify.com/?tools=prometheus-maker/website-to-markdown-crawler' --header 'Authorization: Bearer your-value'

Cursor (~/.cursor/mcp.json)

{
  "mcpServers": {
    "website-to-markdown": {
      "url": "https://mcp.apify.com/?tools=prometheus-maker/website-to-markdown-crawler",
      "headers": {
        "Authorization": "Bearer your-value"
      }
    }
  }
}

VS Code (mcp.json)

{
  "servers": {
    "website-to-markdown": {
      "type": "http",
      "url": "https://mcp.apify.com/?tools=prometheus-maker/website-to-markdown-crawler",
      "headers": {
        "Authorization": "Bearer your-value"
      }
    }
  }
}

自分で入力する値

Authorization 秘密必須 HTTP header
Your Apify API token, as 'Bearer ' (free account: console.apify.com/settings/integrations). Pay per use.

説明は英語の原文のままです。

この設定は、作者のレジストリ登録情報から作成しています。READMEと違う場合は、READMEに従ってください。

ひと目でわかる

GitHubスター i: 0
週あたりのダウンロードi: npm/PyPIにない
ライセンス i: MIT
接続方法: クラウドで動く
トランスポート: streamable-http
最新バージョンi: 1.0.0
カテゴリi: ウェブ・ブラウザ
レジストリ公開日i: 2026年11月7日
コードの最終更新i: 2026年11月7日
作者: prometheus-maker
リポジトリ: prometheus-maker/apify-tools-examples
ウェブサイト: apify.com
レジストリでの状態: 有効

使えるアプリ

このサーバーのつなぎ方と、各アプリの公式ドキュメントに基づきます。2026年11月10日に確認。

インターネット経由でつなげるアプリ

Claude Goose LM Studio Msty Studio Cherry Studio Cursor VS Code + GitHub Copilot Visual Studio Windsurf (Devin Desktop)Zed Kiro Cline Continue JetBrains AI Assistant Claude Code Codex CLI Gemini CLI OpenCode nodecode Warp LibreChat Open WebUI Raycast

すべてのアプリと長所・短所 →

できること

このサーバーは、ツール一覧を表示する前にサインインを求めます。

基本チェックi

誰でも見られる情報をチェックしており、コードは読んでいません。当てはまらない項目は数に入れていません。 · 2026年11月15日にチェック

✓ 合格
作者とリポジトリが一致
レジストリ名は、リポジトリを所有するGitHubアカウント prometheus-maker で確認済みです
✓ 合格
今もメンテナンスされている
コードの最終更新：8 日前
✓ 合格
ライセンスがある
MITを使用
✓ 合格
エンドポイントが応答する
25ミリ秒で応答（HTTP 401）
✓ 合格
OAuthでサインイン
OAuthでのサインインに対応しているため、AIアプリがログイン画面へ案内してくれます
… 未チェック
ツールの説明に隠れた指示がない
まだチェックしていません。エンドポイントをチェックするときにツール一覧を読み取ります

確認していること → · JSON

作者の方へ：再確認の依頼・情報の誤りの報告

ログイン

話し合い

質問、コツの共有、使えないことの報告ができます。「役に立った」の多い順です。

まだ投稿はありません。最初の質問や共有をどうぞ。

ここの投稿は利用者によるもので、PopNx チームのものではありません。

ログインして投稿

ユーザーレビュー

まだレビューはありません

ログインしてレビューを書く

ウェブ・ブラウザのほかのサーバーとの比較i

このカテゴリのほかの1524件のうち0%よりスターが多い
このカテゴリのほかの1524件のうち80%より最近レジストリに公開
基本チェックの結果が、このカテゴリのほかの1524件のうち100%と同じかそれ以上

レジストリでこのカテゴリにある有効なすべてのサーバーと比較しています。スターは、公開者がリポジトリの所有者である場合だけ数えます。

よくある質問

Website to Markdown Crawlerは安全ですか？

当てはまる基本チェック5項目のうち5項目に合格しました。コードは読んでいません。キーやトークンを追加する前に、サーバーがどんなアクセスを求めているかを確認し、必要な権限だけを持つキーを使ってください。

どんなキーやコードが必要ですか？

入力が必要なもの：Authorization

パソコンで動きますか、それともクラウドですか？

作者のクラウドで動きます。インストール不要でインターネット経由でつながりますが、送った内容は作者のサーバーを通ります。

今もメンテナンスされていますか？

GitHubリポジトリの最終更新は8 日前、最新バージョン（1.0.0）がレジストリに届いたのは8 日前です。

どのアプリで使えますか？

Claude Desktop、Claude Code、Cursor、VS CodeなどのMCP対応アプリで使えます。URL で接続するので、リモート MCP を受け付けるアプリでも使えます。例：Web 版 ChatGPT（Business 以上はフル MCP、Pro は読み取りのみ）。

代わりに使えるものは？

同じカテゴリには：Browser Use, changedetection.io (official), Apify MCP Server, Actionbook, Flowershow

似た働きのほかの候補

同じカテゴリでほかの作者のもの。コマンドは確認済み。公式を先に、次にスター順。

カードの見方：↓ 週あたりのダウンロードi★ GitHubスターi3つの柱：レビュー · チェック · 利用状況i更新＝最新バージョンをレジストリに公開した日i

Browser Use

Browser agents and stealth cloud browsers for AI: run web tasks, fill forms, extract data.

作者：browser-use広く使われている↓ 167.3万/週★ 12.1万25 日前更新

パソコンでもクラウドでも✓ 提供元 · browser-use.com

インストール

changedetection.io (official)

Official changedetection.io MCP: web page change tracking, back-in-stock and price alerts.

作者：dgtlmoon広く使われている★ 3.6万10 日前更新

クラウドで動く✓ 提供元 · changedetection.io

接続方法

Apify MCP Server

Extract data from any website with thousands of scrapers, crawlers, and automations on Apify Store ⚡

作者：apify広く使われている★ 1.6万一昨日更新

クラウドで動く✓ 提供元 · apify.com

接続方法

Actionbook

Let your AI agent operate any website through a real, logged-in browser session.

作者：actionbook成長中★ 163227 日前更新

クラウドで動く✓ 提供元 · actionbook.app

接続方法

Flowershow

Publish Markdown and HTML from your AI session as a live website. No account needed.

作者：flowershow成長中★ 111320 日前更新

クラウドで動く✓ 提供元 · flowershow.app

接続方法

Browser Use — クラウドでもパソコンにインストールでも使える · キーが必要 · Claude のディレクトリに掲載
changedetection.io (official) — クラウドで動き、インストール不要 · キー不要
Apify MCP Server — クラウドで動き、インストール不要 · キーが必要
Actionbook — クラウドで動き、インストール不要 · キー不要
Flowershow — クラウドで動き、インストール不要 · キー不要

作者のREADME

READMEを開く

作者のリポジトリから書かれたとおりにコピーしたものです。PopNx MCPは内容を確認・推奨していません。HTML、画像、スクリプトは取り除いています。リンクはこのサイトの外へ移動します。

Apify tools: PDF to Markdown, OCR, Website to Markdown crawler, SEO audit, Tech Stack

Working examples for my pay-per-use tools on the Apify Store. Each one is an API: send URLs, get JSON back. You only pay for what you process, and there's no subscription.

Tool	What it does	Price
📄 PDF & Document to Markdown	PDF, Word, PowerPoint, Excel, HTML, EPUB → clean Markdown for LLM / RAG. Tables, two-column papers, OCR for scans, chunking	$0.002 per document + $0.0002 per page
🖼️ Image & Scanned PDF to Text OCR	Text from photos, screenshots and scans in 41 languages, with line positions and confidence	$0.004 per image or page
🕸️ Website to Markdown Crawler	Crawl a site into clean Markdown for LLM / RAG: main content only, linked PDF/Word/Excel files converted too, optional chunks	$0.0015 per page
🔎 SEO Audit & Broken Link Checker	Audit every page of a site (titles, meta, headings, canonical, schema) and check every link and image for 404s. 0-100 score per page	$0.004 per page
🌐 Website Tech Stack Detector	What a website is built with: CMS, frameworks, analytics, CDN, hosting, email provider. 7,000+ technologies (BuiltWith / Wappalyzer alternative)	$0.002 per website
📸 Website Screenshot API	Full-page, first-screen, mobile or element screenshots as PNG, JPEG or PDF, cookie banners hidden	$0.005 per full page, $0.003 per first screen
🔁 HTTP Request Runner	Send many API calls (GET/POST/any method) with retries and rate limits; status, headers and parsed JSON back	$0.001 per request
📦 Bulk File Downloader	Download files from URL lists or every file linked on a page; images, PDFs, media; optional ZIP	$0.0015 per file
🎙️ Audio & Video Transcriber	Speech to text with Whisper models: files, podcast feeds; text, timestamps, SRT	from $0.003 per audio minute

Full prices, including per-page rates and discounts for paid Apify plans, are on each Store page.

Quick start (curl)

Get an API token from Apify Console → Integrations, then:

curl -X POST "https://api.apify.com/v2/acts/prometheus-maker~website-tech-stack-detector/run-sync-get-dataset-items" \

-H "Authorization: Bearer $APIFY_TOKEN" -H "Content-Type: application/json" \ -d '{"urls": ["python.org"]}'

The same endpoint works for the other tools: replace the tool name and the input.

Use them from Claude, Cursor or any MCP client

Every tool is also an MCP server, hosted by Apify (streamable HTTP). Add one to your client with your Apify token:

"mcpServers": { "pdf-to-markdown": { "url": "https://mcp.apify.com/?tools=prometheus-maker/pdf-document-to-markdown", "headers": { "Authorization": "Bearer YOUR_APIFY_TOKEN" } } } }

Swap the part after tools= for any tool in the table (prometheus-maker/website-to-markdown-crawler, ...), or list several separated by commas. The same entries are in the official MCP Registry under io.github.prometheus-maker/* (files in mcp/). You pay per use, as with the API.

Python

pip install apify-client

export APIFY_TOKEN=... python python/pdf_to_markdown.py # PDF → Markdown + RAG chunks python python/image_to_text_ocr.py # image → text python python/tech_stack.py # domains → technologies python python/website_to_markdown.py # website → Markdown pages + chunks python python/seo_audit.py # website → SEO scores, issues, broken links

The scripts are in python/. They use apify-client 3.x.

Inputs at a glance

Tool	Main input	Useful options
PDF to Markdown	`startUrls: [{"url": ...}]`	`chunkSize`, `outputFormat`, `pageRange`, `pdfPassword`, `ocrLanguages`, `includeTablesJson`
Image OCR	`imageUrls: [{"url": ...}]`	`languages` (e.g. `["eng","deu"]`), `engine`, `includeLines` (line positions)
Tech stack	`urls: ["example.com", ...]`	`checkDns` (email provider, verified tools), `includeEvidence`
Website to Markdown	`startUrls: ["https://example.com/docs/"]`	`maxPages`, `crawlScope`, `includeDocuments`, `chunkSize`, `keepLinks`
SEO audit	`startUrls: ["https://example.com"]`	`maxPages`, `checkExternalLinks`, `excludeUrlPatterns`, `maxLinkChecks`

See each Store page for every field and a full output example.

About

These tools are built and maintained by Prometheus (notes). Issues and requests are welcome in this repo.

Website to Markdown Crawler

What it does

インストール