Scrawly MCP Server

Name: Scrawly MCP Server
Author: IliasSami

제작자: IliasSami버전 1.0.0i★ –i내 컴퓨터에서 실행

레지스트리 이름io.github.IliasSami/scrawly

설치

개요

제작자가 쓴 설명(영어 원문)

MCP server for the Scrawly SEO crawler: query local audits and propose confirmation-gated fixes.

PopNx MCP의 세 기둥

이 세 가지는 절대 하나의 점수로 합치지 않아요. 의견, 측정, 인기는 서로 다른 것이니까요.

사용자 의견i아직 리뷰가 없어요리뷰는 다음 단계에서 계정 기능과 함께 열려요
우리의 기본 점검i1개 중 1개 통과공개된 정보로 점검했으며, 코드는 아직 스캔하지 않았어요
사용 정도i아직 측정 안 함★ –

할 수 있는 일

이 서버는 아직 쉬운 말로 된 요약을 쓰지 못했어요. 아래는 레지스트리에서 읽어 온 사실이에요.

연결 방식: 내 컴퓨터에서 실행
전송 방식: stdio
카테고리: 마케팅 및 소셜 미디어

설치

쓰고 있는 AI 앱을 고른 다음 설정을 복사하세요.

설치하기 전에

기본 점검: 1개 중 1개 통과
내 컴퓨터에서 내 사용자 계정의 권한(파일, 네트워크, 앱)으로 실행돼요.
레지스트리에 입력해야 할 키가 나와 있지 않아요.

필요한 것

PyPIPython의 uv 설치(uvx 명령어용)

어떤 앱을 쓰세요?

ClaudeClaude CodeCursorVS CodeChatGPT

위에서 앱을 고르세요. 기억해 두었다가 다음부터는 버튼에 “…에 설치”라고 표시해요.

Claude Desktop → Settings → Developer → Edit Config를 열고 claude_desktop_config.json에 이 내용을 붙여 넣으세요

{
  "mcpServers": {
    "scrawly": {
      "command": "uvx",
      "args": [
        "sentinelseo"
      ]
    }
  }
}

터미널에서 이 명령어를 실행하세요

claude mcp add scrawly -- uvx sentinelseo

Cursor에서 열기

또는 설정을 직접 복사하기

프로젝트의 .cursor/mcp.json 또는 ~/.cursor/mcp.json에 붙여 넣으세요

{
  "mcpServers": {
    "scrawly": {
      "command": "uvx",
      "args": [
        "sentinelseo"
      ]
    }
  }
}

브라우저가 앱을 열지 물어본 다음, 앱이 설정을 보여 주고 확인을 요청해요. 키 값은 비워 두니 직접 입력하세요.

VS Code에서 열기

또는 설정을 직접 복사하기

프로젝트의 .vscode/mcp.json에 붙여 넣으세요

{
  "servers": {
    "scrawly": {
      "type": "stdio",
      "command": "uvx",
      "args": [
        "sentinelseo"
      ]
    }
  }
}

브라우저가 앱을 열지 물어본 다음, 앱이 설정을 보여 주고 확인을 요청해요. 키 값은 비워 두니 직접 입력하세요.

이 서버는 내 컴퓨터에서 실행되는데, ChatGPT는 인터넷에 있는 서버에만 연결할 수 있어요. 다른 앱을 고르세요.

선택한 앱은 이 기기의 쿠키에만 저장돼요. 계정은 필요 없어요.

이 설정은 제작자의 레지스트리 정보로 만들었어요. README와 다르면 README를 따르세요.

할 수 있는 일

내 컴퓨터에서 실행돼요. 설치하면 AI 앱에 도구 목록이 나타나요.

기본 점검i

누구나 볼 수 있는 정보를 점검했고, 코드는 읽지 않았어요. 해당하지 않는 항목은 개수에서 뺐어요. · 2026년 11월 7일 점검

✓ 통과
제작자와 저장소 일치
레지스트리 이름이 GitHub 계정 IliasSami 기준으로 확인되었고, 이 계정이 저장소를 소유하고 있어요
… 아직 점검 안 함
계속 관리되고 있음
아직 GitHub에서 이 저장소를 읽어 오지 않았어요
… 아직 점검 안 함
라이선스 있음
아직 GitHub에서 이 저장소를 읽어 오지 않았어요
– 해당 없음
엔드포인트 응답
내 컴퓨터에서 실행되는 서버라 인터넷 엔드포인트가 없어요
– 해당 없음
OAuth로 로그인
내 컴퓨터에서 실행되며, 대신 로컬 설정을 사용해요
… 아직 점검 안 함
도구 설명에 숨겨진 지시 없음
내 컴퓨터에서 실행돼요. 도구 목록은 인터넷 엔드포인트가 있는 서버에서만 읽을 수 있어요

마케팅 및 소셜 미디어 카테고리의 다른 서버와 비교i

이 카테고리의 다른 서버 2972개 중 0%보다 스타가 많아요
이 카테고리의 다른 서버 2972개 중 50%보다 최근에 레지스트리에 공개됐어요
기본 점검 결과가 이 카테고리의 다른 서버 2972개 중 100%와 같거나 더 좋아요

레지스트리에서 이 카테고리의 활성 서버 전체와 비교했어요. 스타는 게시자가 저장소를 소유한 경우에만 세요.

자주 묻는 질문

Scrawly MCP Server, 안전한가요?

해당하는 기본 점검 1개 중 1개를 통과했어요. 코드는 읽지 않았어요. 키나 토큰을 넣기 전에 서버가 어떤 권한을 요구하는지 확인하고, 꼭 필요한 권한만 있는 키를 쓰세요.

어떤 키나 코드가 필요한가요?

레지스트리에 필수 키가 나와 있지 않아요. 다만 처음 쓸 때 로그인을 요구하는 서버도 있어요.

내 컴퓨터에서 실행되나요, 클라우드에서 실행되나요?

내 컴퓨터에서 실행돼요. AI 앱이 필요할 때 실행하고, 데이터는 제작자의 서버를 거치지 않아요(서버 자체가 온라인 서비스를 호출하는 경우는 제외).

아직 관리되고 있나요?

GitHub 저장소는 마지막으로 – 변경됐고, 최신 버전(1.0.0)은 30일 전 레지스트리에 올라왔어요.

어떤 앱에서 쓸 수 있나요?

Claude Desktop, Claude Code, Cursor, VS Code처럼 MCP를 지원하는 앱에서 쓸 수 있어요. 내 컴퓨터에 Python (uv)도 있어야 해요.

대신 쓸 수 있는 건 뭐가 있나요?

같은 카테고리에는: MCP YouTube Transcript, Google Analytics MCP, BibiGPT YouTube Video Summarizer

대안

같은 카테고리에서 다른 제작자가 만든 서버예요. 스타 순으로 정렬했어요.

카드 보는 법:★ GitHub 스타i세 기둥: 리뷰 · 점검 · 사용 정도i업데이트 = 최신 버전을 레지스트리에 공개한 날i

MCP YouTube Transcript

제작자: jkawamoto

An MCP server retrieving transcripts of YouTube videos

내 컴퓨터에서 실행★ 495MIT10일 전 업데이트

설치

Google Analytics MCP

제작자: surendranb

GA4 MCP server for AI agents: schema discovery, server-side aggregation, analysis-ready defaults.

내 컴퓨터에서 실행★ 244MIT9일 전 업데이트

설치

BibiGPT YouTube Video Summarizer

제작자: JimmyLv

AI video summarizer: summarize and transcribe YouTube, Bilibili, TikTok and podcast videos.

클라우드에서 실행★ 137MIT10일 전 업데이트

설치

제작자의 README

README 열기

제작자의 저장소에서 쓰인 그대로 가져왔어요. PopNx MCP가 검토하거나 보증한 내용이 아니에요. HTML, 이미지, 스크립트는 제거했어요. 링크를 누르면 이 사이트를 벗어나요.

Scrawly: the free, open-source SEO crawler and site audit tool

Free technical SEO, GEO and AI-search audits for any website.

A free alternative to Screaming Frog and Sitebulb. No account, no page cap, no subscription.

Scrawly is a free, open-source desktop SEO crawler and technical site audit tool for macOS, Windows and Linux. It crawls a website, runs 250 technical SEO, GEO (Generative Engine Optimization) and agentic-web checks on every page, maps the site's architecture, and explains in plain language what to fix. For WordPress sites it can also apply safe, reversible fixes. Scrawly is created by [Ilias Sami](https://iliassami.com/) and released for the SEO community under the MIT License.

In one sentence: Scrawly is a free desktop app that audits any website for the

technical issues that affect Google rankings and AI-search visibility (ChatGPT,

Perplexity, Google AI Overviews), with no account and no page limit.

Official Portals & Network:

🌐 Official Website: iliassami.com/scrawly
☁️ Google Sites Hub: sites.google.com/view/scrawly-seo-crawler/home
⚡ Cloudflare Edge Node: iliassami-seo-cloudstack.pages.dev/scrawly-desktop-seo-crawler
📦 GitHub Pages: iliassami.github.io/scrawly-seo-crawler

Install in one line
What Scrawly checks
Free alternative to Screaming Frog and Sitebulb
GEO and AEO: auditing for AI search
Fix WordPress issues safely
Privacy
FAQ
Documentation · Contributing · License

Install in one line

Scrawly installs itself, adds an app icon (Applications on macOS, the Start Menu on Windows, your app menu on Linux), and keeps itself up to date.

macOS or Linux (Terminal):

curl -fsSL https://raw.githubusercontent.com/IliasSami/scrawly-seo-crawler/main/install.sh | bash

Windows (PowerShell):

irm https://raw.githubusercontent.com/IliasSami/scrawly-seo-crawler/main/install.ps1 | iex

Then open Scrawly like any other app. There is nothing to sign up for.

Prefer to install by hand?

You need Python 3.11 or newer and git. (Node.js is not needed: releases ship the interface prebuilt.)

git clone https://github.com/IliasSami/scrawly-seo-crawler.git Scrawly

cd Scrawly python3 scripts/install.py # Windows: py scripts\install.py

The installer creates a private Python environment, downloads the crawler browser (about 150 MB, once), and adds Scrawly to your apps. Full guide, Linux notes and troubleshooting: [docs/DESKTOP.md](docs/DESKTOP.md).

What Scrawly checks

Scrawly runs 250 checks grouped into 23 areas. Every finding comes with why it matters, how to fix it, and the exact pages affected.

Area	Examples
Crawlability and indexability	robots.txt rules, meta robots and `X-Robots-Tag`, noindex conflicts, orphan pages, crawl depth
Response codes and redirects	4xx and 5xx pages, redirect chains and loops, temporary vs permanent redirects
Titles, meta and headings	missing, duplicate, too long or too short titles; pixel-width truncation; meta descriptions too thin for AI; H1 and heading order
Canonicalization	missing, conflicting, cross-domain or non-indexable canonicals
Content quality	thin and duplicate content, near-duplicates, readability
Structured data	JSON-LD, Microdata and RDFa, with schema validation
Internal linking and architecture	link graph, internal PageRank ("authority"), broken links, generic anchors
Performance and Core Web Vitals	PageSpeed Insights lab and field (CrUX) data, TTFB, page weight
AI search readiness (GEO)	which AI crawlers you allow or block, `llms.txt`, AI citation readiness
Agentic web	how well AI agents can read and operate your site
And more	images and alt text, hreflang, XML sitemaps, security and TLS, mobile, JavaScript rendering, pagination, WordPress specifics

The full catalogue, with severity and fix tier for every check, is in docs/CHECK_MANIFEST.yaml.

Also included: JavaScript rendering, custom extraction, saved crawl profiles, a 3D site graph and depth tree, crawl-to-crawl comparison, scheduled audits with regression alerts, Google Search Console and GA4 data, branded HTML and PDF reports, an AI writer for titles and meta descriptions (bring your own AI key), and an MCP server so AI assistants can work with your audits (docs/MCP.md).

A free alternative to Screaming Frog and Sitebulb

Screaming Frog SEO Spider and Sitebulb are excellent tools. Scrawly is a free, open-source option for people who want a deep technical audit without a licence, plus checks for AI search.

	Screaming Frog / Sitebulb	Scrawly
Price	Paid licence or subscription (limited free tier or trial)	Free and open-source (MIT)
Account or licence key	Needed for full use	None
Page limit	The free tier is capped	No cap: you set the limit
AI search (GEO) and agentic-web checks	Some, depending on version	A dedicated set: AI crawler access, `llms.txt`, citation and agent readiness
Fixes	Report only	Safe, reversible fixes on WordPress
Source code	Closed	Open: read, audit, contribute

Scrawly is independent and not affiliated with Screaming Frog Ltd or Sitebulb.

GEO and AEO: auditing for AI search

Search now includes AI answer engines that read your pages and decide whether to cite you. Scrawly audits for Generative Engine Optimization (GEO) and Answer Engine Optimization (AEO):

AI crawler access: a matrix of which AI bots (GPTBot, ClaudeBot, PerplexityBot, Google-Extended, OAI-SearchBot and others) your robots.txt and firewall allow or block.
`llms.txt`: whether you publish a curated index for AI systems, and its quality.
Meta as AI context: a description is often the first thing an AI reads about a page, so Scrawly flags descriptions too thin to understand and can draft an entity-rich one from the page's own content.
Entities and structured data: the schema and named entities that help search engines and AI understand what a page is about.

Four-Step Agency Audit Workflow

Target URL Input: Configure depth, concurrency, user-agents, and custom robots rules.
Automated Heuristic Scan: Dual-pass HTTP inspection and headless Chromium JavaScript rendering.
Interactive Visual Dashboard: Prioritized issue triaging by impact score and crawl depth.
Client-Ready Deliverables: Instant export to white-label PDF, Excel/CSV, and portable SQLite databases.

Fix WordPress issues safely

Connect a WordPress site with the lightweight Scrawly Connector plugin and Scrawly can fix titles, meta descriptions, canonicals and redirects for you:

a rollback snapshot is saved before every change, and every fix can be undone;
changes to the live site always ask for your confirmation first;
higher-risk issues are never auto-applied; they're flagged for a person to review.

See docs/WORDPRESS_CONNECTOR.md. Every other site (Shopify, Wix, Webflow, Next.js, custom) gets the full read-only audit.

Privacy: your audits stay on your computer

Scrawly has no accounts and no analytics. Your crawls, findings and reports are stored on your computer only. Scrawly connects to:

the websites you choose to audit;
GitHub, to check for updates (turn off with SCRAWLY_AUTO_UPDATE=0);
services you configure, such as PageSpeed Insights, Google Search Console or your AI provider;
the feedback service, only when you click Send on a feedback note.

The app's local engine only accepts requests from the Scrawly window itself, so other websites can't use it. Report security issues as described in SECURITY.md.

Frequently asked questions

What is Scrawly? Scrawly is a free, open-source SEO crawler and technical site audit tool that runs as a desktop app on macOS, Windows and Linux. It checks every page of a website for 250 technical SEO, GEO and agentic-web issues and explains how to fix them.

Is there a free alternative to Screaming Frog? Yes. Scrawly is a free, open-source alternative to Screaming Frog SEO Spider and Sitebulb. It has no page cap and no licence, and it adds AI-search (GEO) checks and safe WordPress fixes.

Is Scrawly really free? Yes. Scrawly is free and open-source under the MIT License, with no account, subscription or usage limit. Audits run on your own computer, so there is no per-crawl cost.

Do I need to create an account? No. Install it and start auditing. There is no sign-up, login or approval.

Does Scrawly work on websites that aren't WordPress? Yes. The audit works on any website. Only the one-click fixes are WordPress-specific.

Can Scrawly check AI search and GEO readiness? Yes. It checks AI crawler access, llms.txt, whether titles and descriptions give AI enough context, structured data, and how well AI agents can use the site.

How many pages can Scrawly crawl? There is no fixed cap. You choose the limit per audit; how far you can go depends on your computer and the website.

Who made Scrawly? Scrawly was created by Ilias Sami, an SEO consultant, as a free contribution to the SEO community. Contact: me@iliassami.com.

Documentation

docs/DESKTOP.md: install, update, Linux notes and troubleshooting
docs/WORDPRESS_CONNECTOR.md: the WordPress fix plugin
docs/MCP.md: use your audits from AI assistants (MCP)
[docs/CHECK_MANIFEST.yaml](docs/

앞부분만 보여 드려요. 나머지는 저장소에서 읽어 보세요

Scrawly MCP Server

개요

PopNx MCP의 세 기둥

할 수 있는 일

설치

설치하기 전에

할 수 있는 일

기본 점검i

제작자와 저장소 일치

계속 관리되고 있음

라이선스 있음

엔드포인트 응답

OAuth로 로그인

도구 설명에 숨겨진 지시 없음

마케팅 및 소셜 미디어 카테고리의 다른 서버와 비교i

자주 묻는 질문

대안

MCP YouTube Transcript

Google Analytics MCP

BibiGPT YouTube Video Summarizer

제작자의 README

Contents

Install in one line

What Scrawly checks

A free alternative to Screaming Frog and Sitebulb

GEO and AEO: auditing for AI search

Four-Step Agency Audit Workflow

Fix WordPress issues safely

Privacy: your audits stay on your computer

Frequently asked questions

Documentation