timesfm
TimesFM (Time Series Foundation Model) is a pretrained time-series foundation model developed by Google Research for time-series forecasting.
Red-team LLM apps: 41 OWASP LLM Top 10 probes, adaptive attacks, CI gate, audit reports.
教 AI 做这类工作的 Skill,可与本项一起使用
TimesFM (Time Series Foundation Model) is a pretrained time-series foundation model developed by Google Research for time-series forecasting.
Open-source intelligence for the global theater. Track everything from the corporate/private jets of the wealthy, and spy satellites, to seismic events in one unified interface. Hook an AI agent up to have it parse through data and find previously unseen correlations. The knowledge is available to…
scrape data from Google Maps. Extracts data such as the name, address, phone number, website URL, rating, reviews number, latitude and longitude, reviews,email and more for each place
列表按使用分(满分 100)排序,由以下部分组成
| 热度 | 6/80 | GitHub 星标或每周下载量:较大的计 60,较小的计 20 |
|---|---|---|
| 新鲜度 | 12/12 | 30 天内有发布或代码更新得满分 |
| 仍在响应 | 0/8 | 上次检查时云端端点有响应 |
| 使用分 | 18/100 |
质量: 基础检查通过 3/3 项(仅展示,不用于排序) · 上升势头: 暂无数据 (只用于“上升中”标签)
选择你使用的 AI 应用,然后复制设置。
用一句话让 AI 帮你安装
请帮我安装 LLM Assure。按照 https://mcp.popnx.com/i/k11-software-solutions-llm-assure.md 操作,先把命令给我看,等我同意后再运行。粘贴到能在你电脑上工作的 AI(如 Claude Code、Cursor)。它会读取我们的步骤,先给你看命令,等你同意。无需密钥,无需注册。 · 查看 AI 会读取的全文
通过 3/3 项检查 · 在你的电脑上运行 · ✓ 命令已检查 2026年11月14日
第一步:你用哪个 AI?
选择你用的应用,步骤会显示在下方。
可连接 Claude,但需要先准备
需要先在电脑上安装 Python (uv)(只需一次) · 仅限电脑上的 Claude 应用(Windows 或 Mac),网页和手机不可用
把这段话复制到 Claude 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。
请在这台电脑上为 Claude 安装 MCP server LLM Assure,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):{ "mcpServers": { "llm-assure": { "command": "uvx", "args": [ "k11-llm-assure-mcp" ] } } } 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 LLM Assure 的工具真的出现了。这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。
已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter
uv --versionMac:按 ⌘ + Space,输入 Terminal 后按 Enter
Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”
还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载
装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version
安装一次,所有需要 uv 的工具都能用
SettingsDeveloperEdit Config
{
"mcpServers": {
"llm-assure": {
"command": "uvx",
"args": [
"k11-llm-assure-mcp"
]
}
}
}用 LLM Assure 告诉我你能帮我做什么,然后做一件给我看✓ 如果 Claude 说正在使用 LLM Assure,或回答中出现 LLM Assure 的工具名称,就表示连接成功
上面的命令不填这些也能用。想调整时再按开发者的说明添加。
ANTHROPIC_API_KEY 可选:启用 Claude LLM 评审和自适应红队测试 说明为自动翻译,变量名保持原样;不确定时请查看原文。
菜单名称已于 2026年11月11日 对照 Anthropic 帮助页面核实 · 你的界面可能因版本略有不同
ChatGPT 暂时无法连接 LLM Assure
LLM Assure 需要安装在你的电脑上,而 ChatGPT 只能连接在网上运行的服务器
可连接 Claude Code,但需要先准备
需要先在电脑上安装 Python (uv)(只需一次)
把这段话复制到 Claude Code 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。
请在这台电脑上为 Claude Code 安装 MCP server LLM Assure,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):claude mcp add --scope user llm-assure -- uvx k11-llm-assure-mcp 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 LLM Assure 的工具真的出现了。这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。
已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter
uv --versionMac:按 ⌘ + Space,输入 Terminal 后按 Enter
Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”
还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载
装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version
安装一次,所有需要 uv 的工具都能用
Mac:按 Command+空格,输入 Terminal · Windows:打开 PowerShell
claude mcp add --scope user llm-assure -- uvx k11-llm-assure-mcp应能看到 LLM Assure 在列表中并显示已连接
用 LLM Assure 告诉我你能帮我做什么,然后做一件给我看✓ 如果 Claude Code 说正在使用 LLM Assure,或回答中出现 LLM Assure 的工具名称,就表示连接成功
上面的命令不填这些也能用。想调整时再按开发者的说明添加。
ANTHROPIC_API_KEY 可选:启用 Claude LLM 评审和自适应红队测试 说明为自动翻译,变量名保持原样;不确定时请查看原文。
菜单名称已于 2026年11月11日 对照 Anthropic 帮助页面核实 · 你的界面可能因版本略有不同
可连接 Cursor,但需要先准备
需要先在电脑上安装 Python (uv)(只需一次)
把这段话复制到 Cursor 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。
请在这台电脑上为 Cursor 安装 MCP server LLM Assure,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):{ "mcpServers": { "llm-assure": { "command": "uvx", "args": [ "k11-llm-assure-mcp" ] } } } 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 LLM Assure 的工具真的出现了。这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。
已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter
uv --versionMac:按 ⌘ + Space,输入 Terminal 后按 Enter
Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”
还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载
装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version
安装一次,所有需要 uv 的工具都能用
用 LLM Assure 告诉我你能帮我做什么,然后做一件给我看✓ 如果 Cursor 说正在使用 LLM Assure,或回答中出现 LLM Assure 的工具名称,就表示连接成功
上面的命令不填这些也能用。想调整时再按开发者的说明添加。
ANTHROPIC_API_KEY 可选:启用 Claude LLM 评审和自适应红队测试 说明为自动翻译,变量名保持原样;不确定时请查看原文。
菜单名称已于 2026年11月11日 对照 Cursor 帮助页面核实 · 你的界面可能因版本略有不同
可连接 VS Code,但需要先准备
需要先在电脑上安装 Python (uv)(只需一次)
把这段话复制到 VS Code 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。
请在这台电脑上为 VS Code 安装 MCP server LLM Assure,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):{ "servers": { "llm-assure": { "type": "stdio", "command": "uvx", "args": [ "k11-llm-assure-mcp" ] } } } 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 LLM Assure 的工具真的出现了。这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。
已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter
uv --versionMac:按 ⌘ + Space,输入 Terminal 后按 Enter
Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”
还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载
装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version
安装一次,所有需要 uv 的工具都能用
用 LLM Assure 告诉我你能帮我做什么,然后做一件给我看✓ 如果 VS Code 说正在使用 LLM Assure,或回答中出现 LLM Assure 的工具名称,就表示连接成功
上面的命令不填这些也能用。想调整时再按开发者的说明添加。
ANTHROPIC_API_KEY 可选:启用 Claude LLM 评审和自适应红队测试 说明为自动翻译,变量名保持原样;不确定时请查看原文。
菜单名称已于 2026年11月11日 对照 VS Code 帮助页面核实 · 你的界面可能因版本略有不同
Claude Code
claude mcp add --scope user llm-assure -- uvx k11-llm-assure-mcpClaude Desktop (claude_desktop_config.json)
{
"mcpServers": {
"llm-assure": {
"command": "uvx",
"args": [
"k11-llm-assure-mcp"
]
}
}
}Cursor (~/.cursor/mcp.json)
{
"mcpServers": {
"llm-assure": {
"command": "uvx",
"args": [
"k11-llm-assure-mcp"
]
}
}
}VS Code (mcp.json)
{
"servers": {
"llm-assure": {
"type": "stdio",
"command": "uvx",
"args": [
"k11-llm-assure-mcp"
]
}
}
}ANTHROPIC_API_KEY 机密 env说明为自动翻译,变量名保持原样;不确定时请查看原文。
这些设置是根据作者在注册中心的条目生成的。如果 README 的写法不同,请以 README 为准。
依据这个服务器的连接方式和各应用自己的文档,检查于 2026年11月10日。
在你的电脑上运行,适用于
ClaudeGooseLM StudioMsty StudioCherry StudioCursorVS Code + GitHub CopilotVisual StudioWindsurf (Devin Desktop)ZedKiroClineContinueJetBrains AI AssistantClaude CodeCodex CLIGemini CLIOpenCodenodecodeWarpLibreChatRaycast
它在你的电脑上运行;安装后,工具列表会显示在你的 AI 应用中。
我们检查的是任何人都能看到的信息;我们没有阅读代码。不适用的检查项不计入总数。 · 检查于 2026年11月19日
注册名称已通过 GitHub 账户 K11-Software-Solutions 验证,该账户拥有此仓库
代码最后更新于3天前
使用 MIT
它在你的电脑上运行,没有互联网端点
在你的电脑上运行,改用本地设置
它在你的电脑上运行;我们只能读取互联网端点的工具列表
OSV.dev 中没有 k11-llm-assure-mcp@0.1.0 的记录
只检查这个版本的包本身,不包括所有依赖 · 检查于 2026年11月15日
如果你是作者,可把这段代码贴到 README。徽章会链接回本页。
[](https://mcp.popnx.com/en/servers/k11-software-solutions-llm-assure)提问、分享技巧或报告无法使用。按“有帮助”数量排序。
还没有评价
与注册中心里这个分类中所有活跃的服务器比较。只有当发布者拥有该仓库时,星标数才计入。
它在 3 项适用的基础检查中通过了 3 项。我们没有阅读代码。在添加密钥或令牌之前,请先看看这个服务器要求哪些权限,并使用只具备所需权限的密钥。
注册中心没有列出必需的密钥,不过有些服务器会在首次使用时要求你登录。
它在你的电脑上运行。你的 AI 应用会在需要时启动它,数据不会经过作者的服务器(除非它自己调用在线服务)。
GitHub 仓库最后更新于3天前,最新版本(0.1.0)于6天前进入注册中心。
支持 MCP 的应用,例如 Claude Desktop、Claude Code、Cursor 和 VS Code。你的电脑上还需要有 Python (uv)。
同一分类中有:OpenSEO, Exa, Microsoft Learn MCP, Docs, COTAL actions (cotal.ai)
同一分类、其他作者、命令已通过检查。官方的排在前面,再按星标排序。
如何看卡片:↓ 每周下载量i★ GitHub 星标i三大支柱:评价 · 检查 · 使用情况i更新 = 最新版本发布到注册中心的时间i
Keyword research, site audits, rank tracking and AI visibility for your AI agent.
Connect AI agents to Exa for web search, content fetching, and multi-step research.
Official Microsoft Learn MCP Server – real-time, trusted docs & code samples for AI and LLMs.
cotal.ai actions: product overview, site search, build log, feedback, Cloud waitlist, updates, calls
| 本项 LLM Assure | OpenSEO | Exa | Microsoft Learn MCP | Docs | COTAL actions (cotal.ai) | |
|---|---|---|---|---|---|---|
| 运行位置 | 需要安装在电脑上 | 在云端运行,无需安装 | 在云端运行,无需安装 | 在云端运行,无需安装 | 在云端运行,无需安装 | 在云端运行,无需安装 |
| 需要密钥 | 否 | 否 | 否 | 否 | 否 | 否 |
| 可在 Claude 中按 + 添加 | 否 | 是 | 是 | 是 | 否 | 否 |
| 基础检查 | 3/3 | 5/5 | 2/4 | 4/4 | 4/4 | 4/4 |
| 许可证 | MIT | MIT | MIT | CC-BY-4.0 | NOASSERTION | Apache-2.0 |
| 价格 | 登记中未列出费用 | 登记中未列出费用 | 登记中未列出费用 | 登记中未列出费用 | 登记中未列出费用 | 登记中未列出费用 |
按原文从作者的仓库复制。PopNx MCP 没有审查或背书其内容。HTML、图片和脚本已被移除。链接会离开本站。
Red-team your LLM application before your users do.
llm-assure runs automated attack and evaluation suites against any chatbot, RAG app or AI agent. It fails your CI build on serious findings and produces an audit-ready HTML report. It also includes an MCP server, so Claude (or any MCP client) can run assessments and adaptive red-team sessions for you.
--fail-on severity gate, and a GitHub step summary--pack DIRBuilt by K11 Software Solutions, part of the
K11 Tech Lab agentic-QA series. It complements
which covers bias, fairness and robustness.
git clone https://github.com/K11-Software-Solutions/k11techlab-llm-assurance-toolkit
cd k11techlab-llm-assurance-toolkit pip install -e ".[all]"
llm-assure run -t examples/targets/demo_vulnerable.yaml -o reports/before --fail-on none
llm-assure run -t examples/targets/demo_hardened.yaml -o reports/after
| Before | After | |
|---|---|---|
| Assurance score | 0 / 100 (F) | 99 / 100 (A) |
| Critical findings | 6 | 0 |
| High findings | 13 | 0 |
Open reports/before/report.html to see the full audit report. Pre-generated samples are in docs/sample-report/.
llm-assure init target.yaml # writes a commented template
llm-assure run -t target.yaml
name: My Support Assistant
type: http # http | openai | anthropic | python url: https://api.example.com/chat headers: Authorization: "Bearer ${BOT_API_TOKEN}" request_template: message: "{{prompt}}" history: "{{history}}" response_path: reply # e.g. data.answer or choices.0.message.content context: company: Acme Corp purpose: customer support for Acme Corp's online store canary: K11-CANARY-REPLACE-ME # put this exact string in your system prompt forbidden_topics: [politics, religion]
Tip: put a unique canary string in your system prompt and set context.canary to it. The toolkit then detects system-prompt leaks even when they are reversed, spaced out or base64-encoded.
More examples are in examples/targets/: Claude, OpenAI-compatible (vLLM, Ollama, Azure) and HTTP.
| Suite | OWASP LLM 2025 | Probes |
|---|---|---|
prompt_injection | LLM01 Prompt Injection | 8 |
system_prompt_leakage | LLM07 System Prompt Leakage | 6 |
sensitive_information | LLM02 Sensitive Information Disclosure | 5 |
jailbreak_policy | LLM01 (jailbreak) | 5 |
excessive_agency | LLM06 Excessive Agency | 4 |
misinformation | LLM09 Misinformation | 4 |
improper_output_handling | LLM05 Improper Output Handling | 4 |
scope_control | Business risk | 5 |
llm-assure suites -v # list all probes
llm-assure run -t target.yaml --tag baseline # quick 15-probe smoke scan llm-assure run -t target.yaml -s prompt_injection -s excessive_agency
Some failures can't be caught with patterns. Examples: "did the bot *imply* it issued a refund?" or "is this a usable phishing email?" Add --judge to evaluate these probes with Claude:
export ANTHROPIC_API_KEY=...
llm-assure run -t target.yaml --judge # default: claude-opus-5-5 llm-assure run -t target.yaml --judge --judge-effort low
The judge returns structured JSON verdicts and treats the transcript as untrusted data, so it resists injection attempts aimed at the judge itself. Judge calls are made only when the deterministic detectors haven't already found a failure. Without --judge, judge-only probes are marked needs review rather than silently passed.
# .github/workflows/llm-assurance.yml
--fail-on critical|high|medium|low|none sets the exit code (default high)junit.xml works with any CI test reportersummary.md is appended to $GITHUB_STEP_SUMMARY automaticallyA complete workflow is in docs/ci-example.yml.
Listed in the official MCP Registry as io.github.K11-Software-Solutions/llm-assure.
Claude Code plugin (adds the tools plus /red-team and /assurance-report; needs uv):
/plugin marketplace add K11-Software-Solutions/k11techlab-llm-assurance-toolkit
/plugin install llm-assure@k11-llm-assure
MCP server only:
claude mcp add llm-assure -- uvx k11-llm-assure-mcp
Claude Desktop (claude_desktop_config.json):
{ "mcpServers": { "llm-assure": { "command": "uvx", "args": ["k11-llm-assure-mcp"] } } }
Or pip install k11-llm-assure-mcp and use the llm-assure-mcp command. From a clone: pip install -e ".[mcp]".
| Tool | What it does |
|---|---|
list_suites / list_probes | Browse attack categories and probes |
run_assessment | Run a full audit and write all reports |
send_probe | Send a custom prompt (with history) and get leak/PII/refusal checks, for adaptive multi-turn attacks |
get_findings | Read findings from an earlier assessment.json |
Try asking Claude: *"Run a baseline assessment against examples/targets/demo_vulnerable.yaml, then use send_probe to find a prompt-injection variant the suite missed."*
llm-assure adaptive gives a Claude attacker agent a fixed query budget and lets it attack the target on its own. It reads each reply, adapts, runs multi-turn conversations and records every distinct vulnerability it finds. This is the harness for the K11 adaptive-vs-static study.
export ANTHROPIC_API_KEY=...
llm-assure adaptive -t target.yaml --budget 100 --runs 5 -o runs/
llm-assure adaptive -t target.yaml --budget 100 --runs 5 --cold -o runs/
Each run writes one JSON record to the output directory. It contains every conversation, each finding with a snapshot of its transcript, the static results (seeded arm), the query count, attacker token usage including cache reads, timings, and a final status (finished, budget_exhausted, refused, stalled, max_turns or error). The attacker never sees the target's canary value; it is only told whether a reply leaked it.
type: instrumented targets pair a real model (Claude or any OpenAI-compatible endpoint) with simulated tools and ground-truth instruments: a unique canary, a policy-checked tool-call log and seeded synthetic PII. The tool_log, seeded_pii and poison detectors judge what the app actually did, not what it claimed. See study/README.md.
id: fintech_pack
title: FinTech Pack owasp: LLM02:2025 remediation: Enforce payee-change verification server-side. probes:
llm-assure run -t target.yaml --pack ./packs/fintech
Detectors: contains, regex (both support invert), canary, pii (email, SSN, Luhn-checked cards, phone, API keys, IBAN), expect_refusal, expect_uncertainty, llm_judge. Probe text can use {{company}}, {{purpose}}, {{forbidden_topics}} and any other context key.
Premium probe packs (FinTech, Healthcare, HR and Customer Support) and a done-for-you LLM Readiness Audit are available from K11 Software Solutions.
Only test systems you own or are authorized to assess. Automated testing reduces risk but does not eliminate it. Treat a passing score as one input to a security review, not a certificate.
artifacts/documents/ARCHITECTURE.md explains every component, the end-to-end execution flow, how the canary detector works, and how scores and the quality gate are calculated. artifacts/documents/STUDY_DESIGN.md describes the adaptive-vs-static red-teaming study this toolkit supports.
pip install -e ".[dev]"
pytest
MIT License © K11 Software Solutions