原型 · 预览版:收录官方注册中心里的全部服务器,每 30 分钟同步一次。使用 Google 登录即可撰写评价。原型 · 每 30 分钟更新
PopNx MCP为使用 AI 的人准备的 MCP 服务器 · 用大白话讲清楚 登录

vidx

作者:renjithrrkj版本 0.2.1i★ 0i在你的电脑上运行代码仓库 ↗
注册名称io.github.renjithrrkj/vidx

安装方法

能做什么

Local video understanding and editing for agents, in small text instead of frames.

作者提供的原文

  • 连接方式 在你的电脑上运行
  • 账号或密钥 无需密钥
  • 分类 设计、图片与音频

可搭配使用

教 AI 做这类工作的 Skill,可与本项一起使用

impeccable

The design vocabulary for your coding agent. Steer with polish and bolder, review with critique and audit, catch AI slop before it ships.

作者:pbakaus★ 113,5361 个 skill

Skill · 操作手册

diagram-design

Editorial diagram design for Claude Code, Codex, GitHub Copilot, Cursor, Factory Droid, Qoder, and Pi. 45 diagram types. Self-contained HTML + SVG. No shadows. No Mermaid slop.

作者:cathrynlavery★ 68,7131 个 skill

Skill · 操作手册

frontend-slides

Create beautiful slides on the web using a coding agent's frontend skills

作者:zarazhangrui★ 32,6391 个 skill

Skill · 操作手册

为什么排在这里

列表按使用分(满分 100)排序,由以下部分组成

热度0/80GitHub 星标或每周下载量:较大的计 60,较小的计 20
新鲜度12/1230 天内有发布或代码更新得满分
仍在响应0/8上次检查时云端端点有响应
使用分12/100

质量: 基础检查通过 3/3 项(仅展示,不用于排序) · 上升势头: 暂无数据 (只用于“上升中”标签)

安装

选择你使用的 AI 应用,然后复制设置。

用一句话让 AI 帮你安装

请帮我安装 vidx。按照 https://mcp.popnx.com/i/renjithrrkj-vidx.md 操作,先把命令给我看,等我同意后再运行。

粘贴到能在你电脑上工作的 AI(如 Claude Code、Cursor)。它会读取我们的步骤,先给你看命令,等你同意。无需密钥,无需注册。 · 查看 AI 会读取的全文

通过 3/3 项检查 · 在你的电脑上运行 · ✓ 命令已检查 2026年11月20日

第一步:你用哪个 AI?

选择你用的应用,步骤会显示在下方。

可连接 Claude,但需要先准备

需要先在电脑上安装 Python (uv)(只需一次) · 仅限电脑上的 Claude 应用(Windows 或 Mac),网页和手机不可用

让 AI 帮你安装

把这段话复制到 Claude 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。

请在这台电脑上为 Claude 安装 MCP server vidx,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):{ "mcpServers": { "vidx": { "command": "uvx", "args": [ "vidx", "mcp" ] } } } 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 vidx 的工具真的出现了。

这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。

  1. 安装 uv(如果还没有)

    已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter

    uv --version
    • 显示版本号(例如 uv …)= 已安装,可跳过这一步
    • 显示 "command not found"(Windows 显示 "is not recognized")= 还没安装,或刚装好但需要关掉终端再重新打开
    怎么打开终端

    Mac:按 ⌘ + Space,输入 Terminal 后按 Enter

    Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”

    还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载

    打开 uv 下载页 ↗

    装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version

    安装一次,所有需要 uv 的工具都能用

  2. 打开电脑版 Claude 应用的设置文件

    SettingsDeveloperEdit Config

  3. 粘贴这些设置并保存文件

    {
      "mcpServers": {
        "vidx": {
          "command": "uvx",
          "args": [
            "vidx",
            "mcp"
          ]
        }
      }
    }
  4. 退出 Claude 再重新打开

  5. 试一试

    用 vidx 告诉我你能帮我做什么,然后做一件给我看

    ✓ 如果 Claude 说正在使用 vidx,或回答中出现 vidx 的工具名称,就表示连接成功

菜单名称已于 2026年11月11日 对照 Anthropic 帮助页面核实 · 你的界面可能因版本略有不同

ChatGPT 暂时无法连接 vidx

vidx 需要安装在你的电脑上,而 ChatGPT 只能连接在网上运行的服务器

你可以改用这些方式

A · 使用能连接 vidx 的应用

  • 需要先在电脑上安装 Python (uv)(只需一次) · 仅限电脑上的 Claude 应用(Windows 或 Mac),网页和手机不可用
  • 需要先在电脑上安装 Python (uv)(只需一次)
  • 需要先在电脑上安装 Python (uv)(只需一次)
  • 需要先在电脑上安装 Python (uv)(只需一次)

B · 设计、图片与音频 类中能连接 ChatGPT 的其他服务器

从同类中使用较多的里挑选,仅限用地址即可连接、无需密钥的

可连接 Claude Code,但需要先准备

需要先在电脑上安装 Python (uv)(只需一次)

让 AI 帮你安装

把这段话复制到 Claude Code 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。

请在这台电脑上为 Claude Code 安装 MCP server vidx,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):claude mcp add --scope user vidx -- uvx vidx mcp 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 vidx 的工具真的出现了。

这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。

  1. 安装 uv(如果还没有)

    已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter

    uv --version
    • 显示版本号(例如 uv …)= 已安装,可跳过这一步
    • 显示 "command not found"(Windows 显示 "is not recognized")= 还没安装,或刚装好但需要关掉终端再重新打开
    怎么打开终端

    Mac:按 ⌘ + Space,输入 Terminal 后按 Enter

    Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”

    还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载

    打开 uv 下载页 ↗

    装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version

    安装一次,所有需要 uv 的工具都能用

  2. 打开终端

    Mac:按 Command+空格,输入 Terminal · Windows:打开 PowerShell

  3. 粘贴这条命令并按 Enter

    claude mcp add --scope user vidx -- uvx vidx mcp
  4. 在 Claude Code 中输入 /mcp

    应能看到 vidx 在列表中并显示已连接

  5. 试一试

    用 vidx 告诉我你能帮我做什么,然后做一件给我看

    ✓ 如果 Claude Code 说正在使用 vidx,或回答中出现 vidx 的工具名称,就表示连接成功

菜单名称已于 2026年11月11日 对照 Anthropic 帮助页面核实 · 你的界面可能因版本略有不同

可连接 Cursor,但需要先准备

需要先在电脑上安装 Python (uv)(只需一次)

让 AI 帮你安装

把这段话复制到 Cursor 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。

请在这台电脑上为 Cursor 安装 MCP server vidx,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):{ "mcpServers": { "vidx": { "command": "uvx", "args": [ "vidx", "mcp" ] } } } 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 vidx 的工具真的出现了。

这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。

  1. 安装 uv(如果还没有)

    已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter

    uv --version
    • 显示版本号(例如 uv …)= 已安装,可跳过这一步
    • 显示 "command not found"(Windows 显示 "is not recognized")= 还没安装,或刚装好但需要关掉终端再重新打开
    怎么打开终端

    Mac:按 ⌘ + Space,输入 Terminal 后按 Enter

    Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”

    还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载

    打开 uv 下载页 ↗

    装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version

    安装一次,所有需要 uv 的工具都能用

  2. 点击这个按钮打开 Cursor

    在 Cursor 中打开

    Cursor 会请你确认安装,点击 Install

  3. 在 Cursor 中以 Agent 模式打开 AI 聊天

  4. 试一试

    用 vidx 告诉我你能帮我做什么,然后做一件给我看

    ✓ 如果 Cursor 说正在使用 vidx,或回答中出现 vidx 的工具名称,就表示连接成功

菜单名称已于 2026年11月11日 对照 Cursor 帮助页面核实 · 你的界面可能因版本略有不同

可连接 VS Code,但需要先准备

需要先在电脑上安装 Python (uv)(只需一次)

让 AI 帮你安装

把这段话复制到 VS Code 的对话里。AI 会先检查电脑,告诉你要改哪个文件,并且每次都等你同意。

请在这台电脑上为 VS Code 安装 MCP server vidx,按顺序:1) 用 uv --version 检查是否有 uv。没有的话,请让我从 https://docs.astral.sh/uv/getting-started/installation/ 安装,不要自己安装。2) 只使用这份配置(已通过 PopNx MCP 检查):{ "servers": { "vidx": { "type": "stdio", "command": "uvx", "args": [ "vidx", "mcp" ] } } } 3) 告诉我要修改的文件完整路径或要运行的命令,等我同意。4) 不需要密钥。5) 按约定执行,然后确认 vidx 的工具真的出现了。

这段话不包含你的密钥。如果需要密钥,AI 会请你自己粘贴到文件或应用的输入框里。

  1. 安装 uv(如果还没有)

    已经装好了吗?先检查 · 打开终端,输入这条命令后按 Enter

    uv --version
    • 显示版本号(例如 uv …)= 已安装,可跳过这一步
    • 显示 "command not found"(Windows 显示 "is not recognized")= 还没安装,或刚装好但需要关掉终端再重新打开
    怎么打开终端

    Mac:按 ⌘ + Space,输入 Terminal 后按 Enter

    Windows:打开“开始”菜单,输入 Windows PowerShell,然后选“打开”

    还没安装: uv 没有点选式安装程序。从 uv 官方页面复制适合你系统(macOS 或 Windows)的一行命令,粘贴到终端 · 不需要单独安装 Python,uv 会在需要时自动下载

    打开 uv 下载页 ↗

    装好后关掉终端再打开,重新运行同一条命令,应显示版本号: uv --version

    安装一次,所有需要 uv 的工具都能用

  2. 点击这个按钮打开 VS Code

    在 VS Code 中打开

    VS Code 会请你确认安装,点击 Install

  3. 在 VS Code 中以 Agent 模式打开 AI 聊天

  4. 试一试

    用 vidx 告诉我你能帮我做什么,然后做一件给我看

    ✓ 如果 VS Code 说正在使用 vidx,或回答中出现 vidx 的工具名称,就表示连接成功

菜单名称已于 2026年11月11日 对照 VS Code 帮助页面核实 · 你的界面可能因版本略有不同

其他支持 MCP 的应用(如 Windsurf、Zed、Gemini CLI)添加方式各不相同,请在应用列表中查看

查看所有支持 MCP 的应用 →

JSON 设置在下方“开发者专用”中

卡住了?问问正在用 vidx 的人💬 讨论 →
开发者专用:终端命令和 JSON 设置

安装在电脑上

Claude Code

claude mcp add --scope user vidx -- uvx vidx mcp

Claude Desktop (claude_desktop_config.json)

{
  "mcpServers": {
    "vidx": {
      "command": "uvx",
      "args": [
        "vidx",
        "mcp"
      ]
    }
  }
}

Cursor (~/.cursor/mcp.json)

{
  "mcpServers": {
    "vidx": {
      "command": "uvx",
      "args": [
        "vidx",
        "mcp"
      ]
    }
  }
}

VS Code (mcp.json)

{
  "servers": {
    "vidx": {
      "type": "stdio",
      "command": "uvx",
      "args": [
        "vidx",
        "mcp"
      ]
    }
  }
}

这些设置是根据作者在注册中心的条目生成的。如果 README 的写法不同,请以 README 为准。

一览

每周下载量i
113/周
连接方式
在你的电脑上运行
最新版本i
0.2.1
发布到注册中心i
2026年11月20日
代码最后更新i
2026年11月20日
作者
renjithrrkj
软件包
pypi: vidx
注册状态
活跃

哪些应用可以使用它

依据这个服务器的连接方式和各应用自己的文档,检查于 2026年11月10日。

在你的电脑上运行,适用于

ClaudeGooseLM StudioMsty StudioCherry StudioCursorVS Code + GitHub CopilotVisual StudioWindsurf (Devin Desktop)ZedKiroClineContinueJetBrains AI AssistantClaude CodeCodex CLIGemini CLIOpenCodenodecodeWarpLibreChatRaycast

全部应用及其优缺点 →

它能做什么

它在你的电脑上运行;安装后,工具列表会显示在你的 AI 应用中。

基础检查i

我们检查的是任何人都能看到的信息;我们没有阅读代码。不适用的检查项不计入总数。 · 检查于 2026年11月20日

  • ✓ 通过

    作者与仓库一致

    注册名称已通过 GitHub 账户 renjithrrkj 验证,该账户拥有此仓库

  • ✓ 通过

    仍在维护

    代码最后更新于今天

  • ✓ 通过

    有许可证

    使用 MIT

  • – 不适用

    端点有响应

    它在你的电脑上运行,没有互联网端点

  • – 不适用

    使用 OAuth 登录

    在你的电脑上运行,改用本地设置

  • … 尚未检查

    工具描述中没有隐藏指令

    它在你的电脑上运行;我们只能读取互联网端点的工具列表

已公开的漏洞(OSV.dev)

OSV.dev 中没有 vidx@0.2.1 的记录

只检查这个版本的包本身,不包括所有依赖 · 检查于 2026年11月20日

我们检查什么 → · JSON

作者:申请重新检查或报告信息错误
给作者:在 README 中加徽章

如果你是作者,可把这段代码贴到 README。徽章会链接回本页。

[![Featured on PopNx MCP](https://mcp.popnx.com/badge/renjithrrkj-vidx.svg)](https://mcp.popnx.com/en/servers/renjithrrkj-vidx)

讨论

提问、分享技巧或报告无法使用。按“有帮助”数量排序。

还没有帖子,欢迎第一个提问或分享。

此处内容由用户撰写,不代表 PopNx 团队。

登录后发帖

用户评价

还没有评价

登录后写评价

与“设计、图片与音频”中的其他服务器比较i

  • 星标数多于此分类中其他 3358 个服务器的 0%
  • 发布到注册中心的时间比此分类中其他 3358 个服务器的 99% 更新
  • 基础检查结果等于或优于此分类中其他 3358 个服务器的 99%

与注册中心里这个分类中所有活跃的服务器比较。只有当发布者拥有该仓库时,星标数才计入。

常见问题

vidx 安全吗?

它在 3 项适用的基础检查中通过了 3 项。我们没有阅读代码。在添加密钥或令牌之前,请先看看这个服务器要求哪些权限,并使用只具备所需权限的密钥。

它需要哪些密钥或代码?

注册中心没有列出必需的密钥,不过有些服务器会在首次使用时要求你登录。

它在我的电脑上运行还是在云端?

它在你的电脑上运行。你的 AI 应用会在需要时启动它,数据不会经过作者的服务器(除非它自己调用在线服务)。

它还在维护吗?

GitHub 仓库最后更新于今天,最新版本(0.2.1)于今天进入注册中心。

哪些应用可以使用它?

支持 MCP 的应用,例如 Claude Desktop、Claude Code、Cursor 和 VS Code。你的电脑上还需要有 Python (uv)。

有什么可以替代它?

同一分类中有:HyperFrames by HeyGen, Pascal 3D Editor, draw.io, Figma MCP Server, Remocn: Remotion MCP server

功能相近的其他选择

同一分类、其他作者、命令已通过检查。官方的排在前面,再按星标排序。

如何看卡片:↓ 每周下载量i★ GitHub 星标i三大支柱:评价 · 检查 · 使用情况i更新 = 最新版本发布到注册中心的时间i

Pascal 3D Editor

Create, inspect, validate, and save editable 3D building scenes with Pascal's MCP server.

作者:pascalorg广泛使用↓ 1037/周★ 2.6万 整个仓库的星标前天更新

电脑或云端✓ 服务方 · pascal.app

draw.io

Create draw.io diagrams in chat from Mermaid or XML, shown live and interactive. 10,000+ shapes.

作者:jgraph广泛使用★ 58603天前更新

在云端运行✓ 服务方 · draw.ioPopNx 团队已实际试用

Figma MCP Server

The Figma MCP server brings Figma design context directly into your AI workflow.

作者:figma广泛使用★ 221313个月前更新

在云端运行✓ 服务方 · mcp.figma.com
与相似项目对比
本项
vidx
HyperFrames by HeyGenPascal 3D Editordraw.ioFigma MCP ServerRemocn: Remotion MCP server
运行位置需要安装在电脑上在云端运行,无需安装云端或安装在电脑上都可以在云端运行,无需安装在云端运行,无需安装在云端运行,无需安装
需要密钥否否否否否否
可在 Claude 中按 + 添加否是否否是否
基础检查3/34/45/54/44/44/4
许可证MITApache-2.0MITApache-2.0–MIT
价格登记中未列出费用登记中未列出费用登记中未列出费用登记中未列出费用登记中未列出费用登记中未列出费用

作者的 README

打开 README

按原文从作者的仓库复制。PopNx MCP 没有审查或背书其内容。HTML、图片和脚本已被移除。链接会离开本站。

vidx

Let AI agents edit video without burning tokens on frames.

For an agent to "watch" a 10-minute video at 1 frame per second costs ~67,000 tokens; an hour is ~400,000. vidx watches it once, locally, and gives the agent a compact text map instead: exact shots, keyframes, motion and colour per shot, on-screen text and watermarks, a transcript, speech/music/sfx stretches, beats, and text-searchable visuals. The agent reads a ~600-token overview, searches what it needs, edits with a few lines of script or a timeline file, previews at 480p, renders only what changed, and runs automatic QA. Pixels reach the agent only when it explicitly asks to look (peek).

Runs 100% locally. No paid APIs. Works with any MCP agent (Claude Code, Claude Desktop, …).

Measured on 3 real videos (8, 10, 60 min)transcript + framesvidx
Get the gist of the video7k–17k tokens~650–930
Find a moment, read it, look at it7k–17k~1.4k–1.8k
Cut dead air, render, QA3k–8k~0.8k–1k
Overview of a 10-min vs 60-min videogrows with length507 vs 564

6–18× fewer tokens in these tests, and the gap widens with longer video. Details, method and the cases where it does *not* win: TOKEN_REPORT.md.

Quickstart (Claude Code)

You need ffmpeg and uv:

brew install ffmpeg uv          # Linux: apt install ffmpeg, then curl -LsSf https://astral.sh/uv/install.sh | sh

Then install the plugin inside Claude Code. It adds the server and a skill that tells Claude how to use it:

/plugin marketplace add renjithrrkj/vidx

/plugin install vidx@vidx

Or add just the server: claude mcp add vidx -- uvx vidx mcp. Other MCP clients can find vidx in the MCP Registry as io.github.renjithrrkj/vidx.

No clone needed. Then ask your agent something like *"index ~/Movies/talk.mp4, cut the dead air and make a 9:16 reel of the part where I talk about pricing"*.

The first index downloads Whisper small (~460 MB) and CLIP ViT-B-32 (~600 MB); run vidx setup to fetch them ahead of time. After that vidx never touches the network. The shot detector, OCR and speech detector ship inside their packages. Set VIDX_MODEL_DIR to keep all weights in one folder you can copy. Indexing costs CPU time, not tokens, and stays around 1 GB of RAM.

Claude Desktop / other MCP clients: add to your MCP config (desktop apps don't inherit your shell PATH, so give full paths):

"mcpServers": {

"vidx": { "command": "/full/path/to/uvx", "args": ["--from", "git+https://github.com/renjithrrkj/vidx", "vidx-mcp"], "env": { "PATH": "/opt/homebrew/bin:/usr/local/bin:/usr/bin:/bin" } } }

From source (to hack on it):

git clone https://github.com/renjithrrkj/vidx && cd vidx && uv sync

claude mcp add vidx -- uv run --directory "$PWD" vidx-mcp

Tested on macOS (Apple silicon). Linux should work (CPU/CUDA); Windows is untested.

The tools

ToolWhat it returns
index_video(path, force, captions, glitch)video_id, duration, shots, language, short summary
overview(video_id, level, limit, offset)table of contents (scenes cover the whole video in ≤limit lines)
query(video_id, text, kind, limit)ranked time ranges: speech / visual (CLIP) / on-screen text / event (silence>1.5, music, sfx, beat, laugh, glitch, unclear)
get_segment(video_id, start, end, fields)words, events, shots for one range (wordtimes = per-word stamps; detail = motion curve and peak, colour, audio level, keyframes, text boxes)
peek(target, times, size, grid)image: one contact sheet, ≤4×4 labeled tiles. times=["cuts"] on a version = both sides of every cut + a colour strip of all clips
edit(video_id, dsl, parent_version)DSL or a JSON timeline; version id, segment count, output duration, warnings, timeline file path
render(version_id, preset, out_path, preview)output path, duration, size, pieces encoded vs reused. preview=true = fast 480p
check(version_id)QA report ≤15 lines, OK when clean
diff(version_a, version_b)added / removed / moved source ranges, duration delta

Edit DSL

base all              # start from the full video (default) | base none

drop 30.0-31.2 # remove a time range (also 1:02.5 style) drop s7 # remove a shot (or s7-s9) drop silence>1.2 # remove every silence longer than 1.2s (also: black, freeze, loud) keep 120.0-150.0 # add a range (with base none; line order = output order) keep s3 snap words # move cut points out of words into the nearest gap pad 0.15 # handles around kept segments (never into a neighbouring word) trans xfade 0.3 # crossfade at every join (default: hard cut) crop 9:16 center speed 1.1 match s3 0.8 # colour-match every clip to shot s3 (or a time), strength 0-1 caption 3.0 2.5 Some text # output time, duration, text still photo.jpg 3.0 at 12.5 motion zoom_in fit cover # a still as a clip; at end also works overlay logo.png 3.0 2.5 pos top_right width 0.2 fade 0.3 motion slide_left # image layer; all = to the end sfx impact_01 at 3.2 gain -6 # bundled sound at output time 3.2 music drone_02 gain -18 # bundled bed under the whole edit

Typical dead-air cleanup: drop silence>1.0 / snap words / pad 0.1. edit(..., parent_version="v3") appends to v3's script, so fixes from check are one-liners.

Images

A still is a clip: transitions, captions and check treat it like footage. It has no sound, so add music under it. Motions: none zoom_in zoom_out pan_left pan_right pan_up pan_down. fit cover fills the frame, fit contain shows the whole picture with bars. at is a time in the edit without stills, so adding one doesn't move the others.

An overlay is an image on top of the picture and under captions. Transparent PNGs stay transparent, and a layer can span cuts and transitions. pos is top_left top top_right left center right bottom_left bottom bottom_right or x,y as 0-1 of the frame, width is a share of the frame, and motion is none slide_left slide_right slide_up slide_down.

Anything Pillow reads works (jpg, png, webp). Quote paths with spaces. vidx keeps an upright copy in ~/.vidx/images, so phone photos aren't sideways and an edit still renders if the original moves. In a timeline file, use {"image": "/path/photo.jpg", "for": 3, "motion": "zoom_in"} as a clip, and "overlays": [...] on any clip.

Cuts

So an edit doesn't feel like one trick repeated, vidx has 27 named cuts (vidx cuts lists them):

  • Editorial: hard, smash (with an impact hit), punch_in / punch_big (zoom that hides a jump cut), j_cut / l_cut (sound leads or trails the picture).
  • Transitions: dissolve, dissolve_slow, dip_black, dip_white, flash, whip_left/right/up, zoom, blur, wipe, smooth, cover, reveal, iris, radial, squeeze, slices, wind, pixel, gray_fade.
cuts hype        # a style pack picks each cut from what happens at that join

cuts hype 7 # same pack, different roll cut 3 smash # set one join cut whip_left # set all joins

Packs: clean, documentary, comedy, hype, trailer. They look at each join: same shot on both sides (a jump cut, so punch in), speech crossing it (bridge with a J or L cut), fast motion (whip), a big colour change (dip or flash). They never repeat an effect twice in a row, and hard cuts stay the most common.

Train your own detector

Teach vidx a moment it doesn't know, from time ranges you label:

uv run vidx teach knockdown --pos abcd1234:12-14,abcd1234:88-90,ef012345:30-33 --neg abcd1234:50-70,ef012345:0-20,ef012345:40-60

This trains a small new layer (about 500 weights) on frozen CLIP embeddings plus motion, in under a minute. It reports precision and recall on held-out ranges. Then query(video_id, "knockdown") finds it in any video. When it gets something wrong, add that range to --neg and teach again. Use several videos: a detector taught on one video may learn that video rather than the idea. It sees one frame per second plus motion, so it suits things visible in a frame or a burst of movement, not a split-second contact.

Timeline files

Every edit, DSL or not, compiles to one JSON timeline, saved as ~/.vidx/ /v .timeline.json. Change it and pass it back with edit(id, "@/path/to/file.json"), or write one directly for per-clip control:

{"clips": [

{"in": 12.0, "out": 18.5, "captions": [{"at": 0.5, "for": 2, "text": "Hello"}]}, {"in": 40.0, "out": 44.0, "video": "other_video_id", "speed": 1.2, "grade": {"contrast": 1.05, "match": {"from": 12, "to": 18}}, "transition": {"type": "xfade", "dur": 0.3}}, {"in": 90.0, "out": 95.0}], "audio": [{"sfx": "impact_01", "at": 3.2, "gain": -6}, {"music": "drone_02", "gain": -18}]}

Rendering caches each clip and each transition in ~/.vidx/cache (5 GB, VIDX_CACHE_GB). Change one shot and only that shot re-encodes; the rest is a stream copy. Renders land in vidx_renders/ next to the source (VIDX_OUTPUT_DIR to override).

Sounds: drone_01-06, impact_01-06, riser_01-05, whoosh_01-03. All synthesized by scripts/make_sfx.py, so they ship under this repo's MIT license.

Presets: original (as is), reel_9x16 (1080×1920, −16 LUFS, ≤90 s), yt_16x9 (1920×1080, −14 LUFS).

CLI (same output as the tools)

uv run vidx index ~/Movies/talk.mp4

uv run vidx overview 5450c7a6 uv run vidx query 5450c7a6 "whiteboard diagram" --kind visual uv run vidx segment 5450c7a6 120 150 uv run vidx peek 5450c7a6 "12.5,s3,40" --out sheet.jpg uv run vidx edit 5450c7a6 "drop silence>1.0;snap words;pad 0.1" uv run vidx render v1 --preset reel_9x16 --preview uv run vidx render v1 --preset reel_9x16 uv run vidx peek v1 cuts --out cuts.jpg uv run vidx cuts # the cut library uv run vidx check v1 uv run vidx diff v1 v2 uv run vidx usage # characters returned per call (~tokens)

Optional extras

  • uv sync --extra captions → index_video(..., captions=true) adds Florence-2 one-line shot captions.
  • uv sync --extra otio → every render also writes a .otio timeline (opens in Resolve / Premiere).
  • laugh events (heuristic audience-reaction detector) run by default: query(id, "laugh").
  • index_video(..., glitch=true) scans AI-generated clips for morphing and reports the last clean frame. These are suspects to confirm with peek: expect about one false alarm per handheld phone clip.

Measured (Apple M1, 8 GB, CPU whisper + MPS CLIP)

VideoIndex timeOverview size
10:00 1080p vertical stand-up set (1 take, Malayalam)shots 71 s, visual 23 s, transcript 120 s, audio 64 s ≈ 4.6 min2.6k chars (~650 tok)
7:51 720p short film (124 shots, letterboxed, Malayalam)2.6 min (+5 min with captions)3.0k chars (~760 tok)

A whole session on the 10-min video (23 calls: overviews, queries, segments, edits, 2 peeks) returned ~9.4k chars, roughly 2.3k tokens of text. Rendering the 9:41 silence-cut at 1080×1920 takes ~3 min, a 54 s reel ~10 s.

Malayalam and other languages that Whisper-small transcribes badly are indexed as an English translation (flagged in the summary). Set VIDX_WHISPER_MODEL=large-v3 for native-script transcripts.

A false start followed by a retake can get merged by whisper into one segment, leaving several seconds of real speech with no words and one word stretc

只显示了开头部分;其余内容请在仓库中阅读