Prototyp · Vorschau: alle Server aus der offiziellen Registry, alle 30 Minuten synchronisiert. Mit Google anmelden, um Bewertungen zu schreiben.Prototyp · alle 30 Min. aktualisiert
PopNx MCPMCP-Server für alle, die KI nutzen · in einfachen Worten erklärt Anmelden

twelveswaras

von twelveswarasVersion 1.1.1i★ 0iComputer oder CloudOffizielle Website ↗
Name in der Registryio.github.sathya-sankaran/twelveswaras

So installierst du es

Was es kann

Identify the raaga in Carnatic or Hindustani music; look up 70 raagas' scales and notes.

Originaltext des Herstellers

  • Verbindung Computer oder Cloud
  • Konto oder Schlüssel Kein Schlüssel nötig
  • Kategorie Design, Bilder & Audio

Zusammen nutzen mit

Skills, die der KI diese Art Arbeit beibringen; sie funktionieren zusammen mit diesem

impeccable

The design vocabulary for your coding agent. Steer with polish and bolder, review with critique and audit, catch AI slop before it ships.

von pbakaus★ 113.0421 Skills

Skill · Anleitung

diagram-design

Editorial diagram design for Claude Code, Codex, GitHub Copilot, Cursor, Factory Droid, Qoder, and Pi. 45 diagram types. Self-contained HTML + SVG. No shadows. No Mermaid slop.

von cathrynlavery★ 68.2961 Skills

Skill · Anleitung

frontend-slides

Create beautiful slides on the web using a coding agent's frontend skills

von zarazhangrui★ 32.5791 Skills

Skill · Anleitung

Warum es hier steht

Listen sind nach einem Nutzungswert (von 100) aus diesen Teilen sortiert

Beliebtheit0/80GitHub-Sterne oder wöchentliche Downloads: der größere Wert zählt 60, der kleinere 20
Aktualität12/12Volle Punkte für Release oder Codeänderung in 30 Tagen
Antwortet noch8/8Der Cloud-Endpoint antwortete bei der letzten Prüfung
Nutzungswert20/100

Qualität: 4/5 Basisprüfungen bestanden (angezeigt, nicht zur Sortierung) · Schwung: Noch keine Daten (Nur im Tab Im Trend verwendet)

Installation

Wähle die KI-App, die du nutzt, und kopiere die Einstellungen.

Mit einem Satz von deiner KI installieren lassen

Installiere bitte twelveswaras. Folge https://mcp.popnx.com/i/sathya-sankaran-twelveswaras.md, zeig mir die Befehle und warte auf mein OK, bevor du sie ausführst.

Füge ihn in eine KI ein, die auf deinem Rechner arbeitet (z. B. Claude Code oder Cursor). Sie liest unsere Schritte, zeigt dir die Befehle und wartet auf dein OK. Kein Schlüssel, keine Anmeldung. · Vollständigen Text ansehen

4/5 Prüfungen bestanden · Was du fragst, läuft über den Server des Anbieters (twelveswaras.com) · ✓ Befehle geprüft am 18. Nov. 2026

Zuerst: Welche KI nutzt du?

Wähle deine App, dann erscheinen die Schritte unten.

Klappt mit Claude · etwa 2 Min.

Kein Schlüssel, nichts zu installieren · Einmal auf claude.ai oder in der Desktop-App einrichten, dann im Chat nutzen · kostenlose Konten können 1 hinzufügen · bei Team/Enterprise fügt ein Owner ihn hinzu

  1. Öffne die Connectors-Seite von Claude

    CustomizeConnectors

    CustomizeConnectors1Add2https://…3Add4
  2. Klicke „Add“ → „Custom“ → „Web“ und fülle diese 2 Felder aus

    Kopiere jeden Wert in das gleichnamige Feld in Claude und klicke Continue

    Name · Nametwelveswaras
    Remote MCP server URL · Adressehttps://twelveswaras.com/mcp

    Klicke auf der von Claude erkannten Anmelde-Seite auf Continue · wähle bei Authentication, was der Anbieter angibt (Sign in now, Sign in when needed oder No sign in), dann Add

  3. Im Chat einschalten

    +Connectorstwelveswaras

  4. Ausprobieren

    Nutze twelveswaras und sag mir, was du für mich tun kannst; zeig mir dann eine Sache

    ✓ Wenn Claude sagt, dass es twelveswaras nutzt, oder ein Werkzeug von twelveswaras in der Antwort zeigt, bist du verbunden

Menünamen am 11. Nov. 2026 mit der Hilfe von Anthropic abgeglichen · dein Bildschirm kann je nach App-Version leicht abweichen

Klappt mit ChatGPT je nach Tarif

Volles MCP: ChatGPT Business, Enterprise oder Edu im Web · Pro: verbindet mit Lese-/Abrufrechten, Werkzeuge, die Daten ändern, gehen evtl. nicht · Plus: in der Doku nicht bestätigt; siehst du auf der Plugins-Seite eine Option für eigene MCP-Server, kannst du es versuchen · nur Web

  1. In ChatGPT im Web die Seite zum Hinzufügen von MCP öffnen

    Plugins+Add custom MCP server

    ChatGPTPlugins1+2https://…3Create4
  2. Name und Adresse eintragen

    Namen eingeben, Adresse unter Connection einfügen, Risikohinweis abhaken und Create as a plugin klicken

    Name · Nametwelveswaras
    Connection · Adressehttps://twelveswaras.com/mcp
  3. twelveswaras im Chat auswählen

    Neuen Chat öffnen und vor dem Tippen twelveswaras aus deinen Plugins wählen

  4. Ausprobieren

    Nutze twelveswaras und sag mir, was du für mich tun kannst; zeig mir dann eine Sache

    ✓ Wenn ChatGPT sagt, dass es twelveswaras nutzt, oder ein Werkzeug von twelveswaras in der Antwort zeigt, bist du verbunden

Menünamen am 11. Nov. 2026 mit der Hilfe von OpenAI abgeglichen · dein Bildschirm kann je nach App-Version leicht abweichen

Klappt mit Claude Code · etwa 2 Min.

Kein Schlüssel, nichts zu installieren

  1. Terminal öffnen

    Mac: Command+Leertaste drücken und Terminal tippen · Windows: PowerShell öffnen

  2. Diesen Befehl einfügen und Enter drücken

    claude mcp add --transport http --scope user twelveswaras https://twelveswaras.com/mcp
  3. /mcp in Claude Code eingeben

    twelveswaras sollte in der Liste als verbunden erscheinen

  4. Ausprobieren

    Nutze twelveswaras und sag mir, was du für mich tun kannst; zeig mir dann eine Sache

    ✓ Wenn Claude Code sagt, dass es twelveswaras nutzt, oder ein Werkzeug von twelveswaras in der Antwort zeigt, bist du verbunden

Menünamen am 11. Nov. 2026 mit der Hilfe von Anthropic abgeglichen · dein Bildschirm kann je nach App-Version leicht abweichen

Klappt mit Cursor · etwa 2 Min.

Kein Schlüssel, nichts zu installieren

  1. Mit diesem Button Cursor öffnen

    In Cursor öffnen

    Cursor fragt nach einer Bestätigung; klicke Install

  2. KI-Chat in Cursor im Agent-Modus öffnen

  3. Ausprobieren

    Nutze twelveswaras und sag mir, was du für mich tun kannst; zeig mir dann eine Sache

    ✓ Wenn Cursor sagt, dass es twelveswaras nutzt, oder ein Werkzeug von twelveswaras in der Antwort zeigt, bist du verbunden

Menünamen am 11. Nov. 2026 mit der Hilfe von Cursor abgeglichen · dein Bildschirm kann je nach App-Version leicht abweichen

Klappt mit VS Code · etwa 2 Min.

Kein Schlüssel, nichts zu installieren

  1. Mit diesem Button VS Code öffnen

    In VS Code öffnen

    VS Code fragt nach einer Bestätigung; klicke Install

  2. KI-Chat in VS Code im Agent-Modus öffnen

  3. Ausprobieren

    Nutze twelveswaras und sag mir, was du für mich tun kannst; zeig mir dann eine Sache

    ✓ Wenn VS Code sagt, dass es twelveswaras nutzt, oder ein Werkzeug von twelveswaras in der Antwort zeigt, bist du verbunden

Menünamen am 11. Nov. 2026 mit der Hilfe von VS Code abgeglichen · dein Bildschirm kann je nach App-Version leicht abweichen

Andere Apps mit MCP, etwa Windsurf, Zed oder Gemini CLI, fügen Server unterschiedlich hinzu. Sieh in der App-Liste nach

Alle Apps mit MCP ansehen →

Adresse für Apps, die über das Web verbinden

Adressehttps://twelveswaras.com/mcp

JSON-Einstellungen stehen unten unter „Für Entwickler“

Hängst du fest? Frag Leute, die twelveswaras nutzen💬 Diskussion →
Für Entwickler: Terminal-Befehle und JSON-Einstellungen

Über das Web

Claude Code

claude mcp add --transport http --scope user twelveswaras https://twelveswaras.com/mcp

Cursor (~/.cursor/mcp.json)

{
  "mcpServers": {
    "twelveswaras": {
      "url": "https://twelveswaras.com/mcp"
    }
  }
}

VS Code (mcp.json)

{
  "servers": {
    "twelveswaras": {
      "type": "http",
      "url": "https://twelveswaras.com/mcp"
    }
  }
}

Auf deinem Computer installiert

Claude Code

claude mcp add --scope user twelveswaras -- npx -y twelveswaras

Claude Desktop (claude_desktop_config.json)

{
  "mcpServers": {
    "twelveswaras": {
      "command": "npx",
      "args": [
        "-y",
        "twelveswaras"
      ]
    }
  }
}

Cursor (~/.cursor/mcp.json)

{
  "mcpServers": {
    "twelveswaras": {
      "command": "npx",
      "args": [
        "-y",
        "twelveswaras"
      ]
    }
  }
}

VS Code (mcp.json)

{
  "servers": {
    "twelveswaras": {
      "type": "stdio",
      "command": "npx",
      "args": [
        "-y",
        "twelveswaras"
      ]
    }
  }
}

Diese Einstellungen werden aus dem Registry-Eintrag des Entwicklers erzeugt. Wenn in der README etwas anderes steht, folge der README.

Auf einen Blick

Downloads pro Wochei
Nicht auf npm/PyPI
Verbindung
Computer oder Cloud
Transport
stdio, streamable-http
Neueste Versioni
1.1.1
In der Registry veröffentlichti
18. Nov. 2026
Code zuletzt geänderti
18. Nov. 2026
Zuletzt geprüft
18. Nov. 2026
Entwickler
twelveswaras
Pakete
npm: twelveswaras
Registry-Status
Aktiv

Welche Apps ihn nutzen können

Basierend darauf, wie sich dieser Server verbindet, und auf der eigenen Doku jeder App, geprüft am 10. Nov. 2026.

Verbinden sich über das Internet in

ClaudeChatGPTGooseLM StudioMsty StudioCherry StudioCursorVS Code + GitHub CopilotVisual StudioWindsurf (Devin Desktop)ZedKiroClineContinueJetBrains AI AssistantClaude CodeCodex CLIGemini CLIOpenCodenodecodeWarpLibreChatOpen WebUIRaycast

Laufen auf deinem Computer in

ClaudeGooseLM StudioMsty StudioCherry StudioCursorVS Code + GitHub CopilotVisual StudioWindsurf (Devin Desktop)ZedKiroClineContinueJetBrains AI AssistantClaude CodeCodex CLIGemini CLIOpenCodenodecodeWarpLibreChatRaycast

Alle Apps, mit Vor- und Nachteilen →

Was er kann

Tool-Namen und -Beschreibungen genau so, wie der Server sie am 18. Nov. 2026 gemeldet hat. Geschrieben hat sie der Entwickler, nicht wir; wir zeigen sie als reinen Text.

  • find_raaga

    Look up a raaga by name, in any spelling (with or without diacritics, "raga"/"ragam"/"raag"). Returns its scale, parent, notes, key notes, songs, what it is confused with, and its page.

  • raagas_with_notes

    Find the raagas that use a set of notes: those whose scale is exactly these notes, and those whose notes include them. Carnatic labels (S R1 R2 G2 G3 M1 M2 P D1 D2 N2 N3) or Hindustani letters (S r R g G m M P d D n N: lowercase komal, M tivra).

  • list_raagas

    The 70 raagas twelveswaras knows (40 Carnatic, 30 Hindustani), with their parent and page.

  • identify_raaga

    Name the raaga in a recording of Carnatic or Hindustani music at a public http(s) URL (mp3, wav, m4a, ogg, webm; up to 25 MB). Returns the top three with confidence, the tonic (Sa) it heard, and each raaga's page. Best with a minute or more and a drone. The recording is not store

Basischecksi

Wir prüfen Informationen, die jeder sehen kann; den Code haben wir nicht gelesen. Checks, die nicht zutreffen, werden nicht mitgezählt. · Geprüft am 20. Nov. 2026

  • ! Vorsicht

    Entwickler passt zum Repo

    Der Herausgeber (sathya-sankaran) ist nicht der Repo-Inhaber (twelveswaras); vielleicht hat jemand anderes ihn eingetragen

  • ✓ Bestanden

    Wird noch gepflegt

    Code zuletzt geändert: vorgestern

  • ✓ Bestanden

    Hat eine Lizenz

    Nutzt MIT

  • ✓ Bestanden

    Endpunkt antwortet

    Antwort in 56 ms (HTTP 200)

  • – Nicht zutreffend

    Anmeldung mit OAuth

    Keine Anmeldung nötig

  • ✓ Bestanden

    Keine versteckten Anweisungen in Tool-Beschreibungen

    Wir haben 4 Tool-Beschreibungen gelesen und keine versteckten Anweisungen an die KI gefunden

Veröffentlichte Schwachstellen (OSV.dev)

Noch nicht geprüft

Was wir prüfen → · JSON

Entwickler: neue Prüfung anfordern oder falsche Angaben melden
Für Anbieter: Badge ins README

Wenn du das gebaut hast, füge diesen Code in dein README ein. Das Badge verlinkt auf diese Seite.

[![Featured on PopNx MCP](https://mcp.popnx.com/badge/sathya-sankaran-twelveswaras.svg)](https://mcp.popnx.com/en/servers/sathya-sankaran-twelveswaras)

Diskussion

Fragen, Tipps teilen oder melden, dass etwas nicht geht. Sortiert nach „hilfreich“.

Noch keine Beiträge. Stell die erste Frage oder teile einen Tipp.

Beiträge hier stammen von Nutzern, nicht vom PopNx-Team.

Anmelden, um zu posten

Nutzerbewertungen

Noch keine Bewertungen

Anmelden, um eine Bewertung zu schreiben

Im Vergleich mit anderen in Design, Bilder & Audioi

  • Mehr Sterne als 0 % der anderen 3322 Server in dieser Kategorie
  • Neuer in der Registry veröffentlicht als 94 % der anderen 3322 Server in dieser Kategorie
  • Basischecks gleich gut wie oder besser als bei 55 % der anderen 3322 Server in dieser Kategorie

Verglichen mit allen aktiven Servern dieser Kategorie in der Registry. Sterne zählen nur, wenn dem Herausgeber das Repo gehört.

Häufige Fragen

Ist twelveswaras sicher?

Er hat 4 von 5 zutreffenden Basischecks bestanden. Den Code haben wir nicht gelesen. Bevor du einen Schlüssel oder Token hinzufügst, sieh nach, welche Zugriffe der Server verlangt, und nutze einen Schlüssel, der nur die Berechtigungen hat, die du brauchst.

Welche Schlüssel oder Codes braucht er?

Die Registry nennt keinen erforderlichen Schlüssel, manche Server bitten dich aber bei der ersten Nutzung, dich anzumelden.

Läuft er auf meinem Computer oder in der Cloud?

Beides geht: Installiere ihn auf deinem Computer oder verbinde dich mit der Cloud-Version.

Wird er noch gepflegt?

Das GitHub-Repo wurde zuletzt vorgestern geändert, und die neueste Version (1.1.1) kam vorgestern in die Registry.

Welche Apps können ihn nutzen?

Apps, die MCP unterstützen, etwa Claude Desktop, Claude Code, Cursor und VS Code. Er verbindet sich per URL und funktioniert daher auch in Apps mit Remote-MCP, etwa ChatGPT im Web (volles MCP ab Business; Pro nur lesend).

Was kann ich stattdessen nutzen?

In derselben Kategorie: HyperFrames by HeyGen, Pascal 3D Editor, draw.io, Figma MCP Server, Remocn: Remotion MCP server

Ähnliche Alternativen

Gleiche Kategorie, andere Entwickler, Befehle bereits geprüft. Offizielle zuerst, dann nach Sternen.

So liest du eine Karte:↓ Downloads pro Wochei★ GitHub-SterneiDrei Säulen: Bewertungen · Checks · NutzungiAktualisiert = neueste Version in der Registry veröffentlichti

HyperFrames by HeyGen

Official HyperFrames by HeyGen: the best AI video editor in chat. Captions, motion graphics, MP4.

von heygen-comWeit verbreitet★ 86.798 Sterne des ganzen ReposAktualisiert vorgestern

Läuft in der Cloud✓ heygen.com

Pascal 3D Editor

Create, inspect, validate, and save editable 3D building scenes with Pascal's MCP server.

von pascalorgWeit verbreitet↓ 1037/Wo.★ 25.617 Sterne des ganzen ReposAktualisiert vorgestern

Computer oder Cloud✓ vom Dienst · pascal.app

draw.io

Create draw.io diagrams in chat from Mermaid or XML, shown live and interactive. 10,000+ shapes.

von jgraphWeit verbreitet★ 5860Aktualisiert vor 3 Tagen

Läuft in der Cloud✓ vom Dienst · draw.ioVom PopNx-Team ausprobiert

Figma MCP Server

The Figma MCP server brings Figma design context directly into your AI workflow.

von figmaWeit verbreitet★ 2213Aktualisiert vor 13 Monaten

Läuft in der Cloud✓ vom Dienst · mcp.figma.com

Remocn: Remotion MCP server

Hosted MCP for Remotion videos: search Remocn components, read docs, plan a video, preview it.

von RemocnWachsend★ 1804Aktualisiert vor 10 Tagen

Läuft in der Cloud✓ vom Dienst · remocn.dev
Im Vergleich mit ähnlichen
Dieser
twelveswaras
HyperFrames by HeyGenPascal 3D Editordraw.ioFigma MCP ServerRemocn: Remotion MCP server
Läuft woIn der Cloud oder auf deinem RechnerLäuft in der Cloud, keine InstallationIn der Cloud oder auf deinem RechnerLäuft in der Cloud, keine InstallationLäuft in der Cloud, keine InstallationLäuft in der Cloud, keine Installation
Braucht SchlüsselNeinNeinNeinNeinNeinNein
Mit + in Claude hinzufügenNeinJaNeinNeinJaNein
Basisprüfungen4/54/45/54/44/44/4
LizenzMITApache-2.0MITApache-2.0–MIT
PreisKeine Kosten im RegisterKeine Kosten im RegisterKeine Kosten im RegisterKeine Kosten im RegisterKeine Kosten im RegisterKeine Kosten im Register

README vom Entwickler

README öffnen

Unverändert aus dem Repo des Entwicklers übernommen. PopNx MCP hat den Inhalt weder geprüft noch empfiehlt es ihn. HTML, Bilder und Skripte wurden entfernt. Links führen von dieser Website weg.

twelveswaras

An open-source "Shazam for raagas": play it a clip of Carnatic or Hindustani music and it names the raaga, shows the tonic (Sa) it heard, and helps you learn to hear that raaga yourself.

Live: twelveswaras.com. The recognizer runs first-party on Cloudflare (Worker + container), with no third-party embed.

Status: live and recognizing 70 raagas (40 Carnatic, 30 Hindustani) from one

dual-tradition model. Hindustani is a preview: it has no real-world benchmark yet. The opt-in

contribute-to-the-commons loop is live for both traditions. twelveswaras is non-commercial and

open source, stewarded in the neutral twelveswaras GitHub

organisation, not owned by any company.

Contents

  • What it does
  • Features
  • Use it from an AI assistant (MCP)
  • Run it locally / command line
  • Open data
  • How it works
  • Accuracy
  • Project layout
  • Development
  • Deploy
  • Contributing
  • Citing this work
  • Licensing
  • Acknowledgements

What it does

Play about a minute of Carnatic or Hindustani music to twelveswaras.com, from the microphone or an uploaded recording. It shows the top three raagas with calibrated confidence and the tonic (Sa) it detected, and links to that raaga's page so you can learn to hear it. Below a confidence threshold it says "not sure" and invites you to teach it the raaga instead.

Why "twelveswaras"? The twelve swaras are the twelve note-positions of the octave, the shared alphabet of both Carnatic and Hindustani music. The name, schema and pipeline are tradition-neutral on purpose: Carnatic came first, but nothing locks the project to one tradition.

How it differs from Shazam. Shazam does audio *fingerprinting*: it matches a specific recording. twelveswaras does audio *classification*: it infers the musical structure (the raaga) of any performance, including one it has never heard. That is a Music Information Retrieval problem, not a lookup.

Features

  • Recognizer: 70 raagas (40 Carnatic, 30 Hindustani) from one model, with the top three, the tonic, and an honest "not sure" below a confidence threshold. On a live listen it shows no raaga name for the first minute, because answers before then are right only about half the time.
  • Raaga Explorer (/raaga/): a page per raaga, the 40 Carnatic raagas grouped by parent melakarta and the 30 Hindustani raagas by thaat, so allied raagas sit side by side. Each page has a playable swara wheel, the scale, and how to hear it.
  • Train your ear (/listen/): an ear-training game for Carnatic raagas that runs in the browser: hear a scale, guess the raaga.
  • Contribute to the commons (/contribute/): donate a clip after identifying it, or record one directly. Rights-gated, anonymous by default, and the audio stays private unless you release it under CC-BY-4.0.
  • MCP server at https://twelveswaras.com/mcp for AI assistants.
  • Open data and model weights under CC-BY-4.0.

Use it from an AI assistant (MCP)

twelveswaras is a remote MCP server at `https://twelveswaras.com/mcp` (Streamable HTTP, no sign-in). Add it as a remote or custom connector in Claude, ChatGPT, Cursor or any MCP client. It is published in the official MCP Registry as io.github.sathya-sankaran/twelveswaras (the entry is server.json).

ToolWhat it does
find_raagaLook a raaga up by any spelling (Mohanam, Mōhanaṁ, Bhoop, "kalyani ragam"). Returns its scale, parent, notes, key notes, songs, what it is confused with, and its page.
raagas_with_notesThe raagas that use a set of notes, in Carnatic labels (S R2 G3 P D2) or Hindustani letters (S R G P D).
list_raagasThe 70 raagas (40 Carnatic, 30 Hindustani), with their parent and page.
identify_raagaThe raaga in a recording at a public http(s) URL (mp3, wav, m4a, ogg, webm; up to 25 MB): the top three with confidence, the tonic, and each raaga's page. The recording is not stored.

find_raaga, raagas_with_notes and list_raagas take an optional tradition (carnatic or hindustani). To see the tool list from a shell:

curl -s https://twelveswaras.com/mcp \

-H 'content-type: application/json' \ -H 'accept: application/json, text/event-stream' \ -d '{"jsonrpc":"2.0","id":1,"method":"tools/list"}'

The server is cloudflare/worker/src/mcp.js.

Run it locally / command line

The npm package twelveswaras is a command line and a local MCP server in one (Node 18+, no dependencies). It names the raaga in a recording on your own machine, which the hosted identify_raaga cannot (it needs a public URL):

npx -y twelveswaras identify concert.m4a              # top three, confidence, tonic, each raaga's page

npx -y twelveswaras identify concert.m4a --from 2:30 # skip applause or talk (needs ffmpeg) npx -y twelveswaras raaga mohanam npx -y twelveswaras notes "S R2 G3 P D2" npx -y twelveswaras list --tradition hindustani npx -y twelveswaras identify concert.m4a --format md | npx -y mdshare-mcp upload - # or --share

With no arguments it runs as a stdio MCP server with the same four tools, where identify_raaga also takes path, a file on this machine. For a desktop client:

{ "mcpServers": { "twelveswaras": { "command": "npx", "args": ["-y", "twelveswaras"] } } }

See cli/README.md.

Open data

Both files are CC-BY-4.0. Credit them as "twelveswaras (twelveswaras.com), CC-BY-4.0".

URLWhat it holds
/data/raaga-reference.jsonThe facts on the raaga pages for all 70 raagas: scales, parents and note sets (positions count semitones from Sa, 0 to 11).
/data/raagas.jsonThe 40 Carnatic raagas from the app's production guide, with the model's note sets. Records with reviewed=false are provisional.

The scales, parents and note sets were checked against published sources; the corrections and their sources are in raaga_corrections.json. They have not been reviewed by a musician, so corrections are welcome (see Contributing).

How it works

Fully automatic, with no input beyond the audio. METHODOLOGY.md has the full detail and citations.

  1. Predominant-melody pitch from the audio (Essentia PredominantPitchMelodia).
  2. Tonic (Sa) from the tanpura drone (Essentia TonicIndianArtMusic, the Salamon, Gulati and Serra multipitch method), from up to 300 s of audio: Sa accuracy keeps rising with listening time. Tonic-normalization, hearing everything relative to Sa, is the key step the Harvard reference thesis skipped.
  3. Feature: a tonic-normalized, windowed Time-Delayed Melody Surface (TDMS), a 2-D histogram of (pitch(t), pitch(t+delay)) that captures gamaka (the movement between notes), not just which notes occur.
  4. Classifier: XGBoost over the surfaces, window-aggregated.
  5. Swara chains: a second-order Markov chain per raaga over the sung swaras captures the order of notes (phrases, zig-zag movement) that TDMS cannot see. Its evidence is fused with the classifier's, then temperature-calibrated, so a shown "70%" is right about 70% of the time.

The request path: the site (Cloudflare Pages) calls the Worker at /api/*, which calls the headless recognizer (a Cloudflare Container running Essentia and XGBoost), with D1 for result metadata and R2 for opt-in clips.

Accuracy

  • Studio benchmark (frozen, 129 tracks): top-1 0.830 (chance 0.025), after surface augmentation and a junk gate that drops non-melodic windows.
  • Real-world benchmark (80 clips, the number that matters): top-1 0.713, top-3 0.800. Before the swara chains it was 0.537 / 0.762; before the tonic was heard up to 300 s, 0.688 / 0.787.
  • Hindustani (preview): the unified model cross-validates at about 0.88 top-1 on clean studio audio, with cross-tradition confusion of about 3%, and Carnatic held steady when Hindustani was added. That is the studio ceiling only; a real-world Hindustani benchmark is still pending.

The gap between studio and real-world audio is the whole problem, and closing it is what the data commons is for. The full progression is in benchmark/leaderboard.md.

Needs a drone. Concert and TV audio works; solo voice with no drone is unreliable. Known limitations are listed in METHODOLOGY.md.

Project layout

PathWhat it is

| raaga_id/ | The core libr

Nur der Anfang wird gezeigt; den Rest findest du im Repo