Okareo
What it does
Simulation, evaluation and monitoring for voice agents.
- Connects 클라우드에서 실행
- Account or key Sign in to the service when you connect (OAuth)
- Category 개발자 도구
설치
쓰고 있는 AI 앱을 고른 다음 설정을 복사하세요.
검사 5/5 통과 · 내가 묻는 내용은 제작자 서버(tools.okareo.com)를 거쳐요
먼저: 어떤 AI를 쓰시나요?
쓰는 앱을 고르면 아래에 단계가 나옵니다.
Claude에 연결할 수 있어요 · 약 2분
키 필요 없음, 설치 필요 없음 · claude.ai나 데스크톱 앱에서 한 번 설정하면 채팅에서 쓸 수 있어요 · 무료 계정은 1개까지 · Team/Enterprise는 소유자(Owner)가 추가
Claude의 Connectors 페이지 열기
CustomizeConnectors
“+ Add” → “Add custom connector”를 누르고 이 2칸 채우기
여기서 복사해 Claude의 같은 이름 칸에 붙여 넣고 Continue를 누르세요
Name · 이름OkareoRemote MCP server URL · 주소https://tools.okareo.com/mcpAuthentication은 Claude가 찾은 그대로 두고 Add를 누르세요
채팅에서 켜기
+ConnectorsOkareo
해 보기
Okareo을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐✓ Claude가 Okareo을 쓰고 있다고 하거나 답에 Okareo 도구 이름이 나오면 연결된 거예요
메뉴 이름은 2026년 11월 11일에 Anthropic 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요
ChatGPT는 기업용 요금제에서만 연결돼요
웹의 ChatGPT Business, Enterprise, Edu에서 워크스페이스 관리자나 소유자가 추가해요 · Free, Plus, Pro를 쓰면: 내 ChatGPT 요금제로는 아직 MCP를 직접 연결할 수 없어요
웹 ChatGPT에서 MCP 추가 페이지 열기
Plugins+Add custom MCP server
이름과 주소 입력
이름을 넣고 Connection에 주소를 붙여 넣은 뒤 경고에 체크하고 Create as a plugin을 누르세요
Name · 이름OkareoConnection · 주소https://tools.okareo.com/mcp채팅에서 Okareo 고르기
새 채팅을 열고 입력 전에 플러그인 목록에서 Okareo을 고르세요
해 보기
Okareo을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐✓ ChatGPT가 Okareo을 쓰고 있다고 하거나 답에 Okareo 도구 이름이 나오면 연결된 거예요
메뉴 이름은 2026년 11월 11일에 OpenAI 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요
Claude Code에 연결할 수 있어요 · 약 2분
키 필요 없음, 설치 필요 없음
터미널 열기
Mac: Command+스페이스를 누르고 Terminal 입력 · Windows: PowerShell 열기
이 명령을 붙여 넣고 Enter
claude mcp add --transport http --scope user okareo https://tools.okareo.com/mcpClaude Code에서 /mcp 입력
Okareo이 목록에 있고 연결됨으로 보이면 돼요
해 보기
Okareo을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐✓ Claude Code가 Okareo을 쓰고 있다고 하거나 답에 Okareo 도구 이름이 나오면 연결된 거예요
메뉴 이름은 2026년 11월 11일에 Anthropic 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요
Cursor에 연결할 수 있어요 · 약 2분
키 필요 없음, 설치 필요 없음
Cursor에서 AI 채팅을 Agent 모드로 열기
해 보기
Okareo을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐✓ Cursor가 Okareo을 쓰고 있다고 하거나 답에 Okareo 도구 이름이 나오면 연결된 거예요
메뉴 이름은 2026년 11월 11일에 Cursor 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요
VS Code에 연결할 수 있어요 · 약 2분
키 필요 없음, 설치 필요 없음
VS Code에서 AI 채팅을 Agent 모드로 열기
해 보기
Okareo을 써서 나에게 무엇을 해 줄 수 있는지 알려 주고, 하나 해 봐✓ VS Code가 Okareo을 쓰고 있다고 하거나 답에 Okareo 도구 이름이 나오면 연결된 거예요
메뉴 이름은 2026년 11월 11일에 VS Code 도움말에서 확인 · 앱 버전에 따라 화면이 조금 다를 수 있어요
Windsurf, Zed, Gemini CLI 같은 다른 MCP 앱은 추가 방법이 저마다 달라요. 앱 목록에서 확인하세요
웹으로 연결하는 앱용 주소
https://tools.okareo.com/mcpJSON 설정은 아래 “개발자용”에 있어요
개발자용: 터미널 명령과 JSON 설정
웹으로 연결
Claude Code
claude mcp add --transport http --scope user okareo https://tools.okareo.com/mcpCursor (~/.cursor/mcp.json)
{
"mcpServers": {
"okareo": {
"url": "https://tools.okareo.com/mcp"
}
}
}VS Code (mcp.json)
{
"servers": {
"okareo": {
"type": "http",
"url": "https://tools.okareo.com/mcp"
}
}
}이 설정은 제작자의 레지스트리 정보로 만들었어요. README와 다르면 README를 따르세요.
한눈에 보기
어떤 앱에서 쓸 수 있나요
이 서버의 연결 방식과 각 앱의 공식 문서를 바탕으로 했어요. 2026년 11월 10일 확인.
인터넷으로 연결하는 앱
ClaudeChatGPTGooseLM StudioMsty StudioCherry StudioCursorVS Code + GitHub CopilotVisual StudioWindsurf (Devin Desktop)ZedKiroClineContinueJetBrains AI AssistantClaude CodeCodex CLIGemini CLIOpenCodenodecodeWarpLibreChatOpen WebUIRaycast
할 수 있는 일
서버가 도구 목록을 보여 주기 전에 로그인을 요구해요.
기본 점검i
누구나 볼 수 있는 정보를 점검했고, 코드는 읽지 않았어요. 해당하지 않는 항목은 개수에서 뺐어요. · 2026년 11월 12일 점검
- ✓ 통과
제작자와 저장소 일치
레지스트리 이름이 도메인 okareo.com 기준으로 확인되었어요(레지스트리가 도메인 소유를 확인해요)
- ✓ 통과
계속 관리되고 있음
코드 마지막 변경: 28일 전
- ✓ 통과
라이선스 있음
Apache-2.0 사용
- ✓ 통과
엔드포인트 응답
319ms 만에 응답(HTTP 401)
- ✓ 통과
OAuth로 로그인
OAuth 로그인을 지원한다고 밝혀서, AI 앱이 로그인 화면으로 안내해 줘요
- … 아직 점검 안 함
도구 설명에 숨겨진 지시 없음
아직 점검하지 않았어요. 엔드포인트를 점검할 때 도구 목록을 읽어요
토론
질문하고, 팁을 나누고, 안 되는 점을 알려 주세요. "도움이 됨"이 많은 순서예요.
사용자 리뷰
아직 리뷰가 없어요
개발자 도구 카테고리의 다른 서버와 비교i
- 이 카테고리의 다른 서버 5811개 중 0%보다 스타가 많아요
- 이 카테고리의 다른 서버 5811개 중 97%보다 최근에 레지스트리에 공개됐어요
- 기본 점검 결과가 이 카테고리의 다른 서버 5811개 중 100%와 같거나 더 좋아요
레지스트리에서 이 카테고리의 활성 서버 전체와 비교했어요. 스타는 게시자가 저장소를 소유한 경우에만 세요.
자주 묻는 질문
Okareo, 안전한가요?
해당하는 기본 점검 5개 중 5개를 통과했어요. 코드는 읽지 않았어요. 키나 토큰을 넣기 전에 서버가 어떤 권한을 요구하는지 확인하고, 꼭 필요한 권한만 있는 키를 쓰세요.
어떤 키나 코드가 필요한가요?
레지스트리에 필수 키가 나와 있지 않아요. 다만 처음 쓸 때 로그인을 요구하는 서버도 있어요.
내 컴퓨터에서 실행되나요, 클라우드에서 실행되나요?
제작자의 클라우드에서 실행돼요. 설치 없이 인터넷으로 연결하지만, 보내는 내용은 제작자의 서버를 거쳐요.
아직 관리되고 있나요?
GitHub 저장소는 마지막으로 28일 전 변경됐고, 최신 버전(0.0.63)은 오늘 레지스트리에 올라왔어요.
어떤 앱에서 쓸 수 있나요?
Claude Desktop, Claude Code, Cursor, VS Code처럼 MCP를 지원하는 앱에서 쓸 수 있어요. URL로 연결되므로 원격 MCP를 지원하는 앱에서도 쓸 수 있어요. 예: ChatGPT Business 이상.
대신 쓸 수 있는 건 뭐가 있나요?
같은 카테고리에는: REA, GitHub, Serena MCP: the IDE for your agent
같은 카테고리의 다른 것
같은 카테고리에서 다른 제작자가 만든 서버예요. 스타 순으로 정렬했어요.
카드 보는 법:↓ 주간 다운로드i★ GitHub 스타i세 기둥: 리뷰 · 점검 · 사용 정도i업데이트 = 최신 버전을 레지스트리에 공개한 날i
GitHub
Connect AI assistants to GitHub - manage repos, issues, PRs, and workflows through natural language.
Serena MCP: the IDE for your agent
A powerful toolkit for coding, providing semantic retrieval and editing capabilities.
제작자의 README
README 열기
제작자의 저장소에서 쓰인 그대로 가져왔어요. PopNx MCP가 검토하거나 보증한 내용이 아니에요. HTML, 이미지, 스크립트는 제거했어요. 링크를 누르면 이 사이트를 벗어나요.
Okareo MCP Server
The Okareo MCP server exposes Okareo's evaluation capabilities as MCP tools, allowing AI coding assistants to create and manage scenarios, register models, run evaluations, and execute multi-turn simulations directly from your editor.
For detailed documentation, see the Okareo MCP docs.
Prerequisites
- An Okareo account at app.okareo.com
- A copilot that supports MCP servers (Claude Code, Cursor, VS Code, or GitHub Copilot), or Slackbot in Slack
- Python 3.10–3.12 (only for the local install modes; not needed for remote)
Remote MCP (hosted) — recommended
The fastest way to get started. No local install, no Python, no API key in .mcp.json. Browser sign-in handles auth on first connect.
Recommended (OAuth — Claude Code, Claude Desktop, Cursor, VS Code 1.101+)
Add to your copilot's MCP config (typically .mcp.json):
{
"mcpServers": { "okareo": { "type": "http", "url": "https://tools.okareo.com/mcp" } } }
Reload the copilot. It will open a browser to Okareo sign-in once; thereafter the copilot stores the token itself. Your .mcp.json contains no secrets.
Fallback (Bearer header — older clients or headless / CI)
For clients that haven't shipped the MCP OAuth flow yet, paste your API key as a bearer header. Prefer the env-var form over an inline literal:
{
"mcpServers": { "okareo": { "type": "http", "url": "https://tools.okareo.com/mcp", "headers": { "Authorization": "Bearer ${env:OKAREO_API_KEY}" } } } }
GitHub Copilot (in VS Code and the Copilot CLI), Slackbot and every other client are set up at docs.okareo.com/mcp/configuration.
Working across multiple Okareo organizations
If you have access to more than one Okareo account, simply Clear Authentication and then re-authenticate with the account you want to work in. You can always ask which account your are in and have acccess to.
Local install (alternative)
Run the MCP server on your own machine. Useful for offline / airgapped environments and for development.
Prefer the [Remote MCP](#remote-mcp-hosted--recommended) section above unless you have a specific reason to install locally (airgapped, custom build, development on this repo). The remote endpoint requires no install and stays current automatically.
For multi-org users, the remote endpoint also exposes tenant management tools (list_tenants, switch_tenant).
Step 1: Set Your API Key
export OKAREO_API_KEY="your-api-key"
Add this to your ~/.zshrc or ~/.bash_profile for persistence.
Step 2: Configure Your Copilot
Claude Code
Add to .mcp.json:
{
"mcpServers": { "okareo": { "command": "uvx", "args": ["okareo-mcp"], "env": { "OKAREO_API_KEY": "${OKAREO_API_KEY}" } } } }
No pre-install needed — uvx handles it automatically.
Cursor
Add to .cursor/mcp.json:
{
"mcpServers": { "okareo": { "command": "uvx", "args": ["okareo-mcp"] } } }
Cursor inherits OKAREO_API_KEY from your shell environment.
Alternative: pip install
If you don't have uv installed:
pip install okareo-mcp
Then use "command": "okareo-mcp" instead of "command": "uvx" with "args": ["okareo-mcp"].
Configuration Reference
| Variable | Default | Description |
|---|---|---|
OKAREO_API_KEY | *(required)* | Your Okareo API key |
OKAREO_BASE_URL | https://api.okareo.com | Override for on-prem Okareo backend |
TRANSPORT | stdio | Transport: stdio (local) or sse (Docker) |
PORT | 8000 | Port for SSE transport |
Available Tools
Scenarios
| Tool | Description |
|---|---|
save_scenario | Save a named scenario from rows of input/result data (idempotent) |
list_scenarios | List all scenarios in the project with names, IDs, and row counts |
get_scenario | Retrieve a scenario's metadata and all data rows by name or ID |
create_scenario_version | Create a new version of an existing scenario with updated data |
preview_delete_scenario | Preview what will be deleted before removing a scenario |
delete_scenario | Permanently delete a scenario and all related test data |
Generation Models
| Tool | Description |
|---|---|
list_available_llms | Browse available LLMs from the Okareo registry |
register_generation_model | Register a generation model for testing by selecting an LLM from the registry |
list_generation_models | List all registered generation models in the project |
get_generation_model | Read detailed information about a registered generation model |
update_generation_model | Change the LLM a registered generation model points to |
delete_generation_model | Remove a registered generation model and all its related test data |
Tests & Checks
| Tool | Description |
|---|---|
list_checks | List available quality checks (built-in and custom) for evaluating model outputs |
run_test | Run a quality test that evaluates a model against a scenario using specified checks |
list_test_runs | Find past test runs, most recent first. detail_level="summary" (default) or "detailed" for aggregate metrics |
get_test_run_results | Load one page of a run's results by ID or name. detail_level="summary" (default) / "detailed" (per-check outcomes + explanations) / "full" (transcripts). Defaults to 20 conversations. Carries a rerun block — the call and config to re-run this simulation |
get_conversation_transcript | Retrieve the full conversation transcript for a single data point |
reevaluate_test_run | Re-score a completed test run against a (possibly different) set of checks |
create_or_update_check | Create or update a quality check by name — model-based, code-based, or audio (upsert) |
generate_check | Generate a check from a natural-language description, then save it |
get_check | Retrieve a check's full configuration, including its prompt template or code |
delete_check | Permanently delete a check by name |
calibrate_check | Dry-run a draft check against a finished test run — per-row verdicts and the arguments the check received, saving nothing |
Simulations (Multi-Turn)
| Tool | Description |
|---|---|
create_or_update_target | Create or update a Target — generation model, custom endpoint, or voice (OpenAI, Deepgram, Twilio) |
get_target | Retrieve a Target's configuration by name (all types) |
list_targets | Find simulation targets (voice and custom_endpoint). Bounded to 20 by default; name_contains filters |
delete_target | Remove a simulation target and all its related test data |
create_or_update_driver | Define a simulated user persona that will interact with your target |
get_driver | Retrieve a Driver's full configuration including the persona prompt |
list_drivers | Find Driver personas. Bounded to 20 by default; name_contains filters |
list_driver_voices | Discover the voices, voice profiles, and languages available for voice drivers |
run_simulation | Run a multi-turn conversation evaluation. With based_on_run_id it inherits the original run's full configuration; any argument you pass overrides that one field |
list_simulations | List past simulation runs with optional filters (target, scenario, limit) |
Voice Monitoring
| Tool | Description |
|---|---|
ingest_conversations | Submit completed voice conversations to Okareo for monitoring |
connect_voice_integration | Connect a voice provider so its traffic flows into Okareo monitoring |
list_voice_integrations | List the voice provider integrations in your project |
get_voice_integration | Retrieve a voice provider integration by ID, including its status |
update_voice_integration | Update a voice provider integration's metadata |
rotate_voice_integration_secret | Rotate a voice provider integration's secrets |
delete_voice_integration | Delete a voice provider integration by ID |
get_voice_webhook_url | Get the inbound webhook endpoint for a voice provider |
Projects
| Tool | Description |
|---|---|
list_projects | List every project you can work in — id, name, tags, archive state — with the active one marked |
select_project | Choose the project to work in for this conversation |
create_project | Create a new project |
update_project | Rename a project, or replace its tags |
archive_project | Hide a project from the project picker. Reversible; nothing is deleted |
unarchive_project | Restore an archived project to the picker |
clone_project | Copy an existing project's scenarios into a new project (dry-run first) |
Okareo has no project delete — in the app, the API, or here. Archiving is
the removal, and it only hides the project from the picker: its scenarios,
runs, and dashboards stay intact and every tool still works against it.
Analytics & Dashboards
| Tool | Description |
|---|---|
query_analytics | Query Okareo's product analytics to understand evaluation trends |
list_dashboards | List the analytics dashboards in your project |
get_dashboard | Retrieve a dashboard's full configuration by name |
save_dashboard | Create or update an analytics dashboard by name (upsert) |
reorder_dashboards | Set the display order of dashboards |
delete_dashboard | Delete a dashboard by name |
Tenant Management (remote MCP only)
| Tool | Description |
|---|---|
list_tenants | List every Okareo organization you have access to in this MCP session |
switch_tenant | Doesn't change the active organization; returns how to reconnect and pick another one at sign-in |
Documentation & Templates
| Tool | Description |
|---|---|
get_docs | Query the Okareo documentation system for conceptual or user-legible explanations |
get_templates | Retrieve prompt templates for common Okareo patterns (works offline) |
get_reps_baseline | Serve REPS agent-evaluation baseline material (scenario banks, drivers, checks, eval configs) from the latest tagged okareo-tools release |
Troubleshooting
| Symptom | Cause | Fix |
|---|---|---|
okareo-mcp: command not found | Not installed or not in PATH | Run pip install -e . (dev) or use uvx okareo-mcp (user) |
| Server exits with API key error | OKAREO_API_KEY not set | Export it: export OKAREO_API_KEY="..." |
pip install fails on Python 3.13+ | Okareo SDK requires Python <3.13 | Use Python 3.10–3.12 |
| Copilot can't connect (Docker) | Wrong URL | Ensure URL ends with /sse and port matches |
| Cursor doesn't pick up API key | Cursor launched from Dock, not terminal | Launch Cursor from terminal: cursor . |
Contributing
This repository is a curated public mirror; the canonical source is maintained by Okareo. We welcome issues and consider community pull requests — see CONTRIBUTING.md for how proposed changes are reviewed and ported.
License & Trademarks
The Okareo MCP server source code is licensed under the Apache License 2.0 (see also NOTICE).
"Okareo", the Okareo logo, and Okareo product names are trademarks of Okareo, Inc. and are not covered by the Apache 2.0 license. See TRADEMARK.md for permitted use.