AI Jam Sessions

日本語 | 中文 | Español | Français | हिन्दी | Italiano | Português (BR)

Machine Learning the Old Fashioned Way

An MCP server that teaches AI to play piano and guitar — and sing.

120 songs across 12 genres. Six sound engines. Interactive guitar tablature.

A browser cockpit with vocal synthesizer. A practice journal that remembers everything.

______________________________________________________________________

这是什么？

AI学会弹奏的钢琴和吉他。不是合成器，也不是MIDI库——一种教学工具。

法学硕士可以读写文本，但它不能像我们一样体验音乐。没有耳朵，没有手指，没有肌肉记忆。AI Jam Sessions通过赋予模型实际可以使用的感官来缩小这一差距：

• 阅读 --带有深度音乐注释的真实MIDI乐谱。不是手写的近似值——解析、分析和解释。
• 听证会 --通过扬声器播放的六个音频引擎（振荡器钢琴、样本钢琴、声音样本、物理声道、附加声音合成器、物理建模吉他），使房间里的人成为人工智能的耳朵。
• 看见 --一个钢琴卷轴，将播放的内容渲染为SVG，模型可以读回并验证。一个交互式吉他谱编辑器。一个带有可视键盘、双模笔记编辑器和调音实验室的浏览器驾驶舱。
• 铭记 --一份跨课程持续的实践日志，因此学习会随着时间的推移而复合。
• 歌唱 --从歌剧女高音到电子合唱团，有20个预设的声道合成。伴随着声音、轮廓和音节叙事的模式唱歌。

12种流派中的每一种都有一个注释丰富的示例——人工智能首先研究的参考作品，包括历史背景、逐条结构分析、关键时刻、教学目标和表演技巧。其他96首歌曲是原始MIDI，等待AI吸收模式、播放音乐并编写自己的注释。

钢琴卷

钢琴滚动是人工智能看待音乐的方式。它将任何歌曲渲染为SVG——右手为蓝色，左手为珊瑚色，带有节拍网格、动态和测量边界：

Für Elise, measures 1–8 — the E5-D#5 trill in blue, bass accompaniment in coral

两种颜色模式： 手 （蓝色/珊瑚色）或 音高等级 （彩色彩虹——每个C都是红色，每个F#都是青色）。SVG格式意味着模型既可以看到图像，也可以读取标记，以验证音高、节奏和手部独立性。

驾驶舱

一个基于浏览器的乐器和声乐工作室，与MCP服务器一起打开。没有插件，没有DAW——只有一个带钢琴的网页。

• 双模式钢琴滚动 --在乐器模式（彩色音高类颜色）和声乐模式（按元音形状着色的音符：/a//e/i//o/u/）之间切换
• 可视键盘 --C4的两个八度音阶，映射到您的QWERTY键盘。单击或键入。
• 20个语音预设 --15个Kokoro映射的声音（Aoede、Heart、Jessica、Sky、Eric、Fenrir、Liam、Onyx、Alice、Emma、Isabella、George、Lewis，加上合唱团和合成合唱团），4个声道映射的声音，以及一个合成合唱团部分
• 10个仪器预设 --6个服务器端钢琴音色加上合成器、风琴、铃和琴弦
• 纸币检查员 --单击任何音符以编辑速度、元音和呼吸
• 7个调谐系统 --气质平等，只有语调（大/小），毕达哥拉斯式，四分之一逗号意音，韦克迈斯特三世，或自定义分偏移。可调A4参考（392–494 Hz）。
• 调整审计 --频率表、带拍频分析的间隔测试仪和调谐导出/导入
• 分数导入/导出 --将整个分数序列化为JSON并重新加载
• 面向LLM的API — window.__cockpit 暴露 exportScore(), importScore(), addNote(), play(), stop(), panic(), setMode()，以及 getScore() 因此，LLM可以以编程方式编写、排列和播放

学习循环

 Read                 Play                See                 Reflect
┌──────────┐     ┌───────────┐     ┌────────────┐     ┌──────────────┐
│ Study the │     │ Play the  │     │ View the   │     │ Write what   │
│ exemplar  │ ──▶ │ song at   │ ──▶ │ piano roll │ ──▶ │ you learned  │
│ analysis  │     │ any speed │     │ to verify  │     │ in journal   │
└──────────┘     └───────────┘     └────────────┘     └──────┬───────┘
                                                             │
                                                             ▼
                                                    ┌──────────────┐
                                                    │ Next session  │
                                                    │ picks up here │
                                                    └──────────────┘

歌曲图书馆

12种流派的120首歌曲，由真实的MIDI文件构建而成。每种流派都有一个深度注释的例子——有历史背景、逐条和声分析、关键时刻、教学目标和表演技巧（包括声乐指导）。这些示例可以作为模板：人工智能研究一个示例，然后注释其余示例。

歌曲进展 原始 （仅限MIDI）→ 注释的 → 准备 （完全可以用音乐语言演奏）。人工智能通过研究歌曲并编写注释来推广歌曲 annotate_song.

声音引擎

六个引擎，加上一个同时运行任意两个引擎的分层组合器：

键盘声音

六种可调钢琴音色，每种音色可根据参数（亮度、衰减、琴槌硬度、失谐、立体声宽度等）进行调整：

吉他声

四个吉他声音预设，带有物理建模的琴弦合成，每个预设有17个可调参数（亮度、身体共振、拨弦位置、琴弦阻尼等）：

实践杂志

每次会话后，服务器都会捕获发生的事情——哪首歌、速度、测量次数、持续时间。人工智能添加了自己的反思：它注意到了什么，识别出了什么模式，接下来要尝试什么。

---
### 14:32 — Autumn Leaves
**jazz** | intermediate | G minor | 69 BPM × 0.7 | 32/32 measures | 45s

The ii-V-I in bars 5-8 (Cm7-F7-BbMaj7) is the same gravity as the V-i
in The Thrill Is Gone, just in major. Blues and jazz share more than the
genre labels suggest.

Next: try at full speed. Compare the Ipanema bridge modulation with this.
---

每天一个降价文件，存储在 ~/.ai-jam-sessions/journal/。人类可读，仅可附加。下一节课，人工智能会阅读它的日记，并从它停止的地方继续。

安装

npm install -g ai-jam-sessions

需要 Node.js 18+。没有MIDI驱动程序，没有虚拟端口，没有外部软件。

克劳德桌面/克劳德代码

{
  "mcpServers": {
    "ai_jam_sessions": {
      "command": "npx",
      "args": ["-y", "-p", "ai-jam-sessions", "ai-jam-sessions-mcp"]
    }
  }
}

MCP工具

41个工具和3个提示模板，分为六类：

学习

播放

唱

吉他

构建

MCP提示

结构化教学工作流程的三个提示模板：

命令行界面

ai-jam-sessions list [--genre ] [--difficulty ]
ai-jam-sessions play  [--speed ] [--mode ] [--engine 
]
ai-jam-sessions sing  [--with-piano] [--engine ]
ai-jam-sessions view  [--measures ] [--out ]
ai-jam-sessions view-guitar  [--measures ] [--tuning ]
ai-jam-sessions info 
ai-jam-sessions tune  [--param value ...] [--reset] [--show]
ai-jam-sessions tune-guitar  [--param value ...] [--reset] [--show]
ai-jam-sessions keyboards
ai-jam-sessions guitars
ai-jam-sessions stats
ai-jam-sessions library
ai-jam-sessions ports
ai-jam-sessions help
ai-jam-sessions --version

状态

v1.4.0。六个声音引擎，41个MCP工具，3个提示模板，12个流派的120首歌曲，带有深度注释的示例。歌曲换位、分段标记、单手静音/独奏，用于集中练习。交互式吉他谱编辑器。浏览器驾驶舱配有20个人声预设、10个乐器人声、7个调谐系统和一个面向LLM的API乐谱。两种颜色模式下的钢琴滚动可视化。坚持学习的练习日记。跨服务器重启的会话状态持久性。MIDI演奏伴随着评分、注释质量评估和跨流派模式识别。MIDI就在那里——库随着AI的学习而增长。

安全与隐私

触摸的数据： 歌曲库（JSON+MIDI），用户歌曲目录(~/.ai-jam-sessions/songs/)吉他调音配置、练习日记条目、本地音频输出设备。

未接触的数据： 没有云API，没有用户凭据，没有浏览数据，没有用户歌曲目录外的系统文件。未收集或发送遥测数据。

权限： MCP服务器仅使用stdio传输（无HTTP）。CLI访问本地文件系统和音频设备。看 安全.md 对于完整的政策。

许可证

麻省理工学院