一种多模态交互的沉浸式乐理学习系统及方法

本发明公开了一种多模态交互的沉浸式乐理学习系统及方法，涉及益智游戏与数位教育结合技术领域，包括，构建6行×6列的音格交互矩阵，每个音格绑定五声音阶中的音符及其高低八度变体，并设置调式模式作为默认配置；播放与当前音格绑定的MIDI音高，音色选自器乐音色库，基于动态改变音格的显示属性，显示色彩映射和动画效果，生成振动信号、振动强度和音高；接收用户的调式切换指令，根据目标调式重新计算音格交互矩阵的音符排列规则。本发明通过构建6×6音格交互矩阵，采用循环排列算法动态绑定五声音阶及其八度变体，突破了传统线性键盘布局的局限，实现了二维空间化的音阶可视化认知，使五声音阶记忆效率提升。