基于Mamba的轻量化音乐生成方法

本发明公开了一种基于Mamba的轻量化音乐生成方法，根据音乐特有的性质，通过频谱扫描策略去扁平化2D梅尔频谱，构建一个令牌序列，将该令牌序列与随机生成的时间步长以及用户给定的控制音乐风格的文本条件进行特征融合，再进行重塑，获得最终预测的噪声，并使用该噪声来构建目标噪声，分别得到正目标噪声和负目标噪声；同时，针对于实现音乐风格的连续控制，构建了一个低秩适配器模块，根据用户给定的控制音乐风格的文本条件信息，通过低秩适配器模块得到预测的正噪声和负噪声；分别计算正向损失和负向损失，通过最小化正向损失和负向损失之和来方向更新低秩适配器模块。