摘要
一种基于深度学习模型的舞蹈生成方法及系统,属于舞蹈编排领域,该传输方法包括采集舞者的舞蹈动作视频,使用计算机视觉算法提取每帧的骨架数据,将其转化为关键点序列;使用卷积神经网络对舞蹈动作视频提取空间特征,通过图卷积网络对舞蹈动作视频提取时间序列特征,捕捉动作的时序性与节奏,对每个动作进行时间编码;构建多模态深度学习模型,训练模型根据输入的舞蹈风格和音乐节奏,生成对应的舞蹈动作序列;加入风格控制单元,通过风格迁移网络将舞蹈风格转化为模型理解的风格向量,使用音乐节奏预测模型将音乐与舞蹈动作同步进行;通过深度学习模型生成新的舞蹈动作。本发明精准捕捉舞蹈动作的动态变化和结构关系,生成动作更加流畅。
技术关键词
舞蹈生成方法
深度学习模型
动作视频提取
风格
计算机视觉算法
多模态深度学习
音乐
时间序列特征
关键点
捕捉舞蹈动作
节奏特征
生成动作
时序
控制单元
注意力机制
关节点特征
卷积网络模型