一种基于多模态情感识别和定制化人像生成的机器人拟人化交互方法

本发明公开了一种基于多模态情感识别和定制化人像生成的机器人拟人化交互方法，包含以下步骤：步骤S1：多模态情感动态融合；通过多源异构传感器同步采集语音、视觉及文本信号，高保真麦克风阵列捕获用户语音流，提取语调、语速等声学特征，步骤S2：跨模态推理；步骤S3：内容同步生成；步骤S4：风格迁移；步骤S5：拟人化语音和表情生成；本发明利用大语言模型和多模态信息融合对人机交互的情感进行分析和生成，避免了交互情感的单一和共情能力的欠缺，具有强情感交互特性，通过生成式技术获取机器人的形象，并能够迁移至任意形象，打破了特定形象独门独造的局限，实现了一台机器人能适用于不同场景的优势。