摘要
本申请公开了一种展厅多屏穿梭的数字人跟随交互方法,展厅设有若干展台,各展台配置有工作机,各工作机与服务器相连构成展厅系统,工作机连接有话筒、摄像头、屏幕和音箱;多屏穿梭的数字人跟随交互方法包括:展厅系统基于参观者说出预设关键词时的口型,完成相应参观者锁定,并采集相应参观者的声纹特征作为声音识别参考特征;展厅系统基于声音识别参考特征接收的参观者的语音输入,并通过通用大模型结合展厅领域知识库和历史上下文生成回答内容,将内容传输给数字人前端交互系统驱动数字人在屏幕上与用户进行交互;展厅系统基于参观者的语音信息和/或动作信息,获取用户的参观者的移动状态,并驱动数字人在相应屏幕上伴随参观者移动。
技术关键词
展厅系统
交互方法
工作机
展台
交互系统
屏幕
动画
声纹特征
声纹识别模型
话筒
关键词
服务器
模型库
唇语识别
后端系统
音箱
音频
发言人
系统为您推荐了相关专利信息
三维数字模型
机械臂
人机协同
交互方法
手术机器人
签约方法
客户
建立数据交互通道
房屋
强化学习算法
预训练模型
训练样本数据
训练样本集
对象
模型训练方法
巡检机器人
中央处理器
关节驱动器
人机交互系统
变电站