摘要
本发明公开了一种基于多模态大模型的人工智能式互动方法,所述方法包括:实时处理和分析从传感器网络收集的多维数据,采用加权求和方法对来自不同传感器的数据进行融合,并引入基于观众反馈的权重更新机制;识别观众的情绪状态,使用基于transformer架构的多模态融合模型进行情感分类;动态调整剧情和互动策略,结合用户情绪状态和个性化用户画像,使用情感增强的Thompson采样算法进行多臂赌博机问题的求解,以优化剧情选择;根据观众情感状态、行为数据和剧情选项构建结构化prompt并与大语言模型集成,生成更加个性化和情境相关的响应。
技术关键词
互动方法
多模态
系统运行状态信息
多臂赌博机
优化控制策略
数据
画像
生理反应
动态
座椅
运动
注意力模型
麦克风阵列
强度
生物传感器
大语言模型
高清摄像头
语音特征
面部特征
系统为您推荐了相关专利信息
标注方法
多头注意力机制
多模态
求解算法
标注规则
监测分析方法
智能算法
系统运行状态
标记
深度学习算法
效率分析系统
终端设备
多模态
数据采集模块
非暂态计算机可读存储介质
智能交互系统
多模态
数据接收模块
面部特征
音频特征提取
径向基函数神经网络
强化学习算法
优化控制策略
强化学习框架
非线性系统