摘要
本发明提供了一种基于跨模态动态融合与设备资源感知的多模态数据主动推荐方法。应用于数据处理技术领域,所述方法包括通过智能家居设备端获取多模态数据;对所述多模态数据分别进行模态特征提取,生成语音特征矩阵、环境概率矩阵及设备状态向量矩阵;采用跨模态动态融合算法,结合时间维度和空间维度权重,对所述语音特征矩阵、环境概率矩阵及设备状态向量矩阵进行自适应加权融合;通过设备资源监测模块实时检测中控设备的CPU负载与内存占用率,动态调整数据计算策略;基于融合后的多模态特征矩阵,通过用户画像建模与知识图谱关联生成主动推荐指令,驱动智能家居设备执行自适应调节。以此方式,可以提高推荐效率。
技术关键词
推荐方法
跨模态
智能家居设备
矩阵
语音特征
资源
设备工作状态数据
多模态
模态特征
融合算法
画像建模方法
中控设备
主动控制设备
生成方法
环境传感器数据
Softmax函数
动态时间规整算法
生成语音