摘要
本发明涉及人工智能技术,可应用于医疗健康、金融科技等业务系统平台中,公开了一种基于混合专家模型的数据处理方法、装置、设备及介质,包括:将待处理数据输入混合专家模型,得到路由概率分布,计算路由概率分布的Tsallis熵,根据Tsallis熵生成预测结果;基于辅助熵损失函数评估损失,构建子空间,在子空间内调整预训练参数,得到优化后的混合专家模型;根据优化后的混合专家模型,得到目标预测结果。本发明动态路由机制灵活选择专家,辅助熵损失函数优化路由决策,减少不确定性,加速模型收敛;重新参数化和子空间设计消除新任务对旧任务的干扰,使模型在稳定性和可塑性间达到良好平衡,提高模型数据处理的泛化与适应能力。
技术关键词
数据处理方法
网络
传播算法
数据输出模块
计算机可执行指令
标签
参数
文本处理方法
损失函数优化
计算机设备
动态
数据接收模块
可读存储介质
矩阵
数据处理装置
人工智能技术
医疗健康
处理器通信
系统为您推荐了相关专利信息
起重机械
特种设备
分类方法
文本关键词提取
融合BP神经网络
数据
新建厂房
深度神经网络模型
组装模块
生成算法
LSTM神经网络
温度场预测方法
车舱
高密度聚乙烯
三维模型
软件测试用例
客户端
代码同步方法
代码更新
芯片模块