摘要
本发明提供了一种车载大模型协同仲裁方法、系统、设备、存储介质及车辆。所述方法包括步骤:采集语音输入并获得语音识别结果,利用部署于第一域控制器中的第一大模型对所述语音识别结果进行语义增强处理,生成第一意图识别结果;采集视觉输入并获得视觉识别结果,利用部署于第二域控制器中的第二大模型对所述语音识别结果和视觉识别结果进行融合处理,生成第二意图识别结果;对所述第一意图识别结果和第二意图识别结果进行仲裁,确定其中一个作为最终意图;并将所述最终意图分发至对应大模型或车控模块执行。实施本发明,可以优化车载大模型应用效果,提升座舱智能化水平。
技术关键词
意图识别
协同仲裁方法
语音
视觉
自然语义
智能座舱
仲裁系统
识别模块
链路
多模态
车辆
文本
图像
处理器