摘要
本申请公开了一种汽车座舱监控方法、装置、相关设备及计算机程序产品,涉及汽车座舱监控技术领域,方法包括:获取对汽车座舱环境监测到的多模态信息;按照预先配置的各类型的监测任务,在多任务提示指令集合中获取与每一监测任务对应的提示指令;利用多模态信息及每一监测任务的提示指令,生成每一监测任务的监测结果。本申请能够整合汽车座舱内不同的监测任务,不同监测任务可以共享多模态信息,充分发挥各模态信息间的互补作用,优化了不同监测任务间的互补性,提升了整体监控性能。此外,本申请通过统一的框架可以实现跨任务的处理,无需单独部署各独立的任务功能模块,从而减轻了相关功能模型部署时的负担。
技术关键词
汽车座舱
多模态信息
图像训练样本
监控方法
自然语言理解
计算机程序产品
文本
意图
答案
多任务
模态特征
指令获取单元
标签
处理器
视频
监控技术
电子设备
系统为您推荐了相关专利信息
对话状态追踪
智能系统
细粒度策略
诊断模块
Softmax函数
异常信号
智慧监控方法
物联网平台
设备故障分析
切换电路
边缘检测算法
数据监控系统
模数转换模块
电气
采集卡