摘要
本申请公开了一种车辆座舱屏显信息获取方法,包括:解析所述屏显内容图片中的文本控件和图标控件,包括文本控件内容的信息和控件位置的信息;对所述文本控件和所述图标控件分别添加标签;根据所述控件位置信息和标签信息,分析所述图标控件与所述文本控件的关联关系;对应当前屏幕显示状态,获取用户语音请求信息;根据所述用户语音请求信息,生成语音文本信息;解析所述语音文本信息中动作和主体;根据解析所述语音文本信息中的动作和主体,获取用户指令动作和屏幕操作主体;根据所述用户指令动作和所述屏幕操作主体检索控件;根据所述检索控件标签,将匹配的所述图标控件位置坐标作为触摸点击接口;根据所述触摸点击接口,模拟对屏幕点击操作。
技术关键词
控件
文本
图标
信息获取方法
标签
车辆座舱
屏幕显示状态
意图识别模型
训练图像识别模型
交互动作
电子设备
模版
指令
生成语音
信息获取装置
图片
实体
系统为您推荐了相关专利信息
数据处理方法
多分类器融合
多层卷积神经网络
样本
注意力机制
事件抽取方法
文档特征
金融
双向长短期记忆网络
文本
机器人故障检测
故障机器人
通讯系统
泊位
故障诊断模块
可靠性测试方法
故障场景
集成学习模型
数据错误定位方法
训练集数据
推理方法
计算机程序指令
模块
深度学习模型
大语言模型