基于多模态人工智能的智能驾驶舱交互方法及系统

本发明公开一种基于多模态人工智能的智能驾驶舱交互方法及系统，涉及数据交互技术领域。针对传统智能驾驶舱存在的交互性差、灵活性低和用户体验不佳等问题，采用方案包括：获取用户语音数据，基于TensorFlow.js实现语音指令识别，并将识别的语音转换为文本；利用大模型解析文本，调用数据分析服务，生成数据集，并推荐数据呈现方式；大模型根据数据集和数据呈现方式生成不同类型的统计图表及统计图表的解读文本；数字人视频生成服务获取解读文本，并转化为包含数字人形象且具备信息播报功能的视频；将数据集和视频发送至智能驾驶舱前端界面进行展示和播报。本发明用于提高交互效率和体验效果。