一种基于多模态大模型的一体化智能谈话的方法及系统

本发明涉及人工智能技术领域，具体为一种基于多模态大模型的一体化智能谈话的方法及系统，包括以下步骤：准备相关的数据训练集和测试集；安装多维度的信息采集传感器；部署相关场景Agent应用；信息采集传感器实时采集；Agent应用实时展示推理结果；生成多维度的智能分析报告；有益效果为：同时对图像、文本等多种模态的数据进行精准捕捉和深度解析，实现了谈话场景的多维感知与智能分析。无论是谈话者的面部表情、肢体语言所蕴含的图像信息，还是对话中的文字内容，都能被装置迅速识别并分析，挖掘其中隐藏的潜在信息。