摘要
本发明公开一种利用大模型进行政务服务交互的方法与系统,涉及政务领域的政务服务优化技术;包括:步骤1:从云上大厅已有的交流记录中直接获取OCR数据和ASR记录,步骤2:根据OCR数据和ASR记录对大模型进行RAG更新和定时微调,步骤3:基于云上大厅的pc端部署客户端,通过客户端实时获取交流信息,其中通过客户端进行屏幕录制记录政务服务办理过程中的屏幕信息,屏幕信息包括关键步骤和操作界面,并利用语音识别方法实时将客户的语音内容转换为文本内容,步骤4:利用微调后的大模型实时分析交流信息,提取屏幕信息和文本内容中的关键信息与知识库进行匹配,步骤5:基于匹配结果自动编排和执行政务办理流程,并在涉及证照时进行真伪判断。
技术关键词
政务服务办理
语音识别方法
客户端
YOLO模型
屏幕
数据采集模块
操作界面
识别模块
文本
匹配模块
周期