基于多模态AI协同的自动化软件测试方法及系统

本发明涉及自动测试技术领域，更具体地，涉及基于多模态AI协同的自动化软件测试方法及系统。该方案包括将光学字符识别、语音识别、自然语言处理解析工具封装为独立容器，解析结果实时输入多模态语义关联模型；计算图像描述文本与对应语音转写文本的语义相似度；构建测试需求复杂度评估模型；定义用例质量指标，建立错误样本库存储人工标注的问题用例及其修正标签；根据三级过滤器的筛选结果最终确定意向需求；设置测试用例模板，根据融合质量优化路径，提升用例生成效率，优化路径同步更新至错误样本库关联的知识库。该方案通过多模态AI协同，结合容器化部署、模型动态优化等实现自动化软件测试，提升效率和识别准确率。