一种基于手机视频电话的多模态AI交互系统及方法

本发明公开一种基于手机视频电话的多模态AI交互系统及方法，包括通信终端、呼叫中心模块、多模态逻辑处理模块和动态内容生成模块，通信终端与呼叫中心模块之间由运营商通信网络连接，呼叫中心模块用于处理大量电话的呼入呼出，呼叫中心模块包括SIP协议网关单元、视频交互传输单元和声音交互传输单元，多模态逻辑处理模块用于识别理解用户语义，提取用户视频中对当前业务有价值的信息，动态内容生成模块用于根据用户语义生成音视频进行交互；本发明通过基于现有的呼叫中心结合多模态逻辑处理和动态内容生成进行扩展，使其增加了智能视频客服的能力，可以处理更多复杂问题，有效解决了传统IVR系统，不能和AI进行交互，只能处理简单的业务的问题。