一种用于多功能展示柜的智能人机交互方法及系统

本发明公开了一种用于多功能展示柜的智能人机交互方法及系统，包括对各展示柜及商品所在位置进行匹配关联；收集历史语音交互信息，并进行数据处理；进行多任务联合训练，得到推理模型；使用推理模型，并调用语音输入模块收集实时语音，根据实时语音输入进行语义提取，得出语义标签；根据语义标签进行匹配，快速筛选出与之匹配的商品，并得到匹配度排列靠前的若干商品一同进行播报。本申请用于多功能展示柜的智能人机交互方法及系统，直接建立语音信号与结构化语义标签的映射关系，避免了ASR错误导致标注不准确的情况出现；同时，根据语义标签进行拓展推荐，大大提升用户体验。