摘要
本申请涉及一种手语翻译方法、装置、计算机设备及存储介质,方法包括:获取待处理手语视频;将所述待处理手语视频输入手部区域检测网络,得到所述手部区域检测网络输出的视频流;将所述视频流输入手语识别模块进行自适应识别处理,得到所述手语识别模块输出的初步文本表示;将所述初步文本表示输入语义理解与文本生成模块,利用所述语义理解与文本生成模块对所述初步文本表示进行语法矫正,得到所述语义理解与文本生成模块输出的目标语言文本。本申请能够利用所述语义理解与文本生成模块对所述初步文本表示进行语法矫正,以消除手语和口语之间的结构差异,从而使所述语义理解与文本生成模块输出的目标语言文本的准确性比较高,并且表达比较自然。
技术关键词
深度神经网络模型
视频流
文本
手语翻译方法
识别模块
手部特征
语义
矫正
子模块
自然语言理解
计算机设备
手语翻译装置
静态特征提取
动态特征提取
手部关键点
面部关键点
系统为您推荐了相关专利信息
动作表情
自然语言
数据接收模块
语音识别单元
图谱
信息处理方法
信息处理系统
大语言模型
策略
评分算法
双向长短期记忆
信息监测方法
信息平台
情感倾向分析
网络结构分析
跨平台文档管理方法
切片
初始窗口大小
生成索引信息
语义向量