基于协同计算的实时语音到手语转换合成方法

本发明公开了一种基于协同计算的实时语音到手语转换合成方法，包括：S10，语音采集与预处理，通过可穿戴设备采集语音信号，生成压缩语音包；采用改进的稀疏编码算法压缩数据量以降低传输负载；S20，云端语义编码，使用深度双向变换器模型建模语音信号的长程依赖性，通过自注意机制提取高阶语义向量，生成紧凑语义表示，结合副语言特征进行语义增强；S30，边缘节点动作映射，部署时空卷积网络ST‑CNN，其双分支结构分别解析句法级动作轨迹和细化手部微动特征；通过残差连通性与历史梯度滑动平均滤波确保动作连续性；应用生物力学约束模块，包括关节角度阈值、运动平滑项，保证动作符合人体运动学规律；S40，终端骨骼渲染；S50，强化学习动态调度。