摘要
本发明涉及音频处理技术领域,公开了一种基于SOC的多模态音频处理方法及系统。所述方法包括:将多路音频输入信号输入SOC芯片的ARM处理器进行处理,生成预处理音频数据流;将预处理音频数据流并行输入至数字信号处理器DSP执行的基础音频处理流与人工智能AI加速器执行的多模态特征提取流;在基础音频处理流中进行自适应降噪处理和多路音频信号混音处理,生成基础处理特征流;在多模态特征提取流中进行多维度特征提取和场景类型识别,生成高层特征流;建立特征映射矩阵并进行音频信号重建,输出目标音频数据,本发明提升了SOC芯片对不同类型音频信号的处理能力,确保了重建音频信号的连续性和平滑性,有效避免了信号失真。
技术关键词
深度神经网络模型
数字信号处理器
任务调度策略
SOC芯片
多维度特征提取
三次样条插值算法
并行处理单元
分数阶傅里叶变换
音频数据处理
加速器
基础
多模态
频域特征
语义场景
时域音频信号
傅里叶变换处理
矩阵乘法运算
系统为您推荐了相关专利信息
深度神经网络模型
低对比度图像
噪声图像
图像采集模块
视频编码
电阻
打印机主板
SOC芯片
匹配模块
光栅传感器
任务调度策略
迭代优化算法
优化无线资源
文件存储方式
网络拥塞控制