语音降噪 · 车规级芯片落地
📘 30章 完整目录
01
课程导论:为什么车规级芯片需要语音降噪?
车载环境噪声特点(风噪、胎噪、发动机噪声、路噪),课程目标与学习路径。
02
车规级芯片基础
AEC-Q100标准、ISO 26262功能安全等级、车规芯片与消费级芯片的差异(温度范围、寿命、可靠性)。
03
车载音频系统架构
麦克风阵列布局(A柱、顶棚、方向盘)、音频编解码器(Codec)选型、I2S/TDM总线协议。
04
数字信号处理基础回顾
采样定理、FFT与STFT、滤波器设计(FIR/IIR),在车规芯片上的定点数实现考量。
05
经典降噪算法(一):谱减法
原理、实现步骤、音乐噪声问题及改进方法(过减法、半波整流)。
06
经典降噪算法(二):维纳滤波
推导、与谱减法的对比、在车规芯片上的计算复杂度分析。
07
自适应滤波降噪
LMS/NLMS算法原理、收敛因子选择、回声与噪声的联合抑制。
08
子空间降噪方法
信号子空间与噪声子空间分解、子空间跟踪算法(PASTd),适合低延迟场景。
09
传统降噪算法在车规DSP上的移植
定点化实现、Q格式选择、查表法优化三角函数与指数运算。
10
深度学习降噪入门
DNN/RNN/CNN基础、噪声与纯净语音的数据集构建(DNS Challenge、LibriSpeech)。
11
实时语音增强模型
CRN(卷积循环网络)、TCN(时序卷积网络)、DCCRN(复数域卷积循环网络)。
12
模型压缩与量化
剪枝、知识蒸馏、INT8/INT4量化,在车规芯片NPU上的部署。
13
车规级NPU架构与推理优化
地平线征程系列、黑芝麻、TI TDA4VM的NPU特性,算子融合与内存复用。
14
多麦克风波束成形
Delay-and-Sum、MVDR、GSC(广义旁瓣对消器),在车内的实际部署挑战。
15
盲源分离与ICA
Cocktail Party问题、FastICA算法、在双麦克风场景下的应用。
16
语音活动检测(VAD)
能量法、谱熵法、DNN-VAD,低功耗场景下的VAD设计。
17
噪声跟踪与估计
MCRA算法、最小值跟踪算法,非平稳噪声的实时更新策略。
18
风噪抑制专项
风噪的物理特性、基于LMS的自适应风噪滤波器、时频掩码法。
19
发动机与路噪主动抑制
阶次噪声分析、自适应窄带滤波器、与ANC系统的协同。
20
回声消除(AEC)与降噪联合
AEC基本原理、双讲检测、AEC+NR级联与联合优化。
21
低延迟实时处理架构
帧长选择(10ms/20ms)、流水线设计、乒乓缓冲、DMA传输。
22
车规级RTOS与音频调度
FreeRTOS/AUTOSAR下的音频任务优先级设计、中断延迟控制。
23
音频质量评估
PESQ、STOI、MOS评分,车内主观听感测试方法。
24
功能安全与降噪算法
ASIL等级对算法的影响、故障注入测试、看门狗与内存保护。
25
功耗优化策略
动态电压频率调整(DVFS)、核间负载均衡、睡眠模式与唤醒机制。
26
OTA升级与模型热更新
车规级OTA架构、模型版本管理、AB分区回滚。
27
实车测试与标定
不同车速(60km/h、120km/h)下的降噪效果、麦克风一致性校准。
28
行业案例解析
某主流车型的语音降噪系统拆解(硬件选型、算法栈、性能指标)。
29
前沿趋势
端侧大模型与语音降噪、神经声码器、基于NeRF的声场重建。
30
课程总结与项目实战
从需求分析到量产交付的全流程回顾,推荐学习资源与社区。