基于毫米波雷达的语音合成方法、系统及终端

本发明提供一种基于毫米波雷达的语音合成方法、系统及终端，通过对由毫米波雷达接收的各接收信号去除静态信号，并应用Range‑FFT算法确定目标单元且计算各目标单元所对应的相位信号，再识别各相位信号中发出语音物体所产生的与声音振动相关的相位信号并进行信号增强并进行预处理，生成对应的相位梅尔频谱图；基于训练的频谱重构模型，根据各相位梅尔频谱图获得对应的重构相位梅尔频谱图，再利用声码器获得对应每个发出语音物体的语音波形。本发明实现一种以毫米波雷达作为声音传感器的雷达麦克风，充分利用毫米波雷达特性，不仅能够恢复出更高质量、可理解的语音音频，还能做到自动化的声源位置检测和多声源分离，可利用商用的毫米波雷达开发出一套完整的基于毫米波雷达的录音系统。
上海交通大学
沈俊杰 | 王东 | 张谦