深度学习在超声舌成像处理中的研究进展
Abstract
借助超声成像设备可以对发音生理舌体进行动态记录，超声舌成像的处理分析对于实践语言学、实验语音学研究以及语音工程应用具有重要意义，其中，舌体运动轨迹动态分析和舌体轮廓线的舌位姿态量化分析是实际应用中的关键技术。由于超声舌成像模糊、舌轮廓不清晰等噪声特性，其处理分析面临着舌位特征提取困难、舌体动态轮廓线跟踪困难等挑战。深度学习技术借助其强大的特征学习能力在超声舌成像处理分析中的舌体轮廓线的提取、舌体运动模型的构建以及深层次的语音工程应用等方面取得了较大成果。概述了超声成像与超声舌成像，分析了超声舌成像处理遇到的挑战，简述了深度学习的技术方法，归纳了深度学习技术在超声舌成像处理分析等任务中的建模机理和具体应用，包括超声音视频同步对齐、生物特征识别、多模态学习、无声语音接口、声学反演模型、语言学习与语音康复、创新交互与艺术娱乐等，并梳理了相关理论方法、技术手段及性能评价。最后给出了深度学习技术在超声舌成像处理分析中的研究展望与未来趋势。以期更多的计算机技术和超声成像技术能够引入并助推实验语音学和语言学的科学研究和学科发展。
Fields of Study & Subjects
Military Technology and Strategies
Legal and Regulatory Analysis
Linguistic
Cultural
and Literary Studies
Publication details
- Journal / source
- Journal of Image and Graphics
- Publisher
- Aerospace Information Research Institute, Chinese Academy of Sciences
- Volume
- 31
- Issue
- 2
- Pages
- 391–432
- Publication date
- 1 January 2026
- Language
- EN