眼睛是心灵之窗,那么声音是什么,可以是每个人独一无二的专属特性。那么国内的声纹识别技术又是怎样的,会在在国内外正迎来第一波商用化浪潮?而与此同时,关于声纹识别技术研究的成熟度以及安全可靠性,一直是应用领域讨论的重点,本文基于时下声纹识别技术研究的前沿观点,总结出五大发展趋势:
1、声纹识别研究朝着深度学习和端到端方向发展
语音作为语言的声音表现形式,不仅包含了语言语义信息,同时也传达了说话人语种、性别、年龄、情感、信道、嗓音、病理、生理、心理等多种丰富的副语言语音属性信息。以上这些语言语音属性识别问题从整体来看,其核心都是针对不定时长文本无关的句子层面语音信号的有监督学习问题,只是要识别的属性标注有不同。
近年来,声纹识别的研究趋势正在快速朝着深度学习和端到端方向发展,其中最典型的就是基于句子层面的做法。在网络结构设计、数据增强、损失函数设计等方面还有很多工作去做,还有很大的提升空间。
2、提升声纹识别系统的短时语音情况
在实际应用中,由于对基于语音的访问控制需求的不断增长,提升声纹识别系统在短时语音情况下的性能变得尤为迫切。短时语音中说话人信息不足以及注册和测试语音的文本内容不匹配,对于主流的基于统计建模的声纹识别系统是一个严峻的挑战。
3、改进现有的深度说话人学习方法
目前采用的深度说话人识别方法首先利用神经网络提取前端的帧级特征,然后通过池化映射获得可以表示说话人特性的段级向量,最后采用LDA/PLDA等后端建模方法进行度量计算。
相对于传统的i-vector生成过程,基于深度学习的说话人识别方法优势主要体现在区分性训练和利用多层网络结构对局部多帧声学特征的有效表示上。如何进一步改进现有的深度说话人学习方法是现阶段的一个研究热点。
4、深度对抗学习在声纹识别技术中的应用
生成式对抗网络(GAN)的主要目的是用在数据生成、降噪、等很多场景里面。它还被用在领域自适应里面,形成一个新的分布。第三个广泛的应用是生成对抗样本,这会对分类系统产生大的困扰。很多研究者用对抗样本攻击机器学习的系统,在原始数据上增加一些扰动,生成样本,经过神经网络之后就有可能识别成完全不同的结果。这个思想在图像处理领域非常活跃,会造成错误识别,引起了自动驾驶,安全等领域的研究人员的广泛关注。
在语音领域,GAN可以用在语音识别、口音自适应上,通过多任务学习和梯度反转层来进行口音或信道的自适应,然后加上其他方法可以得到较好的效果。声纹识别也存在各种不匹配的问题,在声纹识别上也可以使用这一思想。同样的思想也用在了TTS语音合成领域,目的是把不同的音素解耦成说话人,风格等,去除噪声对建模的影响。
5、深度嵌入学习是进行声纹识别和反欺骗的一个重要途径
说话人识别和欺骗检测近年来受到学术界和业界的广泛关注,人们希望在实际应用中设计出高性能的系统。基于深度学习的方法在该领域得到了广泛的应用,在说话人识别和反欺骗方面取得了新的里程碑。然而,在真实复杂的场景下,面对短语音、噪声的破坏、信道失配、大规模等困难,开发一个鲁棒的系统仍然是非常困难的。深度嵌入学习是进行说话人识别和反欺骗的一个重要途径,在这方面已有一些著名的研究成果。如之前的d-vector特征和当前普遍使用的x-vector特征。
写到最后,指纹识别、人脸识别已经被大众所熟知,但同样作为生物识别的声纹识别,还处于技术挑战的前沿地带。
声明:本内容为作者独立观点,不代表电源网。本网站原创内容,如需转载,请注明出处;本网站转载的内容(文章、图片、视频)等资料版权归原作者所有。如我们采用了您不宜公开的文章或图片,未能及时和您确认,避免给双方造成不必要的经济损失,请电邮联系我们,以便迅速采取适当处理措施;欢迎投稿,邮箱∶editor@netbroad.com。
瑞萨收购Transphorm,利用GaN技术扩展电源产品阵容 | 24-01-11 15:35 |
---|---|
低功耗 GaN 在常见交流/直流电源拓扑中的优势 | 23-12-15 16:11 |
意法半导体新200W和500W器件提升MasterGaN系列性能和价值 | 23-12-15 16:05 |
ROHM开发出可更大程度激发GaN器件性能的超高速栅极驱动器IC | 23-10-19 15:14 |
GaN 如何在基于图腾柱 PFC 的电源设计中实现高效率 | 23-08-03 16:28 |