声纹识别·总章

1.1 声纹识别基础

• 波的简单知识&＃xff08;声波为例&＃xff09;

• 音频特征&＃xff08;1&＃xff09;&＃xff1a;时域图

• 音频特征&＃xff08;2&＃xff09;&＃xff1a;时域图、频谱图、语谱图&＃xff08;时频谱图&＃xff09;

• 音频特征&＃xff08;3&＃xff09;&＃xff1a;各种波形图像的小结

• “声音”背后的原理&＃xff08;1&＃xff09;&＃xff1a;声波、声音的采集、声音的储存

• “声音”背后的原理&＃xff08;2&＃xff09;&＃xff1a;采样、量化和编码

• “声音”背后的原理&＃xff08;3&＃xff09;&＃xff1a;音频信号处理的基础概念和流程小结

• 声纹识别概述&＃xff08;1&＃xff09;初识

• 声纹识别概述&＃xff08;2&＃xff09;声纹识别原理和过程

• 声纹识别概述&＃xff08;3&＃xff09;声纹识别系统

• 声纹识别技术小结&＃xff08;1&＃xff09;&＃xff1a;声纹建模技术

1.2 声纹识别算法

• 声纹识别&＃xff1a;x-vector 的特征提取原理
• Kaldi说话人识别&＃xff1a;基于x-vector 的plda自适应

1.3 声纹识别数据介绍

声纹识别常用数据集简介

2.1 数据&＃xff08;中文/英文&＃xff09;

&＃xff08;1&＃xff09; 中文数据集
SLR33
SLR85
SLR82
AISHELL-2
SLR18

&＃xff08;2&＃xff09;国外数据集
Voxceleb2
可参考点击进行下载&＃xff08;注意&＃xff1a;解压方式&＃xff09;
配套论文&＃xff1a;论文分享 VoxCeleb2&＃xff1a;Deep Speaker Recognition

2.2 工具

Kaldi

• kaldi 声纹识别·资源汇总

• Kaldi 声纹识别·总章

  Python &＃43; kaldi
  PYTORCH-KALDI语音识别工具包

TensorFlow

TensorFlow-based Deep Speaker

PyTorch

PyTorch-based Deep Speaker

Keras

Speaker Recognition

2.3 资源汇总

1. 详解音频编解码的原理、演进和应用选型等——很全面的音频相关系列连载&＃xff01;
2. 语音识别&＃xff08;八&＃xff09;——声纹识别, 地理
3. 小白声纹识别&＃xff08;说话人识别&＃xff09;探索
4. 20190510 语音识别资源整理
5. iamxiaoyubei /Voice-Tech-Study
6. kaldi/语音识别ASR/声纹识别SRE/资源汇总——总结了很多综合性的语音识别/声纹识别资源

语音/声纹相关书籍

• Hand Book of Speech Enhancement and Recognition

语音/声纹相关课程

爱丁堡大学计算机学院&＃xff1a;Automatic Speech Recognition (ASR) 2018-19: Lectures

更多可以参考&＃xff1a;语音及语言处理(SLP)课程与相关资料分享

声纹识别的应用

• 声纹识别的应用实践——李博士的知乎专栏&＃xff0c;写的不错&＃xff01;
• Leon晋声纹/ASR/diarization/Kaldi粉——可以看大佬在知乎的回答&＃xff0c;说不定就有新的收获

声纹识别学习路径

• 说话人识别/声纹识别学习路径的资料整理,从零学声纹识别——简直牛逼轰轰&＃xff01;如果有时间&＃xff0c;又想系统的学习的话&＃xff0c;可以参考这个学习路径&＃xff1a;GMM-UBM -> JFA -> Ivector-PLDA -> DNN embeddings -> E2E

2.4 声纹识别大牛

• 王赟
• 王泉——这个很强大&＃xff0c;有很多理论以及工具的介绍&＃xff0c;以及王泉老师维护的项目&＃xff0c;以及新书&＃xff1a;《声纹技术&＃xff1a;从核心算法到工程实践》

数据

语音库的分析与评价
音频质量的评价方法

指标

• 基础指标&＃xff1a;FAR、FRR
  人脸识别模型评价指标&＃xff1a;完整梳理
• ERR
  声纹识别 如何获取最佳效果的阈值&＃xff08;通过计算ERR&＃xff09;&＃xff1f;

测试

• Kaldi项目测试&＃xff08;1&＃xff09;顺利提取特征、计算相似度分数

代码

papers with code: Speaker Verification &＃43;论文&＃43;代码&＃xff01;&＃xff01;&＃xff01;

声纹识别项目

1. Python &＃43; tensorflow&＃xff1a;声纹识别综述&＃43;一个简易的tensorflow实现的模型&＃xff08;https://github.com/RDShi/voiceprint&＃xff09;

2. Python &＃43; Keras&＃xff1a;基于Kersa实现的中英语音声纹识别

3. 【工程】深度说话人的应用及声纹识别系统的制作 (附完整代码与数据集)

4. 使用tensorflow和densenet神经网路实现语谱图声纹识别,即说话人识别

   配套的 github地址&＃xff1a;https://github.com/jcfszxc/Project

参考&＃xff1a;

1. 语音识别&＃xff08;八&＃xff09;——声纹识别, 地理
2. 声纹识别知识整理
3. 添加链接描述