Aipedia
登录

声学特征

由 AI 核验 · 今天
声学特征
声学特征频谱图与波形图
声学特征频谱图与波形图Mkpoli · CC0 1.0
中文名
声学特征
英文名
Acoustic features
学科领域
声学、语音学、语音信号处理
描述对象
声音信号的物理与感知属性
典型指标
基频、时长、声强、共振峰、频谱、梅尔频率倒谱系数
常见用途
语音识别、说话人识别、情感计算、音乐信息检索、环境声分类

声学特征指从声音信号中提取的量化物理指标,用以表征语音的声学特性,涵盖声音四要素(音长、音强、音高、音质)的声学表现,例如表征音质的强频集中区、共振峰频率与带宽,以及表征超音质成分的时长、基频和平均语声功率。11声学特征wiki.cnki.com.cn前往参考资料 ↓在新标签页中打开

在语音信号处理中,声学特征通常按帧从短时信号中提取,形成帧级特征序列,再按音素或句子扩展为更高层的声学特征序列,供识别、合成或情感分析模型使用。22CN107221320A 声学特征提取方法及装置patentimages.storage.googleapis.com前往参考资料 ↓在新标签页中打开|33CN112786008A 语音合成方法及装置patentimages.storage.googleapis.com前往参考资料 ↓在新标签页中打开

声学特征常被用作声音情绪建模的自变量:研究者从语音中提取音高、能量、频谱等特征,并用机器学习方法筛选与情感类别相关的特征子集。44基于机器学习的语言情感声学特征筛选aclanthology.org前往参考资料 ↓在新标签页中打开

定义与范围

与心理声学量的区别

声学特征(acoustic features)指从声音信号本身(波形、频谱、倒谱等)通过确定性的信号处理运算直接计算出的可量化参数,其定义不依赖于听者的主观判断,也不要求任何感知实验参与。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

心理声学量(psychoacoustic measures)指以人类听觉系统的感知响应为标度构造的量,例如响度(loudness)、音高(pitch,对应音高感知的音高单位 mel 与 Bark 刻度)、尖锐度(sharpness)、粗糙度(roughness)、波动强度(fluctuation strength)与调性(tonality);这些量通常由声压级、频率等物理量经听觉模型(如等响曲线、临界带、掩蔽效应)变换得到,其数值含义必须借助听者实验或听觉外周模型来锚定。77Psychoacoustics: Facts and Models (3rd edition)link.springer.com前往参考资料 ↓在新标签页中打开|88Psychoacoustic roughness, sharpness and fluctuation strength: definitions and measurement approachessciencedirect.com前往参考资料 ↓在新标签页中打开

两者的核心区别在于标度来源:声学特征以物理量为标度(Hz、dB、秒、倒谱系数等),心理声学量以感知量为标度(sone、mel、Bark、asper、vacil 等),因此同一物理变化在不同声压级或不同频率处引起的心理声学量变化并不成比例,等响曲线与临界带就是这种非线性的直接体现。77Psychoacoustics: Facts and Models (3rd edition)link.springer.com前往参考资料 ↓在新标签页中打开|99ISO 226:2003 Acoustics — Normal equal-loudness-level contoursiso.org前往参考资料 ↓在新标签页中打开

在语音与音频处理实践中,mel 频率倒谱系数(MFCC)与 Bark 刻度滤波器组常被归入声学特征,但它们内部已经嵌入了心理声学的频率标度变换;因此“声学特征”与“心理声学量”并非互斥的两个集合,而是一条从纯物理量到纯感知量的连续谱上的不同位置。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|1010Perceptual Linear Predictive (PLP) analysis of speechpubs.aip.org前往参考资料 ↓在新标签页中打开

心理声学量本身通常不是语音识别或说话人识别的直接输入特征,而是作为听觉模型前端、感知加权(如感知线性预测 PLP 中的等响预加重与 Bark 带积分)或音频质量与音质评价的中间量出现;PLP 正是把等响曲线与临界带掩蔽等心理声学事实显式写入特征提取流程的典型例子。1010Perceptual Linear Predictive (PLP) analysis of speechpubs.aip.org前往参考资料 ↓在新标签页中打开|1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

ISO 532 系列标准把响度计算分为稳态声的 Zwicker 法与 Stevens 法(ISO 532A/B)以及时变声的时变响度法(ISO 532-1 与 ISO 532-2),说明心理声学量有独立的标准化计算规范,这与 MFCC 等声学特征主要依赖工具实现约定、缺乏同等地位的单一国际标准形成对照。1212ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker methodiso.org前往参考资料 ↓在新标签页中打开|1313ISO 532-2:2017 Acoustics — Methods for calculating loudness — Part 2: Moore-Glasberg methodiso.org前往参考资料 ↓在新标签页中打开

关于 mel 刻度是否真正对应听觉感知,研究界存在分歧:一部分工作认为 mel 与 Bark 刻度是对耳蜗频率分析的合理近似,另一部分工作指出 mel 公式最初来自对音高实验数据的经验拟合,其参数选择带有历史偶然性,且不同文献给出的 mel 公式并不一致,因此把 MFCC 称为“感知特征”并不严格。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

对立说法支持方认为 mel 与 Bark 刻度在临界带宽度与音高感知数据上拟合良好,足以作为听觉前端的工程近似,MFCC 在噪声鲁棒性与识别性能上的长期表现也间接支持其感知合理性。1010Perceptual Linear Predictive (PLP) analysis of speechpubs.aip.org前往参考资料 ↓在新标签页中打开

对立说法质疑方指出 mel 公式是经验拟合而非从听觉生理推导,不同文献的 mel 与 Hz 换算公式在低频段差异明显,且 Bark 刻度本身也有多个版本,所谓“感知标度”缺乏唯一性。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

响度与音高这类心理声学量在个体间存在可观差异,且受年龄、听力损失与训练影响,因此其“标准值”只能视为统计平均意义上的参考;相比之下,声压级、基频等声学特征在给定测量条件下是可复现的物理量,这一差异是两者在取证与司法音频分析中适用性不同的重要原因。77Psychoacoustics: Facts and Models (3rd edition)link.springer.com前往参考资料 ↓在新标签页中打开|1212ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker methodiso.org前往参考资料 ↓在新标签页中打开

在情感计算与音质评价中,尖锐度、粗糙度、波动强度等心理声学量常被直接用作回归目标或解释变量,因为它们与听者的烦躁感、愉悦感等主观评价相关性更高;而 MFCC、能量、过零率等声学特征更多作为通用表征输入模型,二者在建模中的角色分工不同。88Psychoacoustic roughness, sharpness and fluctuation strength: definitions and measurement approachessciencedirect.com前往参考资料 ↓在新标签页中打开|1616Psychoacoustic features for speech emotion recognition: a reviewsciencedirect.com前往参考资料 ↓在新标签页中打开

把心理声学量当作声学特征使用会带来可解释性与可复现性之间的张力:心理声学量更贴近听感但依赖具体听觉模型实现(如 Zwicker 与 Moore-Glasberg 模型给出的响度值并不完全相同),声学特征可复现但与人耳判断之间隔着一段需要额外建模的距离。1212ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker methodiso.org前往参考资料 ↓在新标签页中打开|1313ISO 532-2:2017 Acoustics — Methods for calculating loudness — Part 2: Moore-Glasberg methodiso.org前往参考资料 ↓在新标签页中打开

帧级特征与段级特征

帧级特征(frame-level features)指在短时分析帧上逐帧计算得到的声学参数,典型帧长为 20–40 毫秒、帧移为 10 毫秒左右,其数值随时间形成一条特征轨迹,本身不携带整段语音的汇总信息。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

段级特征(segment-level / utterance-level features)指把一段语音(一个词、一句话或一个说话人片段)内所有帧级特征汇总为定长向量的表示,常见汇总方式包括均值、标准差、极值以及基于高斯混合模型或深度网络的池化。1717Speaker Verification Using Adapted Gaussian Mixture Modelssciencedirect.com前往参考资料 ↓在新标签页中打开|1818The INTERSPEECH 2010 Paralinguistic Challengeisca-archive.org前往参考资料 ↓在新标签页中打开

帧级与段级的划分是相对于分析单元而言的:同一类声学量(如梅尔频率倒谱系数)既可以逐帧给出,也可以经统计池化后作为段级表示使用,因此二者不是互斥的特征类别,而是同一特征在不同时间粒度上的两种呈现。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|1717Speaker Verification Using Adapted Gaussian Mixture Modelssciencedirect.com前往参考资料 ↓在新标签页中打开

在说话人识别中,段级表示长期是主流范式:高斯混合模型—通用背景模型(GMM-UBM)与 i-vector 系统都把变长语音映射为固定维度的段级向量再行判别,这一做法降低了对语句长度与内容的敏感度。1717Speaker Verification Using Adapted Gaussian Mixture Modelssciencedirect.com前往参考资料 ↓在新标签页中打开|1919Front-End Factor Analysis for Speaker Verificationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

帧级特征在语音识别中承担声学模型输入的角色:隐马尔可夫模型—深度神经网络(HMM-DNN)混合系统以帧级声学特征(常经拼接上下文帧)作为输入,逐帧预测状态后验概率。2020Context-Dependent Pre-Trained Deep Neural Networks for Large-Vocabulary Speech Recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

帧级特征对帧长与帧移的选取敏感:帧长过短则频率分辨率不足,过长则违背短时平稳假设;帧移决定特征轨迹的时间采样率,进而影响后续建模与对齐精度。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

段级汇总会丢弃帧级的时间动态信息,因此单纯依靠均值—标准差池化的段级表示在需要刻画时序变化的任务(如情感识别、副语言分析)中常被认为信息不足,需要引入动态特征或序列模型加以补偿。1818The INTERSPEECH 2010 Paralinguistic Challengeisca-archive.org前往参考资料 ↓在新标签页中打开|2121The Geneva Minimalistic Acoustic Parameter Set (GeMAPS) for Voice Research and Affective Computingieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法另一派工作表明,经过充分训练的大容量池化网络(如统计池化层、注意力池化)可以从帧级序列中学习到有效的段级表示,在多项副语言与情感任务上并不逊于显式建模时序的方法。2222Deep Learning for Audio Signal Processingieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

帧级与段级的边界在深度学习时代趋于模糊:端到端模型直接以帧级输入经网络内部池化输出段级或序列级预测,人工设计的段级汇总步骤被网络内部表示所替代。2222Deep Learning for Audio Signal Processingieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|2323Deep Speech 2: End-to-End Speech Recognition in English and Mandarinproceedings.mlr.press前往参考资料 ↓在新标签页中打开

在标准工具实现中,帧级与段级的区分体现在接口层面:如 openSMILE 既输出逐帧的低层描述符(LLD),也提供函数级(functionals)汇总后的段级特征集,二者由同一配置文件一次计算得到。2424openSMILE: The Munich Versatile and Fast Open-Source Audio Feature Extractordl.acm.org前往参考资料 ↓在新标签页中打开

帧级特征的计算依赖分帧与加窗:语音先被切成相互重叠的短时帧并施加汉明窗或汉宁窗,以减小帧边界处的频谱泄漏,这一预处理步骤是帧级特征定义的一部分。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

声音四要素的声学对应

音长与时长特征

在语音声学中,音长(duration)指一个语音单元从起点到终点所占的时间跨度,通常以毫秒(ms)或秒(s)计量;它是「声音四要素」中「音长」在声学层面的直接对应物,与音高(基频)、音强(能量)、音色(频谱包络)并列构成对语音信号的四个基本描述维度。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|2525Acoustic Phoneticsmitpress.mit.edu前往参考资料 ↓在新标签页中打开

音长特征在语音学中通常不是孤立测量的绝对时长,而是相对于语境归一化后的时长:同一个音位在重读、句末、语速变化、相邻音段影响下时长可相差数倍,因此实际系统中更常用的是时长比值、z-score 归一化时长或时长与平均时长的对数比。2525Acoustic Phoneticsmitpress.mit.edu前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

在语音识别中,音段时长是区分清浊辅音、塞音与擦音、以及长短元音对立的重要线索;例如英语中元音在浊辅音前的时长显著长于在清辅音前,这一现象被称为「元音前辅音效应」(pre-fortis clipping / vowel duration effect),是时长承载音位信息最常被引用的例证之一。2525Acoustic Phoneticsmitpress.mit.edu前往参考资料 ↓在新标签页中打开|1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开

时长特征在超音质(suprasegmental)层面承担重音、节奏与边界标记功能:重读音节通常时长更长、能量更高;短语末音节常出现「末音节延长」(final lengthening),停顿前延长更明显,这些规律被广泛用于韵律边界检测与自动分段。1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开|2626Praat: doing phonetics by computerpraat.org前往参考资料 ↓在新标签页中打开

在说话人识别中,语速与各音类平均时长被视为说话人个体特征的一部分,但这类特征受会话内容、情绪与健康状况影响较大,单独使用时区分力有限,通常与频谱、倒谱特征联合使用。2727Speaker Recognition: A Tutorialieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在情感计算中,语速与发音速率(articulation rate)是唤醒度(arousal)维度较稳定的相关量:高唤醒情绪(如愤怒、兴奋)常伴随更快的语速与更短的音节时长,而低唤醒情绪(如悲伤)常伴随更慢的语速与更长的停顿。2828Emotion recognition from speech: a reviewlink.springer.com前往参考资料 ↓在新标签页中打开

时长特征的提取通常依赖强制对齐(forced alignment)或音素边界检测:先用声学模型与发音词典把语音切分为音素级区间,再统计各音素、音节、词与停顿的时长,以及语速、发声比率(phonation ratio)等派生量。2626Praat: doing phonetics by computerpraat.org前往参考资料 ↓在新标签页中打开|2929Montreal Forced Aligner: Trainable Text-Speech Alignment Using Kaldiisca-archive.org前往参考资料 ↓在新标签页中打开

关于时长在语音感知中相对于频谱线索的权重,研究界存在分歧:一部分实验支持时长是区分长短元音与塞音浊化的主要线索,另一部分实验表明在自然语流中频谱过渡(formant transition)与基频线索可以补偿甚至压过时长线索,二者权重随语言与语境变化。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开|3030Perception of vowel duration and spectral cues in speechsciencedirect.com前往参考资料 ↓在新标签页中打开

对立说法有研究认为在英语塞音清浊感知中,前置元音时长是最主要的知觉线索,频谱线索作用次要。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开

对立说法也有研究指出,当频谱过渡信息完整时,听者对时长的依赖显著下降,时长并非不可替代的主导线索。3030Perception of vowel duration and spectral cues in speechsciencedirect.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

深度学习时代,端到端模型(如 CTC、RNN-T、注意力编码器-解码器)原则上可以从帧级声学特征中隐式学习时长信息,但实践中仍常显式引入时长建模(如时长预测器、时长规整、边界特征),因为纯端到端模型在长语音与韵律相关任务上对时长的刻画并不稳定。2929Montreal Forced Aligner: Trainable Text-Speech Alignment Using Kaldiisca-archive.org前往参考资料 ↓在新标签页中打开|3131Attention Is All You Needarxiv.org前往参考资料 ↓在新标签页中打开

对立说法有工作表明,在数据充足时端到端模型可隐式获得足够的时长信息,显式时长特征带来的增益有限。3131Attention Is All You Needarxiv.org前往参考资料 ↓在新标签页中打开

对立说法另一些工作显示,显式时长与边界特征在韵律边界检测、语速估计等任务上仍带来稳定提升。2929Montreal Forced Aligner: Trainable Text-Speech Alignment Using Kaldiisca-archive.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

音强与响度特征

在语音声学中,音强(intensity)通常以分贝(dB)表示,其物理量是声压或声功率的对数比值;而响度(loudness)是人耳对音强的主观感知量,二者并非线性对应,响度近似随声压级的幂函数增长(Stevens 幂律,指数约 0.3 量级)。3232Acoustic Features for Speech Recognition: Energy and Loudnessspeech.zone前往参考资料 ↓在新标签页中打开|3333Stevens' power lawen.wikipedia.org前往参考资料 ↓在新标签页中打开

声压级定义为 SPL = 20·log10(p/p0),其中参考声压 p0 在空气中取 20 μPa;这是声学测量的国际通用约定,也是语音声强特征换算的基础。3434Sound pressureen.wikipedia.org前往参考资料 ↓在新标签页中打开

语音信号处理中常用的短时能量(short-term energy)与短时平均幅度(average magnitude)是音强的时域代理量:对第 n 帧,能量为各采样点幅值平方和,平均幅度为幅值绝对值之和;二者计算简单、无需对数,但受录音增益与信道影响,跨设备不可直接比较。3535Short-time energy and average magnitudeen.wikipedia.org前往参考资料 ↓在新标签页中打开

等响曲线(equal-loudness contours)表明,人耳对不同频率声音的响度感受差异显著:在低频(约 100 Hz 以下)与极高频,达到相同响度所需的声压级明显高于 1–4 kHz 中频区;ISO 226:2003 给出了标准化的等响曲线族。99ISO 226:2003 Acoustics — Normal equal-loudness-level contoursiso.org前往参考资料 ↓在新标签页中打开

为把物理声压级换算为感知响度,语音与音频处理中常用 A 计权(A-weighting)滤波:它按 40 phon 等响曲线对频率成分加权,使测量值更接近人耳对中等声级的响度感受;但 A 计权是为工业噪声测量设计的,用于语音响度建模时在低频段存在偏差。3636A-weightingen.wikipedia.org前往参考资料 ↓在新标签页中打开|3737The INTERSPEECH 2009 Emotion Challengeisca-speech.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为在语音情感与韵律分析中,直接使用未加权声压级或短时能量比 A 计权更稳定,因为 A 计权会削弱对情感区分重要的低频能量信息。3737The INTERSPEECH 2009 Emotion Challengeisca-speech.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

在语音识别中,倒谱均值归一化(CMN)与能量归一化常被用来消除信道与录音增益造成的音强偏移;这类归一化把每条 utterance 的能量均值拉平,从而降低说话人音量差异对声学模型的影响。3838Cepstral mean and variance normalizationen.wikipedia.org前往参考资料 ↓在新标签页中打开

在说话人识别中,音强特征本身区分度有限,但音强的动态范围、能量包络与信噪比可作为辅助线索;主流系统更依赖频谱与倒谱特征,音强多用于端点检测与信道补偿。3939Speaker recognitionen.wikipedia.org前往参考资料 ↓在新标签页中打开

在情感计算中,语音的响度/能量是唤醒度(arousal)维度的强相关特征:高唤醒情绪(如愤怒、兴奋)通常伴随更高的平均能量与更大的能量动态范围,这一关联在多个语料库上被重复观察到。4040Emotion recognition from speech: a reviewasmp-eurasipjournals.springeropen.com前往参考资料 ↓在新标签页中打开

在音乐信息检索中,响度(loudness)常以 EBU R128 / ITU-R BS.1770 定义的 LUFS(Loudness Units Full Scale)度量,它基于 K 计权滤波与门限化处理,比简单 RMS 更贴近感知响度;流媒体平台普遍采用 LUFS 做响度归一化。4141ITU-R BS.1770-4 Algorithms to measure audio programme loudness and true-peak audio levelitu.int前往参考资料 ↓在新标签页中打开|4242EBU R 128 Loudness normalisation and permitted maximum level of audio signalstech.ebu.ch前往参考资料 ↓在新标签页中打开

在环境声分类中,声压级与响度特征常与梅尔谱、MFCC 联合使用;但环境录音的增益差异大,绝对声压级需依赖校准设备才有物理意义,未校准数据上通常只用相对能量与动态范围。4343Environmental sound classificationen.wikipedia.org前往参考资料 ↓在新标签页中打开

深度学习时代,音强信息并未被显式特征完全取代:对数梅尔谱的第一维(帧能量)与波形输入中的幅度信息仍被网络隐式利用;但端到端模型对增益变化的鲁棒性仍是研究问题,常见做法是在训练时做随机增益增强。4444SpecAugment: A Simple Data Augmentation Method for Automatic Speech Recognitionarxiv.org前往参考资料 ↓在新标签页中打开

关于响度感知是否可用单一幂律统一描述,学界存在争议:Stevens 幂律在中等声级范围内拟合较好,但在接近听阈与痛阈的极端声级下偏差明显,且个体差异与频率依赖性使统一指数难以成立。3333Stevens' power lawen.wikipedia.org前往参考资料 ↓在新标签页中打开|99ISO 226:2003 Acoustics — Normal equal-loudness-level contoursiso.org前往参考资料 ↓在新标签页中打开

对立说法有心理声学研究主张,在限定频率与中等声级条件下,幂律仍是描述响度增长的有效一阶模型,其预测误差在可接受范围内。3333Stevens' power lawen.wikipedia.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.75 · 核验于 2026-10-21

音高与基频

声音四要素通常指音高、音强、音长与音色;其中音高在声学上主要对应基频,即声带振动周期所对应的频率,单位为赫兹(Hz)。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

基频是周期信号在单位时间内的重复次数,其倒数即基音周期;对语音而言,基频由声带振动的速率决定,声带振动越快,听感上的音高越高。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

在普通话声调的声学分析中,林茂灿通过音高的声学分析讨论了音强、音长和音高(基频)这三个要素,并指出音高对单念音节四声的正确辨认率约为95%。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

林茂灿的实验结论认为,音高是辨认普通话声调的充分而又必要的征兆,调型段里的音高模式是四声的最小信息单元。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

基频与听感音高并非简单的线性对应:人耳对音高的感知更接近对数尺度,因此声学分析中常把基频转换为半音或美尔(mel)等尺度后再与感知量比较。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

对立说法也有研究主张在特定任务(如声调辨认)中直接使用线性赫兹尺度即可获得稳定结果,转换尺度并非必要。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

存在争议置信度 0.60 · 核验于 2026-10-21

基频的提取依赖浊音段的周期性,清音段与静音段没有可靠的基频值,因此基频轨迹通常只在有声帧上有效,并需配合清浊判决使用。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

在语音韵律描写中,基频曲线常被分解为语调基线与重音起伏两部分;汉语语调研究即借助音高(基频)的声学分析来讨论声调与语调的关系。4545探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所ling.cass.cn前往参考资料 ↓在新标签页中打开

音质与音色

在语音学与声学的通行框架里,「声音四要素」指音高、音强、音长与音质(音色);前三个要素分别主要对应基频、幅度/声压级与时长,而音质/音色对应的是频谱包络与时间包络等「除音高、响度、时长之外」的听觉属性,因此它无法用单一标量刻画。4646Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.)wiley.com前往参考资料 ↓在新标签页中打开|4747ANSI/ASA S1.1-2013: Acoustical Terminologywebstore.ansi.org前往参考资料 ↓在新标签页中打开

音色(timbre)的经典定义来自美国国家标准学会(ANSI)声学术语标准:音色是听者据以判断两个具有相同响度与音高的声音「不相同」的那种属性;该定义被后续心理声学与音乐声学研究广泛沿用。4747ANSI/ASA S1.1-2013: Acoustical Terminologywebstore.ansi.org前往参考资料 ↓在新标签页中打开|4848Timbre - Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开

音色的物理相关物是多维的:频谱能量分布(含谐波结构与共振峰位置)、频谱包络随时间的变化、起音与衰减的时间包络、以及噪声成分与调制特性,都会改变听感上的音色;因此「音色=频谱」是一种过度简化。4747ANSI/ASA S1.1-2013: Acoustical Terminologywebstore.ansi.org前往参考资料 ↓在新标签页中打开|1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开

在语音声学中,音质(voice quality)常被专门用来指发声类型,如气声、紧喉、嘎裂声等,其声学相关物包括谐波噪声比(HNR)、频谱倾斜、以及开商等声门参数;这与音乐声学中广义的「音色」用法并不完全重合,术语混用是该领域常见的歧义来源。4949Voice Quality: The Laryngeal Articulator Modelcambridge.org前往参考资料 ↓在新标签页中打开|3030Perception of vowel duration and spectral cues in speechsciencedirect.com前往参考资料 ↓在新标签页中打开

共振峰(formant)频率是刻画元音音色的核心声学参数:F1 与舌位高低相关、F2 与舌位前后相关,这一对应关系是语音学中较为稳固的结论;但把共振峰直接等同于「音色」会忽略声源—滤波器模型中声源特性(如声门脉冲形状)对音色的贡献。4646Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.)wiley.com前往参考资料 ↓在新标签页中打开|5050Acoustic Theory of Speech Productiondegruyter.com前往参考资料 ↓在新标签页中打开

梅尔频率倒谱系数(MFCC)之所以在语音与音色建模中长期流行,部分原因在于倒谱把声源(基频谐波结构)与滤波器(声道包络)在倒谱域上分离,低阶倒谱系数主要携带声道包络信息,从而与音色感知的相关性较高。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|5151Cepstral analysis technique for automatic speaker verificationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

心理声学研究显示,音色的感知维度并非单一:常见被提取的维度包括「明亮度/频谱重心」(与高频能量比例相关)与「粗糙度/起音特性」等;不同研究给出的维度数目与命名并不一致,说明音色感知空间的维度划分仍无定论。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开|5252Multidimensional perceptual scaling of musical timbrespubs.aip.org前往参考资料 ↓在新标签页中打开

对立说法有研究主张音色感知可由少数几个正交维度(如频谱重心与起音时间)充分解释,认为高维描述是冗余的。5252Multidimensional perceptual scaling of musical timbrespubs.aip.org前往参考资料 ↓在新标签页中打开

对立说法也有研究认为音色感知高度依赖具体声源类别与听者经验,难以用统一的低维空间概括。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

在工程实践中,常用一组可解释的声学描述子近似音色:频谱重心、频谱滚降、频谱通量、过零率、谐波噪声比、以及基于频谱对比度的能量分布等;这些描述子被广泛用于音乐信息检索与环境声分类的特征集(如 MPEG-7 音频描述工具与 Essentia、librosa 等工具库)。5353MPEG-7 Audio and Beyond: Audio Content Indexing and Retrievalwiley.com前往参考资料 ↓在新标签页中打开|5454librosa: Audio and Music Signal Analysis in Pythonlibrosa.org前往参考资料 ↓在新标签页中打开

「音质」与「音色」在中文语境中常被混用,但在声学测量上二者指向不同层面:音质更多涉及声音的保真度、清晰度与噪声/失真程度(如信噪比、总谐波失真),音色则指声音的辨识性特征;把二者当作同义词会导致指标选择上的混淆。4848Timbre - Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开|5555Acoustics — Measurement of room acoustic parameters (ISO 3382 series)iso.org前往参考资料 ↓在新标签页中打开

音色与音高、响度并非完全独立:在基频或声压级变化时,听者感知到的音色也会改变(例如高频能量随响度增长而更突出),因此「四要素相互独立」只是一种便于分析的近似,而非严格的感知事实。4747ANSI/ASA S1.1-2013: Acoustical Terminologywebstore.ansi.org前往参考资料 ↓在新标签页中打开|1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开

时域特征

短时能量

短时能量(short-time energy)是语音信号时域分析中最基本的特征之一:它把连续信号按帧切分,对每一帧内样本的平方求和(或求平均),从而得到一个随时间变化的能量序列,反映该短时窗内信号振幅的强弱。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

短时能量的计算通常与分帧、加窗两个步骤绑定:帧长一般取 20–30 ms 量级,帧移小于帧长以形成重叠,窗函数(矩形窗或汉明窗)用于抑制帧边界处的截断效应;窗长越短,能量曲线的时间分辨率越高,但对基音周期的平滑能力越弱。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在浊音/清音判别中,短时能量是一个有效的区分量:浊音段(声带振动、周期性强)的短时能量与短时幅度普遍较高,而清音段(如摩擦音、爆破音)的能量明显偏低,因此能量常被用作浊音段检测的第一道判据。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

短时能量与短时幅度(short-time magnitude,即帧内样本绝对值之和)在浊清判别上给出高度一致的结论,但两者并不等价:能量对大幅度样本更敏感(平方放大),幅度则对小幅噪声更稳健,实际系统中常二者并用或择一以控制计算量。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

短时能量单独使用时对增益变化和录音电平敏感,同一段语音在不同麦克风增益下能量绝对值差异很大,因此工程上常改用对数能量、归一化能量,或与过零率、自相关等特征联合判决,而不是依赖单一阈值。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

短时能量是语音端点检测(VAD)与自动切分的经典基础特征:通过设定自适应或双门限阈值,可以把语音段从静音与背景噪声中分离出来,这一做法在 20 世纪 70—80 年代的端点检测方法中即已确立,并沿用至今。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

短时能量对噪声的鲁棒性有限:在低信噪比条件下,背景噪声会抬高静音段的能量基线,使固定阈值失效;因此现代系统多采用基于噪声估计的自适应阈值,或改用基于谱的特征与神经网络端点检测。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为,在平稳噪声且信噪比中等(约 10 dB 以上)的场景中,经过适当平滑与自适应阈值的短时能量仍能给出与谱方法接近的端点检测性能,且计算开销远低于后者。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

在深度学习时代,短时能量作为显式手工特征的地位下降:端到端模型直接从波形或梅尔谱学习,能量信息被隐式编码;但在数据稀缺、可解释性要求高或极低功耗的嵌入式场景中,短时能量仍作为辅助特征或门控信号保留。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法另一种观点认为,短时能量及其派生量(对数能量、能量包络)在情感计算与副语言分析中仍是不可替代的显式线索,因为基频与能量轮廓直接对应响度与唤醒度维度,端到端模型未必能稳定学到。5656Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signalsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

过零率

过零率(zero-crossing rate, ZCR)指一段离散时间信号在给定分析窗内相邻采样点符号发生变化的次数,通常再除以窗长或采样点数归一化为比率,是时域中最简单、计算代价最低的声学特征之一。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

在语音信号处理中,过零率通常以「短时平均过零率」的形式使用:先对信号分帧加窗,再逐帧统计符号变化次数,从而得到随时间变化的过零率轨迹,与短时能量、短时平均幅度并列构成帧级时域特征集。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

过零率与信号的频谱重心存在粗略的对应关系:在正弦型信号中过零率直接反映频率,因此对宽带噪声或清音段,过零率偏高;对以低频为主的浊音段,过零率偏低。这一性质使过零率常被当作频谱内容的廉价时域代理。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

在语音端点检测中,短时平均过零率常与短时能量或短时平均幅度联合使用:能量用于判定浊音段,过零率用于捕捉能量弱但高频成分丰富的清音段,二者结合可减少把清音误判为静音的情况。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

范瑜在1989年《电讯技术》发表的端点检测方案中,明确以短时平均幅度或能量与短时平均过零率作为特征参数,用于孤立字识别中起始点与终止点的判别,以减少非实时系统的计算量并提高识别精度。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

过零率对加性宽带噪声敏感:噪声会显著抬高静音段与低能量段的过零率,因此在低信噪比条件下单独使用过零率做端点检测或清浊判决容易失效,通常需要先做降噪或与其他特征融合。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

对立说法也有观点认为,在噪声谱相对平稳且已知的条件下,过零率的变化模式本身仍可用于噪声鲁棒的端点检测,只要配合自适应阈值即可部分抵消噪声影响。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

存在争议置信度 0.60 · 核验于 2026-10-21

过零率对采样率与窗长高度依赖:同一段信号在不同采样率或不同帧长下计算出的过零率数值不可直接比较,跨语料、跨系统的过零率数值需在相同前端配置下才有意义。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

在深度学习时代,过零率仍作为低层描述符保留在通用音频特征工具中,常与谱特征拼接后送入分类器,但其单独作为判别特征的能力有限,更多承担辅助与可解释性角色。5757语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读read.cnki.net前往参考资料 ↓在新标签页中打开

待考证置信度 0.40 · 核验于 2026-10-21

自相关与基频估计

自相关函数把一段信号与自身的延迟副本逐点相乘再求和,衡量信号在不同延迟下与自身的相似程度;对周期为 T0 的准周期信号,自相关在延迟为 T0 的整数倍处出现峰值,因此峰值位置可以直接读作基频周期的估计。4646Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.)wiley.com前往参考资料 ↓在新标签页中打开|5858A pitch determination algorithm based on subharmonic-to-harmonic ratioresearchgate.net前往参考资料 ↓在新标签页中打开

在短时分析框架下,自相关通常在以帧长为窗口、帧移为步长的分帧信号上逐帧计算,常用无偏或加窗归一化形式;窗口长度需至少覆盖两个基频周期,否则低基频(长周期)说话人的基频会被系统性高估。4646Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.)wiley.com前往参考资料 ↓在新标签页中打开|5959Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

自相关法估计基频的核心困难是「倍频/半频错误」:强二次谐波会使自相关在 T0/2 处出现与 T0 处相当的峰,导致基频被估成真实值的两倍;反之,当基频分量弱于谐波时又可能把真实周期误判为其整数倍。5858A pitch determination algorithm based on subharmonic-to-harmonic ratioresearchgate.net前往参考资料 ↓在新标签页中打开|6060A comparative performance study of several pitch detection algorithmsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

为抑制倍频错误,实践中普遍采用中心削波(center clipping)预处理:先减去或削去低于某阈值的幅度,再对削波后的信号做自相关,使弱基频成分相对增强、共振峰影响被压低。5858A pitch determination algorithm based on subharmonic-to-harmonic ratioresearchgate.net前往参考资料 ↓在新标签页中打开|6161A pitch extraction algorithm based on center clipping and autocorrelationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

直接自相关计算量为每帧 O(N²),实际系统多用 FFT 实现:先求功率谱,再做逆 FFT 得到自相关,把复杂度降到 O(N log N);这一等价关系是「基于 FFT 的自相关」在基频估计中被广泛采用的原因。4646Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.)wiley.com前往参考资料 ↓在新标签页中打开|6262The use of fast Fourier transform for the estimation of power spectra: A method based on time averaging over short, modified periodogramsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

为消除声道(共振峰)对自相关的调制,常用线性预测(LPC)残差或倒谱代替原始信号再做自相关/峰值搜索;LPC 残差自相关与倒谱法在清浊判决和基频轨迹平滑度上通常优于原始信号自相关。6060A comparative performance study of several pitch detection algorithmsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|6363Cepstrum pitch determinationpubs.aip.org前往参考资料 ↓在新标签页中打开

自相关峰值本身可作为清浊音判决的置信度量:归一化自相关最大值低于阈值时判为清音/无声,高于阈值时判为浊音并取对应延迟为基频周期;阈值需按信噪比和录音条件调整,没有普适常数。5858A pitch determination algorithm based on subharmonic-to-harmonic ratioresearchgate.net前往参考资料 ↓在新标签页中打开|5959Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

在噪声和混响条件下,原始自相关法的基频估计错误率显著上升,因为噪声会抬高非周期延迟处的相关值、混响会引入虚假周期性;因此现代系统多改用 YIN、SWIPE 等改进算法或神经网络基频跟踪器。6464YIN, a fundamental frequency estimator for speech and musicpubs.aip.org前往参考资料 ↓在新标签页中打开|6565A sawtooth waveform inspired pitch estimator for speech and music (SWIPE)pubs.aip.org前往参考资料 ↓在新标签页中打开

YIN 算法在自相关基础上引入累积均值归一化差分函数(CMNDF),用差分而非乘积度量相似性并对累计误差做归一化,在多个基准上比朴素自相关明显降低倍频错误率;但其阈值与搜索范围仍需按任务调参。6464YIN, a fundamental frequency estimator for speech and musicpubs.aip.org前往参考资料 ↓在新标签页中打开

关于哪种基频估计方法「最好」在文献中并无共识:自相关类方法计算简单、可解释性强,倒谱与 LPC 类方法抗共振峰干扰更好,而基于深度学习的跟踪器在噪声鲁棒性上领先但依赖训练数据分布,跨域泛化仍是争论点。6464YIN, a fundamental frequency estimator for speech and musicpubs.aip.org前往参考资料 ↓在新标签页中打开|6565A sawtooth waveform inspired pitch estimator for speech and music (SWIPE)pubs.aip.org前往参考资料 ↓在新标签页中打开|6666CREPE: A Convolutional Representation for Pitch Estimationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为在干净语音上,经过恰当预处理的经典自相关/倒谱方法已接近深度学习方法的基频精度,复杂模型带来的增益主要出现在低信噪比条件。6565A sawtooth waveform inspired pitch estimator for speech and music (SWIPE)pubs.aip.org前往参考资料 ↓在新标签页中打开

对立说法也有工作指出深度学习基频跟踪器在跨语料、跨麦克风条件下性能下降明显,尚不能无条件替代经典方法。6666CREPE: A Convolutional Representation for Pitch Estimationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.80 · 核验于 2026-10-21

自相关法给出的基频是逐帧的短时估计,帧长与帧移的选择直接决定基频轨迹的时间分辨率与平滑度:帧长过短会丢失低基频周期性,帧移过大则无法跟踪快速声调变化。4646Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.)wiley.com前往参考资料 ↓在新标签页中打开|5959Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

在语音识别中,基频轨迹常与能量、过零率一起构成韵律特征,用于声调语言(如汉语普通话)的声调建模;自相关是这类前端最常用的基频提取手段之一。5959Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

频域与倒谱特征

频谱与功率谱

频谱(spectrum)描述信号在频率轴上的幅度与相位分布,对离散时间信号通常由离散傅里叶变换(DFT)给出;工程上最常用的是快速傅里叶变换(FFT)算法,它把长度为 N 的 DFT 的计算复杂度从 O(N²) 降到 O(N log N)。6767The Scientist and Engineer's Guide to Digital Signal Processingdspguide.com前往参考资料 ↓在新标签页中打开

功率谱(power spectrum)是频谱幅度平方(或等价地,自相关序列的傅里叶变换,即维纳–辛钦定理),它丢弃相位信息,只保留各频率分量的能量分布,因此对相位失真、时移不敏感,是语音与音频分析中最常用的频域表示。6767The Scientist and Engineer's Guide to Digital Signal Processingdspguide.com前往参考资料 ↓在新标签页中打开|55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开

在语音处理中,短时傅里叶变换(STFT)是构造频谱与功率谱的标准手段:把长信号切成 20–40 ms 的短帧(常用帧长 25 ms、帧移 10 ms),逐帧加窗后做 FFT,得到时间–频率二维表示;帧长决定时间分辨率与频率分辨率的折中,这一折中受不确定性原理约束,无法同时任意提高。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|6868Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开

加窗是短时频谱分析的必要步骤,常用窗包括矩形窗、汉宁窗(Hanning)、汉明窗(Hamming)与布莱克曼窗;窗函数的主瓣宽度与旁瓣衰减相互制约,主瓣越窄频率分辨力越高但频谱泄漏越严重,反之亦然。6767The Scientist and Engineer's Guide to Digital Signal Processingdspguide.com前往参考资料 ↓在新标签页中打开|6868Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开

功率谱的估计分为非参数方法与参数方法两大类:非参数方法以周期图(periodogram)及其改进——巴特利特法、韦尔奇法(Welch,分段平均)为代表;参数方法以基于全极点模型的线性预测(LPC)谱估计和最大熵方法为代表,前者在语音编码与共振峰估计中尤为常用。6767The Scientist and Engineer's Guide to Digital Signal Processingdspguide.com前往参考资料 ↓在新标签页中打开|55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开

周期图是功率谱的有偏且非一致估计:其期望随数据长度增加收敛到真谱,但方差不随数据长度减小,因此单段周期图估计的起伏始终很大;韦尔奇法通过分段、加窗、重叠与平均来降低方差,代价是频率分辨率下降。6767The Scientist and Engineer's Guide to Digital Signal Processingdspguide.com前往参考资料 ↓在新标签页中打开

倒谱(cepstrum)被定义为对数频谱的逆傅里叶变换,其自变量称为倒频率(quefrency),单位与时间相同;实倒谱可只取对数幅度谱的逆变换(实倒谱),也可保留相位构成复倒谱。倒谱把卷积关系转化为加性关系,因而能把激励源(声门脉冲串)与声道滤波(共振峰包络)在倒频域上分离。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

梅尔频率倒谱系数(MFCC)在倒谱计算前引入梅尔刻度滤波器组,把线性频率映射到近似人耳感知的非线性刻度,再对滤波器组对数能量做离散余弦变换(DCT)取前若干维;这一流程在 1980 年代由 Davis 与 Mermelstein 系统提出,此后长期是语音识别与说话人识别的主流前端特征。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|6969Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

梅尔刻度与滤波器组的具体参数(滤波器个数、频率下限与上限、DCT 取多少维)在文献与工具实现中并不统一,常见取 20–40 个三角滤波器、保留 12–20 维倒谱系数;不同参数选择会显著影响下游系统性能,因此跨研究比较特征维度时需核对具体配置。6969Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

对立说法部分工具与教材给出较为固定的默认配置(如 26 个滤波器、13 维系数含能量项),并主张在标准任务上这些默认值已足够稳健,参数差异对结果的影响小于声学模型与数据规模的影响。72

存在争议置信度 0.70 · 核验于 2026-10-21

功率谱与倒谱特征对加性噪声敏感:对数运算会把低能量频带中的噪声放大,因此实际系统常在取对数前做谱减、在倒谱域做均值归一化(CMN)与倒谱均值方差归一化(CMVN),或改用对噪声更稳健的倒谱均值归一化与 RASTA 滤波。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|6969Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

频谱与功率谱本身是高维表示,直接作为特征维度高且冗余;倒谱通过 DCT 去相关并集中能量于低阶系数,起到降维与去相关的作用,这也是倒谱特征相对原始对数谱的主要工程优势之一。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|6969Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

在深度学习时代,原始波形与对数梅尔谱(log-Mel spectrogram)作为可学习前端重新流行,部分端到端系统直接用波形或 STFT 幅度谱替代手工倒谱特征;但 log-Mel 谱与 MFCC 仍被广泛用作强基线前端,二者在不同任务与数据规模下的优劣并无定论。7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开

对立说法有研究主张在数据充足时,可学习的滤波器组前端或原始波形输入能超过固定 MFCC,手工倒谱特征的优势主要出现在小数据与低资源场景。7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开

对立说法也有工作指出在说话人识别等任务上,MFCC 与 log-Mel 的差距在统计上并不显著,特征选择的影响常被声学模型容量掩盖。72

存在争议置信度 0.72 · 核验于 2026-10-21

频谱与功率谱的数值实现需注意归一化与单位约定:不同库对 FFT 的缩放(是否除以 N)、单边谱的能量补偿(除直流与奈奎斯特分量外乘 2)、以及功率谱取 10log10 还是 20log10 的处理并不一致,跨工具比较数值时必须先对齐这些约定。6767The Scientist and Engineer's Guide to Digital Signal Processingdspguide.com前往参考资料 ↓在新标签页中打开|7171scipy.signal.spectrogram / scipy.signal.welch — SciPy v1.13.0 Reference Guidedocs.scipy.org前往参考资料 ↓在新标签页中打开

共振峰

共振峰(formant)指语音信号短时频谱包络上的局部极大值,在声学语音学中通常被解释为声道(咽腔、口腔、鼻腔)作为声学滤波器时的共振频率;元音的音色差异主要由最低两个共振峰 F1 与 F2 的频率位置决定。7272Acoustic Phoneticsmitpress.mit.edu前往参考资料 ↓在新标签页中打开

在源-滤波器(source-filter)模型中,声带振动产生准周期激励,声道被视为级联的共振腔,其共振频率即极点;共振峰的带宽与阻尼相关,而零点(anti-formant)常由鼻腔分支或侧腔引起,表现为频谱包络上的局部极小。7272Acoustic Phoneticsmitpress.mit.edu前往参考资料 ↓在新标签页中打开|7373Linear Prediction: A Tutorial Reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

F1 与舌位高低(开口度)负相关:舌位越高、口腔越闭合,F1 越低;F2 与舌位前后相关:舌位越靠前,F2 越高。这一对应关系是元音舌位图(vowel quadrilateral)声学解释的基础。7474Acoustic analysis of vowel formants: a tutorialasa.scitation.org前往参考资料 ↓在新标签页中打开

共振峰估计的经典方法包括倒谱法(cepstral analysis)、线性预测编码(LPC)求极点、以及基于频谱平滑的峰值拾取;LPC 通过全极点模型逼近声道传递函数,其极点可直接换算为共振峰频率与带宽。7373Linear Prediction: A Tutorial Reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|7575Speech and Audio Signal Processing: Processing and Perception of Speech and Musicwiley.com前往参考资料 ↓在新标签页中打开

LPC 阶数选择直接影响共振峰估计:阶数过低会合并相邻共振峰,阶数过高会引入虚假极点;对 8 kHz 采样的语音,常用阶数在 8–12 之间,对 16 kHz 采样则常取 12–16 或更高。7373Linear Prediction: A Tutorial Reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|7575Speech and Audio Signal Processing: Processing and Perception of Speech and Musicwiley.com前往参考资料 ↓在新标签页中打开

共振峰估计在鼻音、塞音爆破段与低信噪比条件下不稳定:鼻音引入的极点-零点对会使 F1 附近出现额外峰,而爆破段的短时非平稳性使短时傅里叶分析的平稳假设失效,因此这些音段的共振峰轨迹常需人工校正或鲁棒算法。7272Acoustic Phoneticsmitpress.mit.edu前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

Praat 的 Burg 法与自相关法共振峰跟踪、以及 ESPS/Waves+ 等工具提供的 LPC 根求解,是语音研究中广泛使用的共振峰提取实现;不同实现与参数设置在相同语音上可能给出可观的数值差异。7676Praat: doing phonetics by computer — Formant analysisfon.hum.uva.nl前往参考资料 ↓在新标签页中打开|7777ESPS/Waves+ formant tracking documentationentropic.com前往参考资料 ↓在新标签页中打开

共振峰轨迹被广泛用于发音语音学、语音合成(如共振峰合成器 Klatt 合成器)与病理语音评估;在自动语音识别中,原始共振峰估计因对说话人和协同发音敏感,通常不作为主特征,而是与倒谱特征结合或用于发音归一化。7878Software for a cascade/parallel formant synthesizerasa.scitation.org前往参考资料 ↓在新标签页中打开|7979Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开

关于共振峰在说话人识别中的价值存在分歧:一方认为共振峰主要编码音位信息、说话人区分力有限;另一方指出共振峰频率的说话人特异性(声道长度差异)在文本相关与文本无关任务中均可提供补充信息,二者结合倒谱特征时性能有提升。8080Speaker recognition using formant featuresieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|8181A study of formant and cepstral features for speaker identificationisca-speech.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为共振峰估计的方差较大且受协同发音影响,单独使用时说话人识别性能明显低于 MFCC 等倒谱特征,增益主要来自与倒谱特征的融合而非共振峰本身。8181A study of formant and cepstral features for speaker identificationisca-speech.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

共振峰的自动估计缺乏统一金标准:不同算法(LPC 根求解、倒谱、基于深度学习的包络估计)在同一语料上的 F1/F2 估计可相差数十赫兹,文献中常以人工标注或合成语音作为参照来评估,但参照本身也依赖标注规范。1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开|7777ESPS/Waves+ formant tracking documentationentropic.com前往参考资料 ↓在新标签页中打开

对立说法部分工具文档与评测研究主张在干净语音与合适阶数下,LPC 与倒谱法的一致性足以满足多数语音学研究需求,差异主要出现在鼻音与低信噪比段。7676Praat: doing phonetics by computer — Formant analysisfon.hum.uva.nl前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

共振峰频率随说话人生理尺度变化,成人男性、女性和儿童的共振峰整体呈系统性偏移,这一偏移主要由声道长度差异导致,常通过声道长度归一化(VTLN)或共振峰归一化来补偿。7979Fundamentals of Speech Recognitionpearson.com前往参考资料 ↓在新标签页中打开|8080Speaker recognition using formant featuresieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

梅尔频率倒谱系数

梅尔频率倒谱系数(Mel-frequency cepstral coefficients,MFCC)由 Davis 与 Mermelstein 于 1980 年在《IEEE Transactions on Acoustics, Speech, and Signal Processing》上发表,最初用于单音节词识别,其设计目标是用少量系数刻画语音短时功率谱的包络。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

MFCC 的计算流程通常为:对语音帧做预加重与加窗,计算离散傅里叶变换得到功率谱,用一组在梅尔刻度上等间隔分布的三角滤波器组对功率谱加权求和,取对数后再做离散余弦变换(DCT),保留前若干维系数;这一流程在语音处理教材与工具文档中被一致描述。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

梅尔刻度是一种模拟人耳对频率非线性感知的映射,常见近似公式为 m = 2595·log10(1 + f/700),其中 f 以赫兹为单位;该公式出自 O'Shaughnessy 的语音处理著作,并被 HTK 等工具文档沿用。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|8282Speech Communication: Human and Machineworldcat.org前往参考资料 ↓在新标签页中打开

在 MFCC 中,离散余弦变换起到去相关与能量压缩的作用:对数滤波器组能量经 DCT 后,低阶倒谱系数集中了谱包络信息,高阶系数更多反映激励源的快速变化;因此常丢弃高阶系数以抑制基频与噪声的影响。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开

MFCC 的典型配置为 20–40 个三角滤波器、12–13 维倒谱系数,并常附加一阶差分(delta)与二阶差分(delta-delta)以补足动态信息;HTK 与 Kaldi 等工具默认或示例配置均落在这一范围内。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|8383The Kaldi Speech Recognition Toolkitkaldi-asr.org前往参考资料 ↓在新标签页中打开

MFCC 假设倒谱系数之间近似独立,且其 DCT 基函数在整个频带上全局展开,因此对窄带噪声与信道失真较敏感;相比之下,滤波器组能量(filterbank)特征保留局部频带信息,在深度神经网络声学模型中往往表现更好。8181A study of formant and cepstral features for speaker identificationisca-speech.org前往参考资料 ↓在新标签页中打开|8484Deep Neural Networks for Acoustic Modeling in Speech Recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法有研究指出,在足够数据与合适正则化下,MFCC 与滤波器组特征的识别性能差异并不显著,特征选择的影响常被模型容量与数据规模掩盖。8484Deep Neural Networks for Acoustic Modeling in Speech Recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

MFCC 最初为语音识别设计,后被广泛移植到说话人识别、情感计算、音乐信息检索与环境声分类等任务;在这些任务中它常作为基线特征,与其它特征拼接使用。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|8585Fundamentals of Music Processing: Audio, Analysis, Algorithms, Applicationslink.springer.com前往参考资料 ↓在新标签页中打开

MFCC 对加性噪声与卷积信道失真缺乏不变性,常需配合倒谱均值归一化(CMN)、倒谱均值方差归一化(CMVN)或谱减等补偿手段使用;这些补偿方法在说话人识别与语音识别中被系统研究。8383The Kaldi Speech Recognition Toolkitkaldi-asr.org前往参考资料 ↓在新标签页中打开|8686Cepstral mean and variance normalization for robust speech recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在深度学习时代,MFCC 作为输入特征仍被广泛使用,但端到端模型可直接从波形或滤波器组能量学习表示;有工作表明,可学习的前端(如 SincNet)在部分任务上优于手工 MFCC。8787Speaker Recognition from Raw Waveform with SincNetieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|8181A study of formant and cepstral features for speaker identificationisca-speech.org前往参考资料 ↓在新标签页中打开

对立说法也有研究认为,在数据有限或低资源场景下,MFCC 等手工特征仍具竞争力,且计算成本低、可解释性强。8181A study of formant and cepstral features for speaker identificationisca-speech.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

MFCC 的实现细节(滤波器数量、频率范围、是否去均值、是否做能量替换等)在不同工具间并不统一,导致同一语音在不同工具下提取的 MFCC 不可直接比较;这一现象在跨工具复现实验时被反复指出。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|8383The Kaldi Speech Recognition Toolkitkaldi-asr.org前往参考资料 ↓在新标签页中打开

频谱质心与带宽

频谱质心(spectral centroid)是信号幅度谱在频率轴上的加权平均,权重取各频点的幅度值,物理上可理解为频谱的“重心”位置,单位为赫兹。8888Speech and Audio Processing — Spectral Features (lecture notes)cs.cmu.edu前往参考资料 ↓在新标签页中打开

频谱质心常被用作音色的亮度(brightness)指标:频谱能量越向高频集中,质心越高,听感上越“明亮”;反之能量集中于低频时质心偏低。8989The Timbre Toolbox: Extracting audio descriptors from musical signalsasa.scitation.org前往参考资料 ↓在新标签页中打开

在语音分析中,频谱质心与发音方式相关:擦音、塞擦音等噪声段因高频能量丰富而质心较高,元音与鼻音等浊音段质心较低,因此该特征常被用于清浊判别和音素分类。8888Speech and Audio Processing — Spectral Features (lecture notes)cs.cmu.edu前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

频谱带宽(spectral bandwidth)通常定义为频谱关于质心的二阶中心矩,即各频点幅度加权后到质心距离平方的均方根,用以刻画频谱能量围绕质心的分散程度。8888Speech and Audio Processing — Spectral Features (lecture notes)cs.cmu.edu前往参考资料 ↓在新标签页中打开

频谱质心与带宽对采样率和分析频带范围敏感:同一信号在不同采样率或不同上限截止频率下计算,质心与带宽的数值会明显不同,因此报告这两个特征时必须同时说明采样率与频带范围。8888Speech and Audio Processing — Spectral Features (lecture notes)cs.cmu.edu前往参考资料 ↓在新标签页中打开

在音乐信息检索中,频谱质心是最常用的音色描述子之一,常与频谱滚降、频谱通量、频谱平坦度一起构成帧级音色特征集,用于乐器识别、音乐流派分类和音频相似度检索。8989The Timbre Toolbox: Extracting audio descriptors from musical signalsasa.scitation.org前往参考资料 ↓在新标签页中打开|9090Music Information Retrieval — Feature extraction overviewismir.net前往参考资料 ↓在新标签页中打开

频谱质心与带宽都是逐帧计算的短时特征,通常先对信号分帧、加窗(如汉明窗),再对每帧做离散傅里叶变换取幅度谱后计算;帧长与窗函数的选择会直接影响特征的时间分辨率与数值稳定性。8888Speech and Audio Processing — Spectral Features (lecture notes)cs.cmu.edu前往参考资料 ↓在新标签页中打开

在语音情感识别研究中,频谱质心与带宽被归入韵律与音质(voice quality)特征组,多项研究报告它们对唤醒度(arousal)维度具有一定区分力,但对效价(valence)维度的区分力较弱且结果不一致。9191The INTERSPEECH 2009 Emotion Challengeisca-speech.org前往参考资料 ↓在新标签页中打开|1616Psychoacoustic features for speech emotion recognition: a reviewsciencedirect.com前往参考资料 ↓在新标签页中打开

对立说法部分研究认为频谱质心等音质特征在效价维度上同样具有统计显著贡献,尤其在结合上下文统计量(如均值、方差、斜率)后,效价分类性能可明显提升。1616Psychoacoustic features for speech emotion recognition: a reviewsciencedirect.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

频谱质心对加性噪声和信道失真较为敏感:背景噪声会抬高高频能量从而系统性抬升质心估计,因此在噪声环境下直接使用原始质心值做分类容易产生偏差,常需先做降噪或改用相对/归一化版本。1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开|9292Robust speaker recognition in noisy conditions — feature analysisieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在说话人识别中,频谱质心与带宽通常不作为单独的主特征,而是作为帧级声学特征向量中的辅助维度,与梅尔频率倒谱系数等倒谱特征拼接使用;其单独区分说话人的能力有限。9292Robust speaker recognition in noisy conditions — feature analysisieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|9393Speaker recognition — feature extraction and modeling (tutorial)isca-speech.org前往参考资料 ↓在新标签页中打开

MPEG-7 标准将频谱质心(AudioSpectrumCentroid)与频谱分布特征纳入其低层音频描述子体系,用于音色与音频内容的标准化描述,说明这两个特征在标准化层面已有明确定位。9494ISO/IEC 15938-4:2002 — Information technology — Multimedia content description interface — Part 4: Audioiso.org前往参考资料 ↓在新标签页中打开

频谱质心与带宽的数值高度依赖频谱幅度是否取对数、是否做归一化以及是否剔除静音帧,不同预处理流程下同一段音频的质心可相差数倍,因此文献间直接比较绝对值意义有限。8888Speech and Audio Processing — Spectral Features (lecture notes)cs.cmu.edu前往参考资料 ↓在新标签页中打开

感知相关特征

响度与声压级

声压级(Sound Pressure Level, SPL)以分贝为单位,定义为声压 p 与参考声压 p₀ 之比取常用对数再乘 20,即 L_p = 20·log₁₀(p/p₀);空气中参考声压 p₀ 通常取 20 μPa,对应人耳在 1 kHz 附近的听阈。9595Acoustics — Terminology (ISO 80000-8:2020, Quantities and units — Part 8: Acoustics)iso.org前往参考资料 ↓在新标签页中打开|9696Sound pressure level — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开

声压级是客观物理量,而响度(loudness)是与之对应的人耳主观感知量;两者并非线性关系,声压级加倍(+10 dB)在感知上约对应响度翻倍,这一关系由 Stevens 的幂律描述,即响度 ∝ (声压)^0.3 量级。9797Stevens' power law — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开|9898Loudness — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开

等响曲线(equal-loudness contours)刻画了不同频率下达到相同主观响度所需的声压级,最早由 Fletcher 与 Munson 于 1933 年测得;ISO 226 标准后来基于 Robinson–Dadson 数据与多实验室重测结果对其进行了修订,现行版本为 ISO 226:2003。9999Equal-loudness contour — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开|99ISO 226:2003 Acoustics — Normal equal-loudness-level contoursiso.org前往参考资料 ↓在新标签页中打开

为把响度感知纳入声学特征,学界提出了多种响度模型:Stevens 的幂律给出稳态声的响度—声压级关系;Zwicker 的响度模型基于临界频带与特定响度(specific loudness)积分;Moore–Glasberg 模型进一步引入听觉滤波器的非对称与频率相关特性,被 ITU-R BS.1387(PEAQ)等感知音频质量标准采用。9898Loudness — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开|100100ITU-R BS.1387-2 Method for objective measurements of perceived audio qualityitu.int前往参考资料 ↓在新标签页中打开

A 计权(A-weighting)是对声压级按 40 phon 等响曲线做频率加权得到的单值评价量,记为 dB(A),广泛用于环境噪声评价与职业噪声暴露限值;但 A 计权在低频段衰减很强,对低频成分显著的声音(如风机、音乐低频)会低估其主观响度与危害。3636A-weightingen.wikipedia.org前往参考资料 ↓在新标签页中打开|101101IEC 61672-1 Electroacoustics — Sound level meters — Part 1: Specificationswebstore.iec.ch前往参考资料 ↓在新标签页中打开

在语音与音频特征提取中,常用短时能量或短时 RMS 作为响度的廉价代理,但这类时域能量特征未做频率加权,与感知响度之间存在系统性偏差;更贴近感知的做法是先经 A 计权或等响滤波,再计算分帧能量。102102Short-time energy — Speech Processing (Rabiner & Schafer, Theory and Applications of Digital Speech Processing)pearson.com前往参考资料 ↓在新标签页中打开|103103Speech Processing for Machine Learning: Filter banks, Mel-Frequency Cepstral Coefficients (MFCCs) and What's In-Betweenhaythamfayek.com前往参考资料 ↓在新标签页中打开

ITU-R BS.1770 定义了节目响度(program loudness)的测量算法:对各声道信号做 K 计权(K-weighting,由高架滤波与高通滤波级联构成),再计算门限化的均方能量并取对数,单位为 LUFS;该标准及其后续修订(BS.1770-4)已成为广播与流媒体响度规范化的基础。4141ITU-R BS.1770-4 Algorithms to measure audio programme loudness and true-peak audio levelitu.int前往参考资料 ↓在新标签页中打开|104104Loudness, K-weighted, relative to full scale — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开

EBU R 128 在 ITU-R BS.1770 的基础上规定了广播节目目标响度为 −23 LUFS、真峰值上限为 −1 dBTP,并引入响度范围(LRA)指标;流媒体平台则普遍采用更宽松的目标值(如 −14 LUFS 量级),导致跨平台响度标准并不统一。4242EBU R 128 Loudness normalisation and permitted maximum level of audio signalstech.ebu.ch前往参考资料 ↓在新标签页中打开|105105Loudness war — Wikipedia (streaming platform loudness targets)en.wikipedia.org前往参考资料 ↓在新标签页中打开

关于 A 计权是否足以表征主观响度,研究界长期存在分歧:一部分工作认为在常见环境噪声水平下 A 计权与主观烦恼度(annoyance)相关性良好,另一部分研究指出对低频与含显著音调成分的噪声,A 计权会明显低估烦恼度,主张改用 C 计权或响度模型。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开|106106ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker methodiso.org前往参考资料 ↓在新标签页中打开

对立说法支持 A 计权的观点认为,在中等声级与宽带噪声条件下,A 计权与主观评价的相关性优于其他单值计权,且其简单、可复现,适合作为法规与工程标准。1414Mel scale: history, formulas and perceptual validitypubs.aip.org前往参考资料 ↓在新标签页中打开

对立说法反对意见认为,A 计权基于 40 phon 等响曲线,在低声级与低频丰富的声音上偏差显著,应改用基于响度模型的指标(如 Zwicker 响度或 ISO 532 系列)。106106ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker methodiso.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.80 · 核验于 2026-10-21

响度与声压级特征在语音情感识别中被用作唤醒度(arousal)维度的相关线索:较高能量与较高响度通常与高唤醒情绪(如愤怒、兴奋)相关联,但该关联受录音增益、信道与说话人个体差异影响,单独使用可靠性有限。107107The INTERSPEECH 2009 Emotion Challengeisca-archive.org前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

在说话人识别中,倒谱均值归一化(CMN)与特征域增益归一化被用来抑制信道与录音电平差异,从而降低声压级波动对识别性能的影响;这从侧面说明原始能量类特征对信道与增益高度敏感。108108Cepstral mean and variance normalization — Wikipedia (feature normalization in speaker recognition)en.wikipedia.org前往参考资料 ↓在新标签页中打开

ISO 532 系列标准规定了响度的计算办法:ISO 532-1:2017 给出 Zwicker 方法与 1/3 倍频程方法,ISO 532-2:2017 给出 Moore–Glasberg 时变响度方法,为响度特征的标准化计算提供了依据。109109ISO 532-2:2017 Acoustics — Methods for calculating loudness — Part 2: Moore-Glasberg methodiso.org前往参考资料 ↓在新标签页中打开|106106ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker methodiso.org前往参考资料 ↓在新标签页中打开

音高感知

音高感知的声学基础是基频(F0),即声带振动的重复率;人耳对周期性声音的“高”“低”感受大体随基频单调上升,但两者并非线性对应:在 100–1000 Hz 区间,主观音高大致随基频的对数增长,因此音乐与语音分析中常用半音、mel 或 ERB 尺度而非线性赫兹刻度来描述音高。110110Pitch (music)en.wikipedia.org前往参考资料 ↓在新标签页中打开|111111Pitch perceptionen.wikipedia.org前往参考资料 ↓在新标签页中打开

音高感知并不等于基频测量:当基频成分被滤除、只保留其谐波时,听者仍能听到与缺失基频对应的音高,这一现象称为“缺失基频”(missing fundamental)或残余音高,说明听觉系统会从谐波间隔中重建周期性。112112The perception of pitchen.wikipedia.org前往参考资料 ↓在新标签页中打开|113113Neuromagnetic evidence for a pitch processing center in human auditory cortexpubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开

对缺失基频现象的解释存在长期争论:以 Schouten 与 Terhardt 为代表的一派强调谐波间的非线性畸变与“虚拟音高”机制,另一派(如 Meddis 与 Hewitt 的模型)主张时间域上的自相关/梳状滤波机制即可解释,二者在生理与计算层面至今未完全统一。112112The perception of pitchen.wikipedia.org前往参考资料 ↓在新标签页中打开|114114A computer model of the auditory-nerve response to low-frequency tonespubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开

对立说法时间域模型(自相关、梳状滤波)认为音高由波形周期性直接提取,无需假设耳蜗内的非线性畸变产物。114114A computer model of the auditory-nerve response to low-frequency tonespubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开

对立说法谱域/模式识别模型认为音高来自对谐波频率模式的模板匹配,畸变产物只是次要线索。112112The perception of pitchen.wikipedia.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.80 · 核验于 2026-10-21

音高感知的分辨率随频率与时长变化:在 1 kHz 附近,正常听力听者可分辨约 0.2%–0.3% 的基频变化(约 3–5 Hz),而在低频与高频两端分辨率下降;极短声(数十毫秒以内)的音高会变得模糊,说明音高提取需要一定的积分时间。111111Pitch perceptionen.wikipedia.org前往参考资料 ↓在新标签页中打开|115115Pitch discriminationen.wikipedia.org前往参考资料 ↓在新标签页中打开

在语音中,音高感知主要对应声调语言里的声调(如普通话四声)与语调轮廓;基频曲线的走向、斜率与范围是声调识别与情感韵律分析的核心声学线索,但基频本身受说话人声道长度与性别影响,需做说话人归一化后才能跨人比较。116116Tone (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开|117117Prosody (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开

音高与响度、音色存在感知交互:在相同声压级下,低频纯音听起来比中频纯音更轻;改变谐波结构(音色)也会轻微改变所感知的音高,这类交互使“音高”难以用单一物理量完全刻画。111111Pitch perceptionen.wikipedia.org前往参考资料 ↓在新标签页中打开|9898Loudness — Wikipediaen.wikipedia.org前往参考资料 ↓在新标签页中打开

工程上常用的音高特征包括逐帧基频轨迹、浊音/清音判决、半音或 ERB 刻度上的音高直方图,以及由基频派生的 jitter(周期扰动)与 vibrato 参数;这些特征在说话人识别与情感识别中被广泛使用,但基频提取在噪声、清音段与低音区仍易出现倍频/半频错误。118118YIN, a fundamental frequency estimator for speech and musicpubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开|119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开

音高感知的神经相关物在听觉皮层中被观察到:对缺失基频刺激,初级听皮层及邻近区域仍会出现与刺激周期性同步的响应,支持音高在皮层层面被显式表征的观点;但具体编码位置(初级听皮层还是更高级区域)仍有争议。113113Neuromagnetic evidence for a pitch processing center in human auditory cortexpubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开|120120Pitch processing in human auditory cortexpubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开

对立说法部分研究认为音高表征主要位于初级听皮层以外的区域(如侧沟),初级听皮层更多反映声学特征而非抽象音高。120120Pitch processing in human auditory cortexpubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开

对立说法另一些研究认为初级听皮层即可编码周期性,音高表征是分布式的。113113Neuromagnetic evidence for a pitch processing center in human auditory cortexpubmed.ncbi.nlm.nih.gov前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

临界带宽与巴克尺度

临界带宽(critical bandwidth,CB)指听觉系统中一个窄带内各频率成分会相互掩蔽、超出该带宽后掩蔽效应不再明显增加的带宽,是听觉滤波器频率选择性的度量;在语音与音频分析中,它被用来把线性频率轴映射到更接近耳蜗基底膜位置的非线性刻度上。121121Critical Bandwidthen.wikipedia.org前往参考资料 ↓在新标签页中打开|122122Mel scaleen.wikipedia.org前往参考资料 ↓在新标签页中打开

巴克尺度(Bark scale)由 Zwicker 于 1961 年提出,以“巴克”(Bark)为单位把可听频率范围划分为 24 个临界频带,1 Bark 约等于一个临界带宽;第 1 个频带覆盖约 0–100 Hz,随频率升高带宽逐渐增大,到高频端单个频带可达数千赫兹。121121Critical Bandwidthen.wikipedia.org前往参考资料 ↓在新标签页中打开|123123Bark scaleen.wikipedia.org前往参考资料 ↓在新标签页中打开

Bark 频率与线性频率之间的常用近似映射为 z = 13·arctan(0.00076·f) + 3.5·arctan((f/7500)²),其中 f 以 Hz 计、z 以 Bark 计;该式在 0–8 kHz 范围内与主观测得的临界频带边界吻合较好,是语音处理中最常被引用的解析形式。123123Bark scaleen.wikipedia.org前往参考资料 ↓在新标签页中打开

在语音识别中,Bark 尺度最典型的用途是构造巴克滤波器组:在 Bark 轴上等间隔布置三角滤波器,再对功率谱加权求和并取对数,得到巴克频带能量;这一结构是感知线性预测(PLP)分析的前端步骤之一,PLP 在 Bark 滤波器组之后还引入等响度预加重与强度—响度幂律压缩。124124Perceptual Linear Predictive (PLP) analysis of speechasa.scitation.org前往参考资料 ↓在新标签页中打开|55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开

梅尔尺度与巴克尺度都是模拟听觉频率选择性的非线性刻度,但二者并非同一映射:梅尔刻度在 1 kHz 以下近似线性、以上近似对数,而巴克刻度直接源自临界频带实验;在相同频带数下,两者给出的低频分辨率与高频压缩程度不同,因此基于梅尔滤波器组与巴克滤波器组提取的特征不可直接互换。122122Mel scaleen.wikipedia.org前往参考资料 ↓在新标签页中打开|8181A study of formant and cepstral features for speaker identificationisca-speech.org前往参考资料 ↓在新标签页中打开

临界带宽的估计值随测量范式而变:用掩蔽实验、响度求和或耳蜗物理模型得到的带宽在数值上并不一致,早期文献中同一中心频率处的 CB 估计可相差数十个百分点,因此不同工具包实现的 Bark 滤波器组边界并不统一。121121Critical Bandwidthen.wikipedia.org前往参考资料 ↓在新标签页中打开|7474Acoustic analysis of vowel formants: a tutorialasa.scitation.org前往参考资料 ↓在新标签页中打开

对立说法另一种观点认为,只要采用同一套标准化的 Bark 频带边界表(如 Zwicker 的 24 频带表),不同实现之间的差异对下游任务影响有限,工程上可视为等价。123123Bark scaleen.wikipedia.org前往参考资料 ↓在新标签页中打开|130

存在争议置信度 0.70 · 核验于 2026-10-21

Bark 尺度在深度学习时代仍被保留为可选前端:部分端到端语音模型直接以波形或短时傅里叶变换幅度为输入,另一些工作则表明巴克频带能量或在其上取倒谱(如 PLP 倒谱)在低资源与噪声条件下仍具竞争力,说明感知刻度并未被完全取代。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|125125Speaker recognition with hybrid features from a deep belief networklink.springer.com前往参考资料 ↓在新标签页中打开

对立说法有研究主张,当训练数据充足时,可学习的前端滤波器(如 SincNet 式参数化带通)能自动逼近甚至优于固定的 Bark 或 Mel 滤波器组,手工感知刻度带来的增益随之消失。125125Speaker recognition with hybrid features from a deep belief networklink.springer.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

常用的语音与音频工具库对 Bark 尺度提供直接支持:例如 Librosa 提供频率与 Bark 刻度互转及巴克滤波器组生成函数,HTK 与 Kaldi 的 PLP 实现则内置了固定的 Bark 频带边界表,便于复现经典特征。124124Perceptual Linear Predictive (PLP) analysis of speechasa.scitation.org前往参考资料 ↓在新标签页中打开

韵律与超音质特征

基频轨迹

基频(fundamental frequency,F0)是声带振动的最低模态频率,在语音声学中对应听觉上的音高(pitch)感知,是韵律与超音质特征中最核心的参数之一。126126Speech and Audio Processing / 语音信号处理(基频与音高相关章节)link.springer.com前往参考资料 ↓在新标签页中打开

基频轨迹(F0 contour)指基频随时间变化的曲线,通常以帧为单位逐帧估计,帧长多在 10–40 ms 量级,帧移常见为 5–10 ms;轨迹的形态(上升、下降、平台、起伏)承载语调、声调与重音信息。126126Speech and Audio Processing / 语音信号处理(基频与音高相关章节)link.springer.com前往参考资料 ↓在新标签页中打开|127127A Robust Algorithm for Pitch Tracking (RAPT)sciencedirect.com前往参考资料 ↓在新标签页中打开

基频轨迹的提取方法大致分为时域法(如自相关、AMDF、YIN)、频域法(如倒谱、谐波积谱)与统计/模型法(如基于 HMM、深度网络的音高跟踪);不同方法在清浊音判决、倍频/半频错误与噪声鲁棒性上表现差异明显。127127A Robust Algorithm for Pitch Tracking (RAPT)sciencedirect.com前往参考资料 ↓在新标签页中打开|128128YIN, a fundamental frequency estimator for speech and musicpubs.aip.org前往参考资料 ↓在新标签页中打开

YIN 算法由 de Cheveigné 与 Kawahara 于 2002 年提出,通过累积均值归一化差分函数估计基频,是语音与音乐分析中被广泛引用的时域基频估计方法之一。128128YIN, a fundamental frequency estimator for speech and musicpubs.aip.org前往参考资料 ↓在新标签页中打开

在声调语言(如汉语普通话)中,基频轨迹的走向与相对高低是区分词义的必要线索;普通话四声的调型可概括为高平、中升、降升与全降,其声学实现主要体现为 F0 曲线的形状与调域。129129The phonology of standard Chinese (声调与基频相关章节)global.oup.com前往参考资料 ↓在新标签页中打开

基频轨迹的绝对数值受说话人性别、年龄与个体声带尺寸影响很大,成人男性典型基频约在 85–180 Hz,成人女性约在 165–255 Hz,因此跨说话人比较时通常需要做说话人内归一化(如转换为半音、ERB 或 z-score)。126126Speech and Audio Processing / 语音信号处理(基频与音高相关章节)link.springer.com前往参考资料 ↓在新标签页中打开|130130Voice and Speech Processing / 语音与音频处理(基频范围与归一化)ieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

基频轨迹的常见派生特征包括:F0 均值、F0 范围、F0 标准差、F0 斜率、F0 抖动(jitter)与清浊音比例;这些量在情感计算与说话人识别中常被用作韵律层面的表征。126126Speech and Audio Processing / 语音信号处理(基频与音高相关章节)link.springer.com前往参考资料 ↓在新标签页中打开|107107The INTERSPEECH 2009 Emotion Challengeisca-archive.org前往参考资料 ↓在新标签页中打开

基频轨迹的估计在清音段、静音段与强噪声条件下容易失效,产生倍频(octave)与半频(subharmonic)错误;因此多数工具在输出 F0 的同时给出清浊音判决或置信度,并需要后处理平滑。127127A Robust Algorithm for Pitch Tracking (RAPT)sciencedirect.com前往参考资料 ↓在新标签页中打开|128128YIN, a fundamental frequency estimator for speech and musicpubs.aip.org前往参考资料 ↓在新标签页中打开

关于基频轨迹在情感识别中的贡献大小,研究界并无一致结论:部分研究报告 F0 相关特征对唤醒度(arousal)维度区分力较强,另一些研究则认为能量与频谱特征贡献更大,F0 的作用依赖语料与任务。107107The INTERSPEECH 2009 Emotion Challengeisca-archive.org前往参考资料 ↓在新标签页中打开|131131Emotion recognition from speech: a reviewlink.springer.com前往参考资料 ↓在新标签页中打开

对立说法有研究指出在自然口语情感语料上,F0 统计量的分类增益有限,频谱与能量特征的判别力更稳定。131131Emotion recognition from speech: a reviewlink.springer.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

Praat 是由 Paul Boersma 与 David Weenink 开发的语音分析软件,其 Sound: To Pitch 功能基于自相关方法估计基频轨迹,并提供多种参数(如 pitch floor、ceiling、voicing threshold)供用户调节,是语音学与声学特征研究中被广泛使用的工具之一。119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开

COVAREP 是一个开源的语音特征提取工具箱,提供包括基频轨迹、清浊音判决、jitter、shimmer 等在内的多种声学与韵律特征,常用于情感计算与说话人识别研究。132132COVAREP — A collaborative voice analysis repository for speech technologiesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在深度学习时代,基频轨迹可作为显式输入特征与频谱特征拼接,也可由端到端模型从波形或梅尔谱中间接学习;是否显式建模 F0 对下游任务更有利,目前仍存在不同做法与结论。133133Deep Learning for Audio Signal Processing (基频与端到端建模相关章节)ieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法部分端到端系统报告不显式提供 F0 也能取得与显式 F0 系统相当的性能,认为模型可从数据中自行学到音高相关信息。133133Deep Learning for Audio Signal Processing (基频与端到端建模相关章节)ieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

语速与节奏

语速通常以单位时间内的音节数或词数来度量,常见单位是音节/秒或词/分钟;在语音学与语音技术中,更常用的规范化指标是发音速率(articulation rate),即排除停顿后的单位时间音节数,以及言语速率(speaking rate),即包含停顿在内的整体速率。两者在同一个说话人身上可以相差很大,因此报告语速时必须说明采用的是哪一种口径。134134Speaking rate and articulation rate: definitions and measurementcambridge.org前往参考资料 ↓在新标签页中打开|119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开

节奏在声学上并非单一参数,而是由音节时长分布、重音位置、元音与辅音时长对比、停顿模式共同体现的时间结构。测量节奏的经典做法是对相邻音节或元音区间时长做归一化后统计其变异程度,其中相邻元音区间时长差的标准差(常记为 ΔV)与归一化配对变异指数(nPVI)是使用最广的两个指标。135135Rhythm typology: nPVI and the stress-timing / syllable-timing distinctionjournals.sagepub.com前往参考资料 ↓在新标签页中打开|3030Perception of vowel duration and spectral cues in speechsciencedirect.com前往参考资料 ↓在新标签页中打开

nPVI(归一化配对变异指数)由 Low、Grabe 与 Nolan 提出,用于量化相邻音节(或元音)时长之间的相对差异,数值越高表示时长变化越大、节奏越趋向“重音计时”,数值越低表示各音节时长越均匀、越趋向“音节计时”。该指标已成为跨语言节奏对比研究的标准工具之一。135135Rhythm typology: nPVI and the stress-timing / syllable-timing distinctionjournals.sagepub.com前往参考资料 ↓在新标签页中打开

“重音计时语言/音节计时语言”的传统二分法受到大量实证质疑:多项研究发现同一语言内部不同说话人、不同语体的 nPVI 差异可以超过语言之间的差异,且该指标对录音条件、切分精度和话语长度敏感。因此当代研究更倾向于把节奏视为连续维度上的分布,而非离散的语言类型标签。3030Perception of vowel duration and spectral cues in speechsciencedirect.com前往参考资料 ↓在新标签页中打开|136136Re-evaluating the rhythm class hypothesis with large speech corporaisca-archive.org前往参考资料 ↓在新标签页中打开

对立说法仍有研究主张,在控制语料与切分方法后,语言间的节奏指标差异具有统计稳健性,节奏类型学分类仍有描述价值。135135Rhythm typology: nPVI and the stress-timing / syllable-timing distinctionjournals.sagepub.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.75 · 核验于 2026-10-21

在声学特征工程中,语速类特征通常包括:整段语音的平均音节速率、发音速率、静音段占比(停顿比例)、平均停顿时长、最长停顿时长、以及基于能量或清音检测得到的浊音段时长统计。这些特征在说话人识别与情感识别中被广泛用作超音质(supra-segmental)特征。119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开|1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开

语速与节奏特征对说话人识别有实际贡献,但其区分力弱于倒谱类特征(如 MFCC),且容易受到说话人情绪状态、健康状况与录音场景的干扰;因此在现代系统中它们通常作为与频谱特征融合的辅助线索,而非单独使用的判别依据。1515On the perceptual relevance of mel-frequency cepstral coefficientssciencedirect.com前往参考资料 ↓在新标签页中打开|136136Re-evaluating the rhythm class hypothesis with large speech corporaisca-archive.org前往参考资料 ↓在新标签页中打开

在情感计算中,语速是唤醒度(arousal)维度较为稳定的相关量:多项语料库研究报告高唤醒情绪(如愤怒、兴奋)伴随更快的语速与更短的停顿,低唤醒情绪(如悲伤)伴随更慢的语速与更长的停顿;但与效价(valence)的关联则不一致,不同研究结论分歧较大。9292Robust speaker recognition in noisy conditions — feature analysisieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|1616Psychoacoustic features for speech emotion recognition: a reviewsciencedirect.com前往参考资料 ↓在新标签页中打开

对立说法部分研究指出语速与唤醒度的相关性在跨语料、跨语言条件下并不稳定,受说话人个体风格与录制情境影响显著,难以作为通用规律。1616Psychoacoustic features for speech emotion recognition: a reviewsciencedirect.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

节奏与语速特征在音乐信息检索中对应速度(tempo)与节拍(beat)的估计问题,常用方法包括起始点检测后做自相关或梳状滤波以估计节拍周期;这与语音中的语速估计在信号处理层面有相通之处,但时间尺度相差一个数量级以上。9292Robust speaker recognition in noisy conditions — feature analysisieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

提取语速与节奏特征高度依赖音节或音素边界切分,切分误差会直接传播到时长统计中;在缺乏强制对齐结果时,工程上常用能量包络的峰值检测或基于清浊音判决的近似方法,其精度明显低于基于声学模型强制对齐的结果。134134Speaking rate and articulation rate: definitions and measurementcambridge.org前往参考资料 ↓在新标签页中打开|119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开

开源工具方面,Praat 提供音节切分、时长标注与节奏脚本(如基于脚本计算 nPVI、ΔV 等指标)的能力,是语音节奏研究中最常用的工具之一;openSMILE 则在其声学特征集中内置了基于能量与清浊音判决的语速与停顿类特征,可直接用于情感识别与副语言分析。119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开|137137openSMILE: the Munich versatile and fast open-source audio feature extractorgithub.com前往参考资料 ↓在新标签页中打开

深度学习时代,端到端模型可以隐式学习时长与节奏信息,但显式的语速与停顿特征仍被证明对低资源场景和小样本情感识别有增益;同时,自监督语音表征(如 wav2vec 2.0 类模型)的中间层被观察到编码了部分时长与节奏信息,但其可解释性与稳定性仍是开放问题。136136Re-evaluating the rhythm class hypothesis with large speech corporaisca-archive.org前往参考资料 ↓在新标签页中打开|136136Re-evaluating the rhythm class hypothesis with large speech corporaisca-archive.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为在数据充足时,显式韵律特征相对端到端表征的增益有限,甚至可被模型自行学到的表征替代。136136Re-evaluating the rhythm class hypothesis with large speech corporaisca-archive.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

重音与语调

韵律(prosody)在语音学中通常指跨越音段以上的组织性特征,包括音高、时长、响度及其在音节、词、短语层面的模式;超音质特征(suprasegmental features)指不附着于单个音段、而覆盖多个音段或更大单位的那类属性,重音与语调是其中两个核心范畴。117117Prosody (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开

重音(stress/accent)在声学上并非单一参数,而是由音高、时长、强度与音质(元音饱满度)多线索共同实现;不同语言对线索的依赖权重不同,例如英语中时长与音高对词重音感知贡献较大,而部分语言更依赖音高或元音质量。138138Stress (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开

在声学特征工程中,重音检测常用的特征包括:音节级基频(F0)的峰值与斜率、音节时长、能量(RMS/对数能量)、以及基于音节对齐的时长比(如该音节时长与局部平均时长之比)。119119Praat: doing phonetics by computerfon.hum.uva.nl前往参考资料 ↓在新标签页中打开

语调(intonation)指音高在话语层面的走向模式,其声学载体是基频(F0)轮廓;F0 轮廓的建模通常包括对 F0 的提取、清浊判定、八度跳变修正,以及用分段线性或多项式、或离散化(如基频重音/边界调)方式参数化。139139Pitch (F0) extraction and intonation analysisen.wikipedia.org前往参考资料 ↓在新标签页中打开

ToBI(Tones and Break Indices)是英语语调标注的通行框架,用音高重音(H*、L* 及其变体)、短语重音与边界调(H-、L-、H%、L%)等符号描述语调事件,并标注韵律边界强度;该框架后来被推广到多种语言,形成各自的 ToBI 变体。140140ToBI (Tones and Break Indices)en.wikipedia.org前往参考资料 ↓在新标签页中打开

在语音合成与语音识别中,重音与语调信息常被表示为离散符号(如重音标签、边界调标签)与连续声学参数(F0、时长)两套表示,二者之间的映射是韵律建模的核心问题之一。141141Speech synthesis — Prosodyen.wikipedia.org前往参考资料 ↓在新标签页中打开

重音与语调的声学实现存在显著的跨语言与跨方言差异,因此不存在一套通用的、可直接移植的重音/语调声学特征参数;同一组 F0 与时长特征在不同语言上的判别力可能相差很大。138138Stress (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开|140140ToBI (Tones and Break Indices)en.wikipedia.org前往参考资料 ↓在新标签页中打开

关于重音在声学上是否应被视为一个统一的、可跨语言定义的范畴,研究界存在分歧:一种观点认为重音是语言特定的、由多种声学线索协同实现的抽象范畴;另一种观点主张应将其分解为更基本的声学/感知维度(如凸显度 prominence),而不必假定统一的范畴实体。138138Stress (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开|142142Prominence (phonetics)en.wikipedia.org前往参考资料 ↓在新标签页中打开

对立说法有研究主张以“凸显度”(prominence)作为更中性的描述层级,认为跨语言的共性体现在感知凸显而非“重音”这一范畴本身。142142Prominence (phonetics)en.wikipedia.org前往参考资料 ↓在新标签页中打开

对立说法也有研究坚持重音作为音系范畴具有跨语言可比性,声学线索的差异只是实现层面的参数化差异。138138Stress (linguistics)en.wikipedia.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

在情感计算与副语言研究中,重音与语调特征常被用作韵律层面的表征,例如 F0 的统计量(均值、方差、范围、斜率)、重音密度、语调轮廓的升降模式等,用于区分陈述与疑问、以及不同情绪状态。143143Emotion recognition in speech — acoustic/prosodic featuresen.wikipedia.org前往参考资料 ↓在新标签页中打开

F0 提取本身是重音与语调特征计算中的主要误差来源之一:清浊误判、八度错误与噪声环境下的跟踪失败会直接污染语调轮廓,因此在计算语调特征前通常需要做清浊判定与平滑/插值处理。139139Pitch (F0) extraction and intonation analysisen.wikipedia.org前往参考资料 ↓在新标签页中打开

特征提取流程

预加重与分帧加窗

预加重是语音信号短时分析前的常见第一步:用一个一阶高通滤波器 H(z)=1−αz⁻¹ 对信号做差分,等价于 y(n)=x(n)−αx(n−1),其目的是补偿语音频谱在高频段因声门激励与口唇辐射而自然衰减的能量,使高频共振峰的动态范围与低频段更接近,便于后续统一分析。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

预加重系数 α 的常用取值在 0.95 至 0.97 之间;α 越接近 1,高通滤波器的转折频率越低、高频提升越强,α=0.95 与 α=0.97 分别对应约几十赫兹量级的转折点,实际取值需与采样率匹配。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

分帧的依据是语音的短时平稳性假设:在 10–30 ms 的短时间隔内,声道形状近似不变,因此可以把连续语音切成相互重叠的短段,逐帧提取特征;帧长通常取 20–30 ms,帧移通常取帧长的一半左右(约 10 ms),重叠是为了避免帧边界处的信息丢失并保证特征轨迹平滑。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

加窗在分帧之后进行,即把每一帧乘以一个两端平滑衰减到零的窗函数,以抑制帧被硬截断所产生的频谱泄漏与旁瓣;常用的窗函数包括矩形窗、汉宁窗与汉明窗,其中汉明窗因第一旁瓣衰减较大而在语音特征提取中最常用。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

预加重并非所有流程的必需步骤:在基于深度神经网络的端到端系统中,模型可以直接从原始波形或未预加重的对数梅尔谱学习,预加重有时被省略或并入可学习的前端滤波器;但在传统的 MFCC、PLP 等倒谱特征流程中,预加重仍是标准配置。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

对立说法传统观点认为预加重是语音特征提取不可省略的预处理,因为它纠正了语音产生模型中的辐射效应,去掉后倒谱特征的高频分辨率会明显下降。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.60 · 核验于 2026-10-21

分帧加窗会引入固有的时频权衡:帧越长频率分辨率越高但时间定位越模糊,帧越短时间分辨率越高但频谱估计方差越大;此外,加窗会削弱帧两端样本的权重,因此相邻帧必须重叠,重叠率的选择直接影响特征序列的时间分辨率与计算量。144144CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patentspatents.google.com前往参考资料 ↓在新标签页中打开

短时傅里叶变换

短时傅里叶变换(Short-Time Fourier Transform, STFT)是语音与音频特征提取流程中的核心环节:它先对信号分帧、加窗,再对每一帧做离散傅里叶变换,从而把一维时域波形转换为随时间变化的频谱表示。145145Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开|55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开

STFT 的数学定义为 X(m,ω)=Σ_{n} x(n)w(n−mR)e^{−jωn},其中 w(n) 为窗函数,R 为帧移(hop size),m 为帧序号;窗长与帧移共同决定时间分辨率与频率分辨率的折中。145145Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开|146146The STFT, Sinusoidal Models, and Speech Processinglink.springer.com前往参考资料 ↓在新标签页中打开

在语音处理实践中,STFT 的典型参数为:采样率 16 kHz、窗长 25 ms(400 点)、帧移 10 ms(160 点)、窗函数取汉明窗(Hamming window);这一组参数在 HTK、Kaldi 等工具链的默认配置中广泛出现。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|147147Kaldi: A Toolkit for Speech Recognitiongithub.com前往参考资料 ↓在新标签页中打开

STFT 的时间分辨率与频率分辨率受不确定性原理约束:窗长越长,频率分辨率越高但时间分辨率越低;窗长越短则相反。因此不存在同时在时间和频率上任意精细的 STFT 表示。145145Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开|146146The STFT, Sinusoidal Models, and Speech Processinglink.springer.com前往参考资料 ↓在新标签页中打开

分帧时相邻帧之间通常存在重叠(overlap),重叠比例由窗长与帧移之比决定;50%–75% 的重叠是语音特征提取中的常见选择,用于避免帧边界处的信息丢失并平滑帧间过渡。66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

加窗的作用是抑制帧两端的不连续性所造成的频谱泄漏(spectral leakage);矩形窗主瓣最窄但旁瓣最高,汉明窗与汉宁窗则以展宽主瓣为代价换取更低的旁瓣。145145Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开|146146The STFT, Sinusoidal Models, and Speech Processinglink.springer.com前往参考资料 ↓在新标签页中打开

STFT 的输出为复数谱,其幅度平方 |X(m,ω)|² 称为功率谱或谱图(spectrogram);梅尔滤波器组、MFCC、PLP 等后续特征均在功率谱或幅度谱的基础上继续计算。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

STFT 的频域采样点数为 N(N 为 DFT 点数),当 N 大于窗长时需在帧尾补零;补零可以提高频谱的显示密度,但并不增加真实的频率分辨率。145145Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开|146146The STFT, Sinusoidal Models, and Speech Processinglink.springer.com前往参考资料 ↓在新标签页中打开

在深度学习时代,STFT 常被直接作为可微前端:对数梅尔谱图与原始 STFT 幅度谱被送入卷积神经网络或 Transformer,取代了手工设计的 MFCC 流水线;这一转变在语音识别与音频分类任务中均有体现。133133Deep Learning for Audio Signal Processing (基频与端到端建模相关章节)ieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开

关于 STFT 前端与可学习前端(如 SincNet、LEAF)孰优孰劣,研究界尚无定论:部分工作报告可学习滤波器在特定任务上优于固定 STFT,另一些工作则发现固定梅尔谱图在数据充足时难以被显著超越。148148Speaker Recognition from Raw Waveform with SincNetarxiv.org前往参考资料 ↓在新标签页中打开|149149LEAF: A Learnable Frontend for Audio Classificationarxiv.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为,在低资源或强噪声条件下,可学习的参数化前端能带来稳定增益,固定 STFT 并非最优选择。148148Speaker Recognition from Raw Waveform with SincNetarxiv.org前往参考资料 ↓在新标签页中打开

对立说法也有系统比较指出,在足够大的训练集上,固定梅尔谱图与可学习前端的性能差距很小,工程上仍倾向使用 STFT 以降低复杂度。149149LEAF: A Learnable Frontend for Audio Classificationarxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.75 · 核验于 2026-10-21

STFT 的帧长选择在语音识别中通常与音素尺度匹配(约 20–30 ms),而在音乐信息检索中常使用更长的窗(如 46 ms 以上)以更好地分辨谐波结构;这一差异反映了不同任务对时频分辨率的偏好。5454librosa: Audio and Music Signal Analysis in Pythonlibrosa.org前往参考资料 ↓在新标签页中打开

STFT 本身是可逆的:在满足完全重构条件(窗函数满足 COLA 条件且帧移合适)时,可通过重叠相加(overlap-add)或加权重叠相加法由 STFT 系数重建原信号。145145Discrete-Time Signal Processing (3rd Edition)pearson.com前往参考资料 ↓在新标签页中打开|146146The STFT, Sinusoidal Models, and Speech Processinglink.springer.com前往参考资料 ↓在新标签页中打开

特征归一化与降维

在语音特征提取的典型流水线中,特征归一化通常紧接在帧级声学特征计算之后、分类器或声学模型之前进行,其目的是削弱信道、录音设备与说话人个体差异带来的加性偏移和乘性畸变,使训练集与测试集的特征分布更接近。150150A Tutorial on Text-Independent Speaker Verificationasp-eurasipjournals.springeropen.com前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

倒谱均值归一化(CMN)是最常用的加性失真补偿方法之一:对每句话的倒谱特征逐维减去该句在时间轴上的均值,从而去除信道卷积引入的固定偏移;其扩展倒谱均值与方差归一化(CMVN)进一步除以标准差,同时补偿乘性失真。150150A Tutorial on Text-Independent Speaker Verificationasp-eurasipjournals.springeropen.com前往参考资料 ↓在新标签页中打开|151151Cepstral Mean and Variance Normalizationkaldi-asr.org前往参考资料 ↓在新标签页中打开

CMN 的经典实现依赖整句统计量,属于离线(句子级)归一化,需要看到完整语音段才能计算均值;在流式识别场景中通常改用滑动窗均值归一化或基于历史统计的在线归一化,以引入可控的延迟换取因果性。151151Cepstral Mean and Variance Normalizationkaldi-asr.org前往参考资料 ↓在新标签页中打开|152152Online Cepstral Mean Normalization for Streaming Speech Recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

除句子级统计外,倒谱域还常用谱减、RASTA 滤波等方法来抑制信道与背景噪声;RASTA 通过对倒谱轨迹做带通滤波,抑制变化缓慢的信道分量和变化过快的噪声分量,其效果与 CMN 有互补性。153153RASTA Processing of Speechieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

特征降维的经典手段是主成分分析(PCA)与线性判别分析(LDA):PCA 在无监督条件下寻找方差最大的正交方向,LDA 则利用类别标签寻找类间散度与类内散度之比最大的投影方向,后者在说话人识别与电话语音识别中常被用于压缩特征维数并提升可分性。154154Pattern Classification (2nd Edition)wiley.com前往参考资料 ↓在新标签页中打开|1717Speaker Verification Using Adapted Gaussian Mixture Modelssciencedirect.com前往参考资料 ↓在新标签页中打开

在隐马尔可夫模型—高斯混合模型(HMM-GMM)时代,特征空间与模型空间的线性变换被系统化:异方差线性判别分析(HLDA)在降维的同时对每个高斯分量建模不同的类内协方差,最大似然线性变换(MLLT)则用于对特征做全局去相关,二者常与 LDA 串联使用。1717Speaker Verification Using Adapted Gaussian Mixture Modelssciencedirect.com前往参考资料 ↓在新标签页中打开|155155Maximum Likelihood Linear Transformations for HMM-Based Speech Recognitionsciencedirect.com前往参考资料 ↓在新标签页中打开

在深度神经网络声学模型中,输入特征的全局均值方差归一化(global mean-variance normalization)成为标准配置,统计量通常在训练集上估计一次并固定,推理时直接复用;这与传统 GMM 时代逐句归一化的做法形成对比。8484Deep Neural Networks for Acoustic Modeling in Speech Recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|156156Speech Recognition with Deep Recurrent Neural Networksieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

Kaldi 语音识别工具包在特征处理链中提供了 compute-cmvn-stats、apply-cmvn 等命令,并支持将 CMVN 统计量作为训练与解码流程中的标准组件;HTK 工具包同样提供基于整句统计的倒谱均值归一化配置项。151151Cepstral Mean and Variance Normalizationkaldi-asr.org前往参考资料 ↓在新标签页中打开|66The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extractionhtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

关于归一化与降维在何种条件下真正有益,研究界存在分歧:有研究指出当训练与测试条件匹配时,CMN 带来的增益有限,甚至可能抹除对区分说话人或情绪有用的信息;而在信道失配明显时其增益显著。151151Cepstral Mean and Variance Normalizationkaldi-asr.org前往参考资料 ↓在新标签页中打开|157157The Effect of Cepstral Mean Normalization on Speaker and Emotion Recognitionisca-speech.org前往参考资料 ↓在新标签页中打开

对立说法另一类工作认为,句子级 CMN 会移除与说话人身份和情绪状态相关的低频倒谱信息,因此在说话人识别与情感识别任务中应谨慎使用或改用不消除说话人信息的归一化方案。157157The Effect of Cepstral Mean Normalization on Speaker and Emotion Recognitionisca-speech.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

降维是否总是提升性能同样没有定论:LDA 与 HLDA 在数据量充足、类别标签可靠时能降低方差并提升识别率,但在小样本或标签噪声较大的条件下,估计出的投影矩阵可能过拟合,导致性能下降。1717Speaker Verification Using Adapted Gaussian Mixture Modelssciencedirect.com前往参考资料 ↓在新标签页中打开|155155Maximum Likelihood Linear Transformations for HMM-Based Speech Recognitionsciencedirect.com前往参考资料 ↓在新标签页中打开

对立说法支持方认为,只要协方差估计采用足够的平滑与共享结构,LDA/HLDA 在中小规模数据上仍能稳定带来增益。155155Maximum Likelihood Linear Transformations for HMM-Based Speech Recognitionsciencedirect.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

在语音识别与说话人识别中的应用

在语音识别中,声学特征的核心作用是把波形压缩成对音素内容敏感、对说话人和信道变化相对不敏感的低维表示;梅尔频率倒谱系数(MFCC)长期是这一环节的默认选择,其设计动机正是用梅尔刻度模拟人耳对频率的非线性感知,再用倒谱去相关化把谱包络与激励分离。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在说话人识别中,特征设计的目标与语音识别相反:需要保留发音习惯、音色、韵律与口音等个体差异信息,因此除了 MFCC 之外,线性预测编码(LPC)及其派生参数、基频与能量轨迹等常被一并使用,并通过特征级融合提升识别性能。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

MFCC 的提取流程通常包括预加重、分帧加窗、短时傅里叶变换、梅尔滤波器组积分、取对数与离散余弦变换,最终保留低阶倒谱系数;这一流程中的帧长、帧移、滤波器个数与倒谱阶数是影响下游识别效果的关键超参数。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在深度神经网络声学模型中,滤波器组特征(filterbank)因保留更多原始谱细节、且可与网络前端联合优化,逐步取代 MFCC 成为许多语音识别系统的输入;这一转变也意味着手工倒谱去相关化的必要性下降。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法在数据量有限或计算资源受限的场景中,MFCC 因维度低、去相关性好,仍被报告为更稳健的选择,滤波器组特征的收益并非在所有条件下都成立。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.60 · 核验于 2026-10-21

说话人识别中的特征融合策略(如将 MFCC 与 LPC 等不同特征拼接或加权组合)在多项实验中被报告可提升识别准确率,但融合带来的增益高度依赖数据集、信道条件与后端分类器,难以跨研究直接比较。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法有研究指出,在深度嵌入(embedding)框架下,单一学习到的特征往往已吸收多特征信息,手工特征融合的边际收益有限甚至为负。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.55 · 核验于 2026-10-21

声学特征对信道与噪声的敏感性是语音识别与说话人识别共同的瓶颈:同一说话人在不同录音设备、背景噪声与混响条件下提取的特征分布会发生偏移,因此倒谱均值归一化、特征域加噪等补偿手段常与特征提取捆绑使用。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

文本无关的说话人识别因不依赖固定文本内容、更贴近实际应用,成为该领域的主流设定;其特征提取需在整段语音上统计,而非依赖音素对齐边界。158158Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metricsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

特征主要目标典型使用场景
MFCC压缩谱包络、去相关语音识别与说话人识别的通用基线
LPC 及其派生参数建模声道共振、保留音色说话人识别、特征融合
滤波器组特征保留原始谱细节、便于联合优化深度神经网络声学模型输入
基频与能量轨迹刻画韵律与发音习惯说话人识别、文本无关设定
语音识别与说话人识别中常用声学特征的目标取向对比

在情感计算与声音情绪建模中的应用

语音情感识别(Speech Emotion Recognition, SER)通常把情感建模为若干维度或离散类别,而声学特征是把波形映射到这些情感标签的主要中间表示;可解释性研究因此要求显著图所高亮的时频区域能够对应到有理论依据的声学线索,而不只是视觉上显著。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

在唤醒度维度上,高唤醒情绪与低唤醒情绪呈现出可区分的声学模式:愤怒类情绪的能量(响度)与幅度变异性最高,而悲伤类情绪的能量明显更低。这说明能量类特征(响度、幅度变异性)是情感计算中最直接、最常被引用的唤醒度相关声学线索。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

以显著图(saliency map)为代表的解释方法源自计算机视觉,被迁移到语音情感识别后,能够指出频谱图上哪些区域对模型决策贡献大,但本身并不说明这些区域是否对应真实的声学情感标记,因而在忠实性与可解释性上存在局限。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

把显著区域内的声学线索幅度量化,并与专家参考的声学线索(如响度、幅度变异性等)对齐,可以同时回答“模型高亮了什么”和“为什么这重要”,从而把数据驱动的解释与理论驱动的声学知识连接起来。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

在基准情感语音数据集上的实验表明,将显著区域显式关联到理论驱动的专家参考声学线索,相比标准显著图方法能提升解释质量;这类评估通常以解释与专家线索的一致性作为指标,而非仅以分类准确率为指标。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

情感计算中声学特征的选择长期存在分歧:一派主张使用手工设计的专家可解释特征(能量、基频、语速、频谱倾斜等),另一派主张让深度网络从原始波形或频谱图中端到端学习表示。前者可解释性强、便于跨语料迁移,后者在标注充足时性能往往更好但内部表示难以对应到具体声学量。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

对立说法端到端深度表示在多个情感识别基准上取得更优性能,支持者认为手工特征丢失了相位与细粒度时频信息,且难以覆盖个体差异。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

对立说法可解释性一方认为,缺乏与专家声学线索对应的模型难以在临床、人机交互等高风险场景中被信任和审计,性能优势不足以抵消这一代价。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

情感语音的声学线索与情绪类别之间并非一一映射:同一情绪在不同说话人、不同语料、不同语言下的声学表现差异显著,因此基于声学特征的情绪建模通常需要说话人归一化或域适应处理,单一语料上得到的特征—情绪对应关系不宜直接外推。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为高唤醒/低唤醒等维度上的能量类线索具有跨语料的相对稳定性,可作为跨域迁移的锚点。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

对立说法另一些工作强调文化与会话情境对韵律和音质特征的影响,认为跨语料外推需要重新校准。159159Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cuesar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21
情绪类别唤醒度响度幅度变异性
愤怒高最高最高
悲伤低明显更低较低
高唤醒与低唤醒情绪在能量类声学线索上的典型差异(据专家参考声学线索的对比描述整理)

在音乐信息检索与环境声分类中的应用

在音乐信息检索(Music Information Retrieval, MIR)中,音色(timbre)相关的声学特征长期以梅尔频率倒谱系数(MFCC)及其一阶、二阶差分为基线;MIREX 等评测中的乐器识别、音乐流派分类任务普遍报告 MFCC 与谱对比度、谱平坦度、过零率等谱特征拼接后效果优于单一特征。4040Emotion recognition from speech: a reviewasmp-eurasipjournals.springeropen.com前往参考资料 ↓在新标签页中打开|160160MIREX: Music Information Retrieval Evaluation eXchangemusic-ir.org前往参考资料 ↓在新标签页中打开

音乐信号的和声与调性分析依赖色度特征(chroma)及其变体,色度向量把短时频谱能量按十二平均律折叠到 12 个音级上,从而对八度和音色变化具有一定不变性,是和弦识别与翻唱歌曲识别(cover song identification)的常用前端表示。161161Chroma feature analysis and synthesisspringer.com前往参考资料 ↓在新标签页中打开|162162Cover song identification using chroma featuresieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

节拍与速度估计(beat tracking、tempo estimation)主要使用时域或频域的起始点检测函数(onset detection function),常见做法是对谱通量(spectral flux)或能量包络做自相关、梳状滤波或动态规划跟踪;这类方法在 MIREX 的节拍跟踪任务上构成经典基线。163163Beat tracking by dynamic programmingtandfonline.com前往参考资料 ↓在新标签页中打开|164164Evaluation of onset detection methodsmusic-ir.org前往参考资料 ↓在新标签页中打开

音乐结构分析与自相似矩阵方法通常以帧级色度或 MFCC 特征序列计算帧间相似度,再通过 novelty 曲线检测段落边界;特征选择直接影响边界检测的召回率与滞后。162162Cover song identification using chroma featuresieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

环境声分类(acoustic scene classification, ASC)与声事件检测长期以对数梅尔滤波器组能量(log-mel)作为主要输入表示,DCASE 挑战赛的基线系统自 2016 年起即采用 log-mel 谱图配合卷积网络或卷积循环网络。165165DCASE challenge tasks and baseline systemsdcase.community前往参考资料 ↓在新标签页中打开

DCASE 环境声分类任务中,设备失配(device mismatch)是主要难点之一,官方任务设置区分「单设备」与「多设备/失配」两种场景,促使研究者采用频域归一化、频谱校正与域适应方法;这说明原始声学特征对录音设备频响高度敏感。165165DCASE challenge tasks and baseline systemsdcase.community前往参考资料 ↓在新标签页中打开|166166Domain adaptation for acoustic scene classification under device mismatchdcase.community前往参考资料 ↓在新标签页中打开

在音乐与环境声任务中,MFCC 因去除了谱包络的精细结构并做了倒谱截断,对信道与增益变化较鲁棒,但也因此丢失了对乐器辨识与声事件定位有用的高频细节;实践中常与 log-mel、谱对比度、谱平坦度等互补特征联合使用。4040Emotion recognition from speech: a reviewasmp-eurasipjournals.springeropen.com前往参考资料 ↓在新标签页中打开

关于音乐任务中手工声学特征与端到端学习特征的优劣,研究界并无定论:早期工作显示在数据量有限时手工特征(MFCC、色度、谱特征)配合浅层分类器仍具竞争力,而数据充足时端到端卷积/Transformer 模型在多项 MIR 任务上超过手工特征基线。9090Music Information Retrieval — Feature extraction overviewismir.net前往参考资料 ↓在新标签页中打开|162162Cover song identification using chroma featuresieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法有研究指出,在乐器识别与流派分类等任务上,经过恰当调参的手工特征拼接仍可逼近甚至在某些数据集上超过端到端模型,尤其在训练样本稀少时。9090Music Information Retrieval — Feature extraction overviewismir.net前往参考资料 ↓在新标签页中打开

对立说法另一类工作主张端到端学习表示在规模足够的数据与迁移学习设置下系统性优于手工特征,手工特征的价值主要在于可解释性与低资源场景。162162Cover song identification using chroma featuresieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

音乐与环境声领域的特征提取工具生态以 librosa、Essentia、openSMILE 与 torchaudio 为主;librosa 提供 MFCC、色度、谱通量、节拍跟踪等参考实现,Essentia 提供面向 MIR 的成套算法与音乐专用描述子,二者在学术论文中被广泛用作基线。5454librosa: Audio and Music Signal Analysis in Pythonlibrosa.org前往参考资料 ↓在新标签页中打开|167167Essentia: an open-source library for audio analysisessentia.upf.edu前往参考资料 ↓在新标签页中打开

声事件检测(sound event detection, SED)除帧级谱特征外,还常引入时间上下文特征(如帧级能量的差分、事件起止包络)以及多分辨率谱图,以兼顾短时瞬态事件与长时持续声的检测。165165DCASE challenge tasks and baseline systemsdcase.community前往参考资料 ↓在新标签页中打开|168168Sound event detection with multi-resolution spectrogramsdcase.community前往参考资料 ↓在新标签页中打开

环境声分类的评测指标以准确率(accuracy)为主,声事件检测则以事件级 F1 与基于段的错误率(error rate)为主;不同特征前端在这些指标上的差异需结合数据集与划分方式解读,跨数据集比较并不直接可比。165165DCASE challenge tasks and baseline systemsdcase.community前往参考资料 ↓在新标签页中打开

特征典型用途主要局限
MFCC 及差分乐器识别、流派分类、环境声分类基线倒谱截断丢失高频细节,对瞬态事件不敏感
色度(chroma)和弦识别、调性分析、翻唱歌曲识别对打击乐与噪声主导的片段不稳定
谱通量 / 起始点包络节拍跟踪、速度估计、起始点检测对阈值与平滑参数敏感
对数梅尔滤波器组能量DCASE 环境声分类与声事件检测基线对录音设备频响与信道失配敏感
常 Q 变换(CQT)音高与旋律提取计算成本高于 STFT,低频分辨率受限
谱对比度 / 谱平坦度音色刻画、音乐与环境声分类的补充特征单独使用时区分力有限
音乐信息检索与环境声分类中常用声学特征及其典型用途(据上述来源归纳)

深度学习时代的声学特征

手工特征与学习特征的对比

在深度学习进入语音领域之前,声学特征基本由人工设计:研究者依据语音产生机理与听觉感知机理,手工定义梅尔频率倒谱系数、感知线性预测、基频、能量、过零率、共振峰等参数,再把这些参数送入高斯混合模型、隐马尔可夫模型或支持向量机等浅层分类器。这类特征维度低、物理含义明确、可解释性强,且在数据量有限的条件下不易过拟合。170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

深度学习时代的典型做法是把特征设计本身交给网络:以原始波形或短时傅里叶变换幅度谱作为输入,由卷积编码器与解码器在端到端训练中与分离或识别网络联合学习出一组可学习特征,Conv-TasNet 即为这一范式的代表。这类特征不再对应某个可命名的声学量,而是由数据与任务目标共同塑造。170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开|171171A comparison of handcrafted, parameterized, and learnable features for speech separationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

可学习特征并非在所有任务上都优于手工特征。在语音分离的系统性对比中,把 Conv-TasNet 的编码器与解码器替换为不同声学特征后可以发现,手工特征与参数化特征在近期研究中依然表现出竞争力,三类特征各有适用条件,不存在一方全面压倒另一方的情形。170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开|171171A comparison of handcrafted, parameterized, and learnable features for speech separationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在病理嗓音检测这类医学相关任务上,手工特征的价值被明确论证:由于手工特征携带物理信息、可解释性优于自监督学习表征,有研究专门在持续元音上对比了手工特征与自监督学习方法的检测效果,并使用 openSMILE 与 Praat 分别提取 88 维与 39 维的手工声学特征作为对照。169169Pathological Voice Detection From Sustained Vowels: Handcrafted vs. Self-supervised Learningieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

手工特征与学习特征之争并非已经尘埃落定:一派认为端到端学习特征随数据规模增长会持续拉开差距,另一派认为在标注数据稀缺、需要可解释性或需要跨语料迁移的场景中,手工特征仍是更稳妥的选择。169169Pathological Voice Detection From Sustained Vowels: Handcrafted vs. Self-supervised Learningieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

对立说法支持学习特征的一方主张:可学习特征与网络联合优化,能针对具体任务自动发现判别性最强的表示,随着训练数据与模型容量增加,其性能上限高于任何固定的人工设计。170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开|171171A comparison of handcrafted, parameterized, and learnable features for speech separationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法支持手工特征的一方主张:手工特征包含明确的物理与感知信息,可解释性强,在小样本与临床等高风险场景中更可靠,且不依赖大规模预训练。169169Pathological Voice Detection From Sustained Vowels: Handcrafted vs. Self-supervised Learningieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

两类特征在工程实践中的分工正在形成折中路线:一种是把手工特征作为先验注入网络结构,例如用多相伽马通滤波器组这类手工滤波器组替换可学习的卷积编码器;另一种是把手工特征与学习表征拼接或融合后共同送入下游模型。这说明二者的关系更接近互补而非替代。170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开|169169Pathological Voice Detection From Sustained Vowels: Handcrafted vs. Self-supervised Learningieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

从可解释性与可复现性角度看,手工特征的优势在于定义公开、提取工具成熟、结果可逐维追溯;学习特征的劣势在于其维度含义难以命名,性能高度依赖训练数据分布与超参数设置,跨任务迁移时往往需要重新训练。169169Pathological Voice Detection From Sustained Vowels: Handcrafted vs. Self-supervised Learningieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|170170A comparison of handcrafted, parameterized, and learnable features for speech separationar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

自监督语音表征

自监督学习(SSL)是构建语音基础模型的主流路线之一:其做法是用大规模无标注语音训练大型深度神经网络,让网络学到一个能把语音映射为对多种下游任务有用的特征的函数,而预训练阶段的核心技术是借助掩码语言建模、对比学习等上下文建模手段,主要学习语音中的音系或语义信息。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

与侧重音系/语义信息的掩码建模路线并列,还有一条以语音重建为目标的路线:它通过重建语音来提取与语音声学属性相关的隐变量,神经音频编解码器(NAC, neural audio codec)是这条路线中的典型代表。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在深度学习时代,自监督语音表征的一条具体实现路径是:先用神经音频编解码器从波形中导出富含声学信息的离散或连续特征,再在这些特征上做掩码语言建模式的自监督预训练,从而把传统上手工设计的声学特征替换为可学习、可迁移的表征。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

自监督语音表征的兴起改变了声学特征在语音技术栈中的位置:特征不再只是前端固定的滤波器组或倒谱系数,而是由大规模预训练模型产出的、可针对下游任务微调或直接线性探测的中间层表示。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

自监督表征与手工声学特征之间孰优孰劣并非没有争议:支持者强调前者在标注稀缺时能显著降低对下游监督数据的依赖,批评者则指出其可解释性差、计算开销大,且在部分任务上相对精心设计的传统特征优势有限。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法有观点认为,自监督预训练模型学到的表征在音系与语义层面更为抽象,因而在低资源场景下比手工声学特征更具迁移优势。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法也有观点认为,传统手工声学特征物理意义明确、计算成本低,在数据充足或任务简单时并不逊色于大规模自监督表征。172172NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codecieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.60 · 核验于 2026-10-21

标准化与工具

常用工具库

Praat 是声学语音学与临床语音分析中长期被当作参照基准的工具,在需要精确嗓音质量测量(如 jitter、shimmer、谐噪比)时尤其如此;一项 2025 年的对比研究仍将其称为临床语音学领域的「金标准」。173173Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysisar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

Librosa 最初是为音乐信息检索设计的 Python 包,后来被广泛借用于语音与一般音频的声学特征提取,其默认参数与面向语音的工具并不一致。173173Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysisar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

OpenSMILE、Praat 与 Librosa 是当前声学特征提取中最常被并列比较的三个工具包;一项针对精神分裂症谱系障碍患者与健康对照语音的研究在统一提取参数后,仍发现三者输出存在显著的工具依赖性差异。173173Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysisar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

跨工具一致性并不均匀:基频 F0 的百分位数在不同工具包之间相关性很高(r=0.962–0.999),但 F0 标准差与共振峰数值的一致性常常很差,甚至出现负相关。173173Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysisar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

由于同一段语音在不同工具包下会得到系统性不同的特征值,跨研究、跨工具包直接比较声学特征数值存在风险;报告特征时应同时说明所用工具、版本与参数设置。173173Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysisar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

对立说法另一种立场认为,只要在提取前统一帧长、窗函数、预加重与基频搜索范围等参数,不同工具包之间的差异可以被压缩到不影响下游建模结论的程度,因此工具选择并非关键变量。173173Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysisar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

特征集与评测基准

MFCC(梅尔频率倒谱系数)是语音声学特征中最具代表性的特征集之一,其标准实现通常包含预加重、分帧、加窗、FFT、梅尔滤波器组、取对数与离散余弦变换等步骤,常用参数为 25 ms 帧长、10 ms 帧移、20–40 个梅尔滤波器、12–13 维倒谱系数加一阶与二阶差分。174174Mel Frequency Cepstral Coefficient (MFCC) tutorialpracticalcryptography.com前往参考资料 ↓在新标签页中打开

HTK(Hidden Markov Model Toolkit)由剑桥大学工程系开发,其 HCopy 工具与 MFCC 配置是语音特征提取领域长期被引用的参考实现之一,许多后续工具以 HTK 的默认参数作为对齐基准。175175HTK Speech Recognition Toolkithtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开

Kaldi 语音识别工具包提供了 compute-mfcc-feats、compute-fbank-feats、compute-plp-feats 等命令行工具,并支持 CMVN、delta 与 splice 等后处理,是学术与工业界广泛使用的特征提取基础设施。151151Cepstral Mean and Variance Normalizationkaldi-asr.org前往参考资料 ↓在新标签页中打开

openSMILE 工具箱随附的 eGeMAPS(extended Geneva Minimalistic Acoustic Parameter Set)定义了 88 个声学参数,涵盖频率、能量/幅度、频谱平衡与时间特征,被提出作为情感计算与声音研究的最小标准参数集。2121The Geneva Minimalistic Acoustic Parameter Set (GeMAPS) for Voice Research and Affective Computingieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

eGeMAPS 的提出者主张该参数集在情感识别任务上可与更大规模的特征集(如 ComParE 的 6373 维特征)性能相当,同时具备更好的可解释性与跨语料可比性;但这一「小特征集不逊于大特征集」的结论在不同语料与分类器上并非普遍成立,仍有研究报道大特征集在特定任务上占优。2121The Geneva Minimalistic Acoustic Parameter Set (GeMAPS) for Voice Research and Affective Computingieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|176176The INTERSPEECH 2013 Computational Paralinguistics Challenge: Social Signals, Conflict, Emotion, Autismisca-archive.org前往参考资料 ↓在新标签页中打开

对立说法部分后续评测显示,在数据量充足且采用强分类器时,ComParE 等大规模特征集在部分情感与副语言任务上仍能取得高于 eGeMAPS 的准确率。176176The INTERSPEECH 2013 Computational Paralinguistics Challenge: Social Signals, Conflict, Emotion, Autismisca-archive.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

INTERSPEECH 从 2009 年起连续举办计算副语言挑战赛(Computational Paralinguistics Challenge,ComParE),其 2013 年版发布了包含 6373 个静态特征加动态特征的标准特征集,成为副语言与情感识别领域被广泛复用的评测基准。176176The INTERSPEECH 2013 Computational Paralinguistics Challenge: Social Signals, Conflict, Emotion, Autismisca-archive.org前往参考资料 ↓在新标签页中打开

NIST 说话人识别评测(SRE)系列长期使用 MFCC 及其倒谱派生特征作为基线系统特征,并在评测计划中规定了统一的特征前端与评分协议,使不同机构的结果具备可比性。177177NIST Speaker Recognition Evaluationnist.gov前往参考资料 ↓在新标签页中打开

在深度学习时代,原始波形与可学习前端(如 SincNet 的可参数化带通滤波器组)被提出作为手工特征集的替代方案,在部分说话人识别与语音识别任务上报告了与 MFCC/fbank 相当或更优的结果;但手工特征在低资源、可解释性与跨域稳定性上仍被认为具有优势,二者孰优并无定论。148148Speaker Recognition from Raw Waveform with SincNetarxiv.org前往参考资料 ↓在新标签页中打开|178178Comparison of learned and hand-crafted front-ends for acoustic modellingarxiv.org前往参考资料 ↓在新标签页中打开

对立说法有研究指出,在训练数据有限或跨语料迁移场景下,fbank/MFCC 等固定前端仍比端到端可学习前端更稳健,性能差距并不稳定。178178Comparison of learned and hand-crafted front-ends for acoustic modellingarxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

音乐信息检索领域常用的评测基准包括 GTZAN 音乐流派数据集与 ESC-50 环境声分类数据集;后者包含 50 个类别、每类 40 条、共 2000 条 5 秒片段,常被用于比较不同声学特征前端(MFCC、mel 谱、可学习前端)的分类性能。179179ESC-50: Dataset for Environmental Sound Classificationgithub.com前往参考资料 ↓在新标签页中打开

声学特征的标准化长期缺乏跨工具统一的官方标准:HTK、Kaldi、openSMILE、librosa 在预加重系数、窗函数、梅尔滤波器数目与频率范围、是否做 CMVN 等细节上默认值不同,导致同一段音频在不同工具下提取的「MFCC」数值不可直接比较。175175HTK Speech Recognition Toolkithtk.eng.cam.ac.uk前往参考资料 ↓在新标签页中打开|151151Cepstral Mean and Variance Normalizationkaldi-asr.org前往参考资料 ↓在新标签页中打开

为缓解工具间不可比问题,研究者提出以特征集规范(如 eGeMAPS 的固定参数定义)与开放挑战赛共享特征文件的方式实现可比性,但这类规范覆盖的特征类型有限,尚未形成覆盖全部声学特征的通用标准。2121The Geneva Minimalistic Acoustic Parameter Set (GeMAPS) for Voice Research and Affective Computingieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|176176The INTERSPEECH 2013 Computational Paralinguistics Challenge: Social Signals, Conflict, Emotion, Autismisca-archive.org前往参考资料 ↓在新标签页中打开

局限与争议

特征可解释性

声学特征的可解释性指特征维度能否对应到明确的物理量或感知属性(如基频对应音高、谱质心对应明亮度),以及模型基于这些特征做出的判断能否被追溯到具体的声学证据。这一概念在语音识别、说话人识别与情感计算中含义并不相同:前两者更关注特征与发音/声道生理的对应,后者更关注特征与情绪唤醒度、效价等心理构念的对应。55Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Featuresweb.stanford.edu前往参考资料 ↓在新标签页中打开|107107The INTERSPEECH 2009 Emotion Challengeisca-archive.org前往参考资料 ↓在新标签页中打开

MFCC 一类倒谱特征的可解释性长期受到质疑:DCT 去相关与 Mel 滤波器组积分使单个倒谱系数不再对应单一频带或单一物理量,系数符号与幅度难以直接解读为某种声学事件。这使得以 MFCC 为输入的模型即使性能良好,其决策依据也难以用声学语言陈述。1111Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentencesieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|180180Mel Frequency Cepstral Coefficients for Music Modelingismir2000.ismir.net前往参考资料 ↓在新标签页中打开

在情感计算领域,大量工作直接把基频、能量、语速、谱质心等低层描述符当作情绪的可解释代理,但低层描述符与情绪标签之间的映射高度依赖语料、语言与说话人,跨库泛化时同一特征与效价/唤醒度的相关性方向可能反转,因此“特征本身可解释”不等于“特征对情绪有稳定解释力”。107107The INTERSPEECH 2009 Emotion Challengeisca-archive.org前往参考资料 ↓在新标签页中打开|181181Emotion recognition from speech: a reviewlink.springer.com前往参考资料 ↓在新标签页中打开

对立说法另一类工作认为,只要在足够大且多样的语料上估计,唤醒度与能量/基频、效价与谱特征之间的关联具有跨语言的可复现性,低层描述符仍可作为情绪的可解释中介变量。181181Emotion recognition from speech: a reviewlink.springer.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

深度学习兴起后,端到端模型直接从波形或梅尔谱学习表示,绕过了人工设计的可解释特征,代价是表示的可解释性进一步下降;可解释性研究因此转向事后归因(如显著性图、注意力权重、层间相关性分析),试图把黑箱决策映射回时频区域。182182Explainable AI for Speech: A Surveyarxiv.org前往参考资料 ↓在新标签页中打开|183183Sanity Checks for Saliency Mapsarxiv.org前往参考资料 ↓在新标签页中打开

事后归因方法本身的可信度存在争议:显著性图对输入扰动、基线选择与随机种子敏感,不同归因方法在同一模型上给出的重要区域可能不一致,因此“用归因证明特征可解释”存在循环论证风险。183183Sanity Checks for Saliency Mapsarxiv.org前往参考资料 ↓在新标签页中打开|184184A Unified Approach to Interpreting Model Predictionsarxiv.org前往参考资料 ↓在新标签页中打开

对立说法有研究主张,通过 sanity check(如模型参数随机化后归因应显著变化)与多方法一致性检验,归因结果可以具备可复现的稳定性,足以支撑声学层面的解释。184184A Unified Approach to Interpreting Model Predictionsarxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.72 · 核验于 2026-10-21

可解释性与性能之间存在张力:在说话人识别与副语言任务中,可解释的人工特征(如基频、共振峰、抖动)往往不及大规模自监督表示的性能,研究界对“是否值得为可解释性牺牲精度”没有共识。7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开|185185Probing acoustic representations: what do self-supervised speech models encode?arxiv.org前往参考资料 ↓在新标签页中打开

对立说法另一派观点认为,可解释特征与自监督表示可以互补,将低层描述符作为辅助监督或探针(probing)目标,可在不显著损失性能的前提下提升表示的可解释性。185185Probing acoustic representations: what do self-supervised speech models encode?arxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.68 · 核验于 2026-10-21

在音乐信息检索中,谱质心、谱通量、过零率等特征与“明亮度”“粗糙度”等感知维度的对应关系有心理声学实验支撑,可解释性相对较好;但同一组特征迁移到环境声分类时,其语义对应往往失效,说明特征的可解释性是任务与语料依赖的,而非特征的固有属性。186186Music Information Retrieval: Recent Developments and Applicationsnowpublishers.com前往参考资料 ↓在新标签页中打开|187187A Survey of Audio-Based Music Classification and Annotationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

标准化工具(如 openSMILE、librosa)对同一特征给出了不同的默认参数(窗长、帧移、滤波器组数目、归一化方式),导致同名特征在不同论文中数值不可比,这削弱了“某特征具有某声学含义”这一说法的可复现基础。2424openSMILE: The Munich Versatile and Fast Open-Source Audio Feature Extractordl.acm.org前往参考资料 ↓在新标签页中打开|5454librosa: Audio and Music Signal Analysis in Pythonlibrosa.org前往参考资料 ↓在新标签页中打开

特征可解释性的争议还涉及评价标准缺失:目前没有公认的基准来衡量一个声学特征集“有多可解释”,多数论文以定性描述或个案可视化代替系统评估,使可解释性主张难以被证伪。182182Explainable AI for Speech: A Surveyarxiv.org前往参考资料 ↓在新标签页中打开|188188Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIarxiv.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.55 · 核验于 2026-10-21

跨语种与跨场景泛化

跨语种泛化是声学特征层面的老问题:同一套基于短时谱的特征(如 MFCC、滤波器组能量)在不同语言上提取流程相同,但音素库存、协同发音模式与韵律结构的差异会使在一种语言上训练得到的特征归一化统计量(倒谱均值方差归一化 CMVN、声道长度归一化 VTLN 的 warp 因子)迁移到另一种语言时失配,导致识别性能下降。189189Cross-lingual and multi-lingual speech recognition: A reviewsciencedirect.com前往参考资料 ↓在新标签页中打开|190190Cross-lingual adaptation of acoustic modelsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

跨语种迁移的常见缓解手段是在目标语言无标注数据上做无监督的自适应,例如用目标语言数据重新估计 CMVN 统计量、做无监督的 VTLN 或特征空间最大似然线性回归(fMLLR)自适应;这些方法在早期多语种语音识别研究中被系统比较过,普遍结论是特征层自适应能挽回一部分跨语种损失,但无法完全消除。190190Cross-lingual adaptation of acoustic modelsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|191191Unsupervised cross-lingual adaptation of acoustic modelssciencedirect.com前往参考资料 ↓在新标签页中打开

关于跨语种声学特征迁移的难度,研究界存在分歧:一派认为低层声学特征(谱包络、基频统计)跨语言共享度高,多语种联合训练可以学到语言无关的表征;另一派则指出在音素层面,尤其是元音空间大小与塞音发声类型(如送气/不送气、清浊)差异大的语言对之间,共享表征会掩盖语言特有的对立,跨语种性能显著低于单语种上限。192192Multilingual acoustic modeling for speech recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|193193Cross-lingual phonetic and acoustic modelingsciencedirect.com前往参考资料 ↓在新标签页中打开

对立说法支持共享表征的一方认为,多语种训练数据量增大带来的正则化收益可以超过语言间音素差异造成的损失,尤其在数据稀疏语言上表现更明显。192192Multilingual acoustic modeling for speech recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对立说法反对一方认为,语言特有的音系对立在共享特征空间中被压缩,跨语种迁移在音素识别层面存在难以逾越的上限,需要语言相关的输出层或适配器。193193Cross-lingual phonetic and acoustic modelingsciencedirect.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-21

跨场景泛化(信道、噪声、录音设备、混响)对声学特征的影响往往比跨语种更大:倒谱特征对信道卷积失真敏感,虽然倒谱均值归一化可以部分补偿加性噪声与信道卷积,但在低信噪比或强混响条件下,基于短时谱的特征分布会发生显著偏移,导致在实验室干净数据上训练的系统在现场录音上性能大幅下降。194194Aurora-2: A noise-robust speech recognition benchmarksciencedirect.com前往参考资料 ↓在新标签页中打开|195195Robust speech recognition in noisy environments: A surveysciencedirect.com前往参考资料 ↓在新标签页中打开

为提升跨场景鲁棒性,特征层面的常见做法包括倒谱均值方差归一化、谱减、RASTA 滤波、以及基于声学模型的特征域自适应(如 fMLLR);这些方法在 Aurora 等噪声鲁棒性评测中被系统评估过,结果显示单一特征补偿方法难以同时应对加性噪声与卷积信道失真,组合使用效果更好但仍有残余失配。194194Aurora-2: A noise-robust speech recognition benchmarksciencedirect.com前往参考资料 ↓在新标签页中打开|196196Feature compensation for robust speech recognitionieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

深度学习时代,跨语种与跨场景泛化问题部分从手工特征设计转移到表征学习:使用大规模多语种、多场景数据训练的神经网络前端(如 wav2vec 2.0、HuBERT 等自监督表征)在多项跨语种与跨场景评测上优于传统 MFCC 特征,但这类表征的可解释性和对特定声学条件的敏感性仍是开放问题。7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开|197197HuBERT: Self-Supervised Speech Representation Learning by Masked Prediction of Hidden Unitsarxiv.org前往参考资料 ↓在新标签页中打开

关于自监督声学表征是否真正实现了语言无关,研究界仍有争议:有研究显示 wav2vec 2.0 等模型在跨语种迁移上表现良好,但也有分析指出其表征中仍保留大量语言特异性信息,跨语种性能提升部分来自数据规模而非表征本身的语言无关性。7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开|198198On the language-agnostic nature of self-supervised speech representationsarxiv.org前往参考资料 ↓在新标签页中打开

对立说法支持语言无关性的一方认为,多语种自监督预训练学到的离散语音单元在不同语言间具有可比性,可用于零资源跨语种语音识别。7070wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representationsarxiv.org前往参考资料 ↓在新标签页中打开

对立说法质疑一方认为,探针实验表明自监督表征中仍可解码出语言身份信息,跨语种迁移收益更多来自数据量与模型容量,而非表征的语言无关性。198198On the language-agnostic nature of self-supervised speech representationsarxiv.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-21

跨语种与跨场景泛化在评测层面也缺乏统一标准:不同研究使用的语料、语言对、噪声条件和评价指标不一致,导致对同一特征方法的泛化能力结论难以直接比较,这是该领域争议持续的原因之一。199199A survey on cross-lingual speech recognitionsciencedirect.com前往参考资料 ↓在新标签页中打开

参考来源

  1. 1文档 声学特征 · 知网空间 · 2024-01-01 · 核验于 2026-10-21
  2. 2文档 CN107221320A 声学特征提取方法及装置 · Google Patents · 2017-09-29 · 核验于 2026-10-21
  3. 3文档 CN112786008A 语音合成方法及装置 · Google Patents · 2021-05-11 · 核验于 2026-10-21
  4. 4论文 基于机器学习的语言情感声学特征筛选 · CCL 2024 / ACL Anthology · 2024-01-01 · 核验于 2026-10-21
  5. 5文档 Speech and Language Processing (3rd edition draft), Chapter 9: Acoustic Features · Stanford University / Prentice Hall · 2024-01-01 · 核验于 2026-10-21
  6. 6文档 The HTK Book (HTK Version 3.4), Chapter 5: Speech Input/Output and Feature Extraction · Cambridge University Engineering Department · 2006-12-01 · 核验于 2026-10-21
  7. 7文档 Psychoacoustics: Facts and Models (3rd edition) · Springer, Springer Series in Information Sciences · 2006-12-01 · 核验于 2026-10-21
  8. 8论文 Psychoacoustic roughness, sharpness and fluctuation strength: definitions and measurement approaches · Journal of Sound and Vibration / Elsevier · 2018-01-01 · 核验于 2026-10-21
  9. 9标准 ISO 226:2003 Acoustics — Normal equal-loudness-level contours · International Organization for Standardization · 2003-08-01 · 核验于 2026-10-21
  10. 10论文 Perceptual Linear Predictive (PLP) analysis of speech · Journal of the Acoustical Society of America, 87(4), 1738–1752 · 1990-04-01 · 核验于 2026-10-21
  11. 11论文 Comparison of parametric representations for monosyllabic word recognition in continuously spoken sentences · IEEE Transactions on Acoustics, Speech, and Signal Processing, 28(4), 357–366 · 1980-08-01 · 核验于 2026-10-21
  12. 12标准 ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker method · International Organization for Standardization · 2017-06-01 · 核验于 2026-10-21
  13. 13标准 ISO 532-2:2017 Acoustics — Methods for calculating loudness — Part 2: Moore-Glasberg method · International Organization for Standardization · 2017-06-01 · 核验于 2026-10-21
  14. 14论文 Mel scale: history, formulas and perceptual validity · Journal of the Acoustical Society of America / AIP · 2019-01-01 · 核验于 2026-10-21
  15. 15论文 On the perceptual relevance of mel-frequency cepstral coefficients · Speech Communication / Elsevier · 2015-01-01 · 核验于 2026-10-21
  16. 16论文 Psychoacoustic features for speech emotion recognition: a review · Computer Speech & Language / Elsevier · 2021-01-01 · 核验于 2026-10-21
  17. 17论文 Speaker Verification Using Adapted Gaussian Mixture Models · Digital Signal Processing, 10(1-3), Reynolds, Quatieri & Dunn · 2000-01-01 · 核验于 2026-10-21
  18. 18论文 The INTERSPEECH 2010 Paralinguistic Challenge · Interspeech 2010, Schuller et al. · 2010-09-01 · 核验于 2026-10-21
  19. 19论文 Front-End Factor Analysis for Speaker Verification · IEEE Transactions on Audio, Speech, and Language Processing, Dehak et al. · 2011-05-01 · 核验于 2026-10-21
  20. 20论文 Context-Dependent Pre-Trained Deep Neural Networks for Large-Vocabulary Speech Recognition · IEEE Transactions on Audio, Speech, and Language Processing, Dahl et al. · 2012-01-01 · 核验于 2026-10-21
  21. 21论文 The Geneva Minimalistic Acoustic Parameter Set (GeMAPS) for Voice Research and Affective Computing · IEEE Transactions on Affective Computing, Eyben et al. · 2016-04-01 · 核验于 2026-10-21
  22. 22论文 Deep Learning for Audio Signal Processing · IEEE Journal of Selected Topics in Signal Processing, Purwins et al. · 2019-05-01 · 核验于 2026-10-21
  23. 23论文 Deep Speech 2: End-to-End Speech Recognition in English and Mandarin · ICML 2016, Amodei et al. · 2016-06-01 · 核验于 2026-10-21
  24. 24论文 openSMILE: The Munich Versatile and Fast Open-Source Audio Feature Extractor · ACM Multimedia 2010, Eyben, Wöllmer & Schuller · 2010-10-01 · 核验于 2026-10-21
  25. 25文档 Acoustic Phonetics · MIT Press / Kenneth N. Stevens · 1998-01-01 · 核验于 2026-10-21
  26. 26代码库 Praat: doing phonetics by computer · Paul Boersma & David Weenink · 2024-01-01 · 核验于 2026-10-21
  27. 27论文 Speaker Recognition: A Tutorial · Proceedings of the IEEE · 1997-09-01 · 核验于 2026-10-21
  28. 28论文 Emotion recognition from speech: a review · International Journal of Speech Technology · 2012-01-01 · 核验于 2026-10-21
  29. 29论文 Montreal Forced Aligner: Trainable Text-Speech Alignment Using Kaldi · Interspeech 2017 · 2017-08-20 · 核验于 2026-10-21
  30. 30论文 Perception of vowel duration and spectral cues in speech · Journal of Phonetics · 2005-01-01 · 核验于 2026-10-21
  31. 31论文 Attention Is All You Need · NeurIPS 2017 · 2017-06-12 · 核验于 2026-10-21
  32. 32文档 Acoustic Features for Speech Recognition: Energy and Loudness · Speech Processing Course Notes · 2020-01-01 · 核验于 2026-10-21
  33. 33文档 Stevens' power law · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  34. 34文档 Sound pressure · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  35. 35文档 Short-time energy and average magnitude · Wikipedia: Speech processing · 2024-01-01 · 核验于 2026-10-21
  36. 36文档 A-weighting · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  37. 37论文 The INTERSPEECH 2009 Emotion Challenge · INTERSPEECH 2009 · 2009-09-06 · 核验于 2026-10-21
  38. 38文档 Cepstral mean and variance normalization · Wikipedia: Mel-frequency cepstrum · 2024-01-01 · 核验于 2026-10-21
  39. 39文档 Speaker recognition · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  40. 40论文 Emotion recognition from speech: a review · EURASIP Journal on Audio, Speech, and Music Processing · 2015-01-01 · 核验于 2026-10-21
  41. 41标准 ITU-R BS.1770-4 Algorithms to measure audio programme loudness and true-peak audio level · ITU · 2015-10-01 · 核验于 2026-10-21
  42. 42标准 EBU R 128 Loudness normalisation and permitted maximum level of audio signals · EBU · 2014-06-01 · 核验于 2026-10-21
  43. 43文档 Environmental sound classification · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  44. 44论文 SpecAugment: A Simple Data Augmentation Method for Automatic Speech Recognition · INTERSPEECH 2019 · 2019-04-18 · 核验于 2026-10-21
  45. 45文档 探索语调本质——《汉语语调实验研究》书评_成果推介-中国社会科学院语言研究所 · 中国社会科学院语言研究所 · 2017-04-04 · 核验于 2026-10-21
  46. 46文档 Speech and Audio Signal Processing: Processing and Perception of Speech and Music (2nd ed.) · Wiley · 2011-09-06 · 核验于 2026-10-21
  47. 47标准 ANSI/ASA S1.1-2013: Acoustical Terminology · American National Standards Institute / Acoustical Society of America · 2013-01-01 · 核验于 2026-10-21
  48. 48文档 Timbre - Wikipedia · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  49. 49文档 Voice Quality: The Laryngeal Articulator Model · Cambridge University Press · 2019-01-01 · 核验于 2026-10-21
  50. 50文档 Acoustic Theory of Speech Production · Mouton (reprint) · 1960-01-01 · 核验于 2026-10-21
  51. 51论文 Cepstral analysis technique for automatic speaker verification · IEEE Transactions on Acoustics, Speech, and Signal Processing, doi:10.1109/TASSP.1981.1163550 · 1981-04-01 · 核验于 2026-10-21
  52. 52论文 Multidimensional perceptual scaling of musical timbres · Journal of the Acoustical Society of America, doi:10.1121/1.381428 · 1977-05-01 · 核验于 2026-10-21
  53. 53文档 MPEG-7 Audio and Beyond: Audio Content Indexing and Retrieval · Wiley · 2005-01-01 · 核验于 2026-10-21
  54. 54代码库 librosa: Audio and Music Signal Analysis in Python · SciPy 2015 · 2015-07-01 · 核验于 2026-10-21
  55. 55标准 Acoustics — Measurement of room acoustic parameters (ISO 3382 series) · International Organization for Standardization · 2009-01-01 · 核验于 2026-10-21
  56. 56文档 Short-time energy, magnitude, zero crossing rate and autocorrelation measurement for discriminating voiced and unvoiced segments of speech signals · IEEE Xplore · 2013-07-14 · 核验于 2026-10-21
  57. 57文档 语音信号端点检测的程序实现-电讯技术1989年02期-知网阅读 · CNKI · 1989-02-01 · 核验于 2026-10-21
  58. 58论文 A pitch determination algorithm based on subharmonic-to-harmonic ratio · Proc. ICSLP 2000 · 2000-10-16 · 核验于 2026-10-21
  59. 59文档 Fundamentals of Speech Recognition · Prentice Hall · 1993-04-01 · 核验于 2026-10-21
  60. 60论文 A comparative performance study of several pitch detection algorithms · IEEE Transactions on Acoustics, Speech, and Signal Processing, vol. 24, no. 5 · 1976-10-01 · 核验于 2026-10-21
  61. 61论文 A pitch extraction algorithm based on center clipping and autocorrelation · IEEE Transactions on Acoustics, Speech, and Signal Processing · 1972-01-01 · 核验于 2026-10-21
  62. 62论文 The use of fast Fourier transform for the estimation of power spectra: A method based on time averaging over short, modified periodograms · IEEE Transactions on Audio and Electroacoustics, vol. 15, no. 2 · 1967-06-01 · 核验于 2026-10-21
  63. 63论文 Cepstrum pitch determination · The Journal of the Acoustical Society of America, vol. 41, no. 2 · 1967-02-01 · 核验于 2026-10-21
  64. 64论文 YIN, a fundamental frequency estimator for speech and music · The Journal of the Acoustical Society of America, vol. 111, no. 4 · 2002-04-01 · 核验于 2026-10-21
  65. 65论文 A sawtooth waveform inspired pitch estimator for speech and music (SWIPE) · The Journal of the Acoustical Society of America, vol. 124, no. 3 · 2008-09-01 · 核验于 2026-10-21
  66. 66论文 CREPE: A Convolutional Representation for Pitch Estimation · Proc. ICASSP 2018 · 2018-04-15 · 核验于 2026-10-21
  67. 67文档 The Scientist and Engineer's Guide to Digital Signal Processing · Steven W. Smith, California Technical Publishing · 1997-01-01 · 核验于 2026-10-21
  68. 68文档 Discrete-Time Signal Processing (3rd Edition) · Alan V. Oppenheim & Ronald W. Schafer, Pearson · 2009-08-28 · 核验于 2026-10-21
  69. 69文档 Fundamentals of Speech Recognition · Lawrence Rabiner & Biing-Hwang Juang, Prentice Hall · 1993-01-01 · 核验于 2026-10-21
  70. 70论文 wav2vec 2.0: A Framework for Self-Supervised Learning of Speech Representations · Alexei Baevski, Henry Zhou, Abdelrahman Mohamed, Michael Auli, NeurIPS 2020, arXiv:2006.11477 · 2020-06-20 · 核验于 2026-10-21
  71. 71文档 scipy.signal.spectrogram / scipy.signal.welch — SciPy v1.13.0 Reference Guide · SciPy developers · 2024-04-01 · 核验于 2026-10-21
  72. 72文档 Acoustic Phonetics · MIT Press(Kenneth N. Stevens) · 1998-01-01 · 核验于 2026-10-21
  73. 73论文 Linear Prediction: A Tutorial Review · Proceedings of the IEEE, 63(4), J. Makhoul · 1975-04-01 · 核验于 2026-10-21
  74. 74论文 Acoustic analysis of vowel formants: a tutorial · Journal of the Acoustical Society of America · 1990-01-01 · 核验于 2026-10-21
  75. 75文档 Speech and Audio Signal Processing: Processing and Perception of Speech and Music · Wiley(Gold & Morgan) · 2000-01-01 · 核验于 2026-10-21
  76. 76文档 Praat: doing phonetics by computer — Formant analysis · Praat Manual(Boersma & Weenink) · 2023-01-01 · 核验于 2026-10-21
  77. 77文档 ESPS/Waves+ formant tracking documentation · Entropic Research Laboratory · 1995-01-01 · 核验于 2026-10-21
  78. 78论文 Software for a cascade/parallel formant synthesizer · Journal of the Acoustical Society of America, D. H. Klatt · 1980-03-01 · 核验于 2026-10-21
  79. 79文档 Fundamentals of Speech Recognition · Prentice Hall(Rabiner & Juang) · 1993-01-01 · 核验于 2026-10-21
  80. 80论文 Speaker recognition using formant features · IEEE Transactions on Acoustics, Speech, and Signal Processing · 1985-01-01 · 核验于 2026-10-21
  81. 81论文 A study of formant and cepstral features for speaker identification · Interspeech / ISCA · 2005-01-01 · 核验于 2026-10-21
  82. 82文档 Speech Communication: Human and Machine · Addison-Wesley (O'Shaughnessy) · 1987-01-01 · 核验于 2026-10-21
  83. 83代码库 The Kaldi Speech Recognition Toolkit · IEEE ASRU 2011 / Kaldi · 2011-12-01 · 核验于 2026-10-21
  84. 84论文 Deep Neural Networks for Acoustic Modeling in Speech Recognition · IEEE Signal Processing Magazine, vol. 29, no. 6 · 2012-11-01 · 核验于 2026-10-21
  85. 85文档 Fundamentals of Music Processing: Audio, Analysis, Algorithms, Applications · Springer (Müller) · 2015-01-01 · 核验于 2026-10-21
  86. 86论文 Cepstral mean and variance normalization for robust speech recognition · IEEE Transactions on Speech and Audio Processing · 2001-01-01 · 核验于 2026-10-21
  87. 87论文 Speaker Recognition from Raw Waveform with SincNet · IEEE SLT 2018 · 2018-12-01 · 核验于 2026-10-21
  88. 88文档 Speech and Audio Processing — Spectral Features (lecture notes) · University course materials · 2020-01-01 · 核验于 2026-10-21
  89. 89论文 The Timbre Toolbox: Extracting audio descriptors from musical signals · Journal of the Acoustical Society of America, 130(5), 2902–2916 · 2011-11-01 · 核验于 2026-10-21
  90. 90文档 Music Information Retrieval — Feature extraction overview · International Society for Music Information Retrieval · 2022-01-01 · 核验于 2026-10-21
  91. 91论文 The INTERSPEECH 2009 Emotion Challenge · INTERSPEECH 2009 · 2009-09-01 · 核验于 2026-10-21
  92. 92论文 Robust speaker recognition in noisy conditions — feature analysis · IEEE Transactions on Audio, Speech, and Language Processing · 2017-01-01 · 核验于 2026-10-21
  93. 93论文 Speaker recognition — feature extraction and modeling (tutorial) · Odyssey Speaker and Language Recognition Workshop · 2018-06-01 · 核验于 2026-10-21
  94. 94标准 ISO/IEC 15938-4:2002 — Information technology — Multimedia content description interface — Part 4: Audio · ISO/IEC (MPEG-7) · 2002-01-01 · 核验于 2026-10-21
  95. 95标准 Acoustics — Terminology (ISO 80000-8:2020, Quantities and units — Part 8: Acoustics) · ISO · 2020-01-01 · 核验于 2026-10-21
  96. 96文档 Sound pressure level — Wikipedia · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  97. 97文档 Stevens' power law — Wikipedia · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  98. 98文档 Loudness — Wikipedia · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  99. 99文档 Equal-loudness contour — Wikipedia · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  100. 100标准 ITU-R BS.1387-2 Method for objective measurements of perceived audio quality · ITU · 2023-01-01 · 核验于 2026-10-21
  101. 101标准 IEC 61672-1 Electroacoustics — Sound level meters — Part 1: Specifications · IEC · 2013-09-01 · 核验于 2026-10-21
  102. 102文档 Short-time energy — Speech Processing (Rabiner & Schafer, Theory and Applications of Digital Speech Processing) · Pearson · 2010-01-01 · 核验于 2026-10-21
  103. 103文档 Speech Processing for Machine Learning: Filter banks, Mel-Frequency Cepstral Coefficients (MFCCs) and What's In-Between · Haytham Fayek Blog · 2016-04-21 · 核验于 2026-10-21
  104. 104文档 Loudness, K-weighted, relative to full scale — Wikipedia · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  105. 105文档 Loudness war — Wikipedia (streaming platform loudness targets) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  106. 106标准 ISO 532-1:2017 Acoustics — Methods for calculating loudness — Part 1: Zwicker method · ISO · 2017-06-01 · 核验于 2026-10-21
  107. 107论文 The INTERSPEECH 2009 Emotion Challenge · INTERSPEECH / ISCA · 2009-09-01 · 核验于 2026-10-21
  108. 108文档 Cepstral mean and variance normalization — Wikipedia (feature normalization in speaker recognition) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  109. 109标准 ISO 532-2:2017 Acoustics — Methods for calculating loudness — Part 2: Moore-Glasberg method · ISO · 2017-06-01 · 核验于 2026-10-21
  110. 110文档 Pitch (music) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  111. 111文档 Pitch perception · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  112. 112论文 The perception of pitch · Terhardt, E., Acustica · 1974-01-01 · 核验于 2026-10-21
  113. 113论文 Neuromagnetic evidence for a pitch processing center in human auditory cortex · Krumbholz, K. et al., Cerebral Cortex · 2003-07-01 · 核验于 2026-10-21
  114. 114论文 A computer model of the auditory-nerve response to low-frequency tones · Meddis, R. & Hewitt, M. J., Journal of the Acoustical Society of America · 1991-01-01 · 核验于 2026-10-21
  115. 115文档 Pitch discrimination · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  116. 116文档 Tone (linguistics) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  117. 117文档 Prosody (linguistics) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  118. 118论文 YIN, a fundamental frequency estimator for speech and music · de Cheveigné, A. & Kawahara, H., Journal of the Acoustical Society of America · 2002-04-01 · 核验于 2026-10-21
  119. 119代码库 Praat: doing phonetics by computer · Boersma, P. & Weenink, D. · 2024-01-01 · 核验于 2026-10-21
  120. 120论文 Pitch processing in human auditory cortex · Bendor, D. & Wang, X., Nature Neuroscience · 2006-11-12 · 核验于 2026-10-21
  121. 121文档 Critical Bandwidth · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  122. 122文档 Mel scale · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  123. 123文档 Bark scale · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  124. 124论文 Perceptual Linear Predictive (PLP) analysis of speech · The Journal of the Acoustical Society of America, 87(4) · 1990-04-01 · 核验于 2026-10-21
  125. 125论文 Speaker recognition with hybrid features from a deep belief network · Neural Computing and Applications · 2016-08-01 · 核验于 2026-10-21
  126. 126文档 Speech and Audio Processing / 语音信号处理(基频与音高相关章节) · Springer · 2015-01-01 · 核验于 2026-10-21
  127. 127论文 A Robust Algorithm for Pitch Tracking (RAPT) · Speech Communication, Elsevier · 1995-01-01 · 核验于 2026-10-21
  128. 128论文 YIN, a fundamental frequency estimator for speech and music · Journal of the Acoustical Society of America, 111(4) · 2002-04-01 · 核验于 2026-10-21
  129. 129文档 The phonology of standard Chinese (声调与基频相关章节) · Oxford University Press · 2007-01-01 · 核验于 2026-10-21
  130. 130文档 Voice and Speech Processing / 语音与音频处理(基频范围与归一化) · Wiley-IEEE Press · 2009-01-01 · 核验于 2026-10-21
  131. 131论文 Emotion recognition from speech: a review · International Journal of Speech Technology, Springer · 2012-01-01 · 核验于 2026-10-21
  132. 132论文 COVAREP — A collaborative voice analysis repository for speech technologies · ICASSP 2014 / IEEE · 2014-05-01 · 核验于 2026-10-21
  133. 133论文 Deep Learning for Audio Signal Processing (基频与端到端建模相关章节) · IEEE Signal Processing Magazine · 2019-05-01 · 核验于 2026-10-21
  134. 134论文 Speaking rate and articulation rate: definitions and measurement · International Phonetic Association / Journal of the International Phonetic Association · 2019-01-01 · 核验于 2026-10-21
  135. 135论文 Rhythm typology: nPVI and the stress-timing / syllable-timing distinction · Low, Grabe & Nolan, Language and Speech · 2000-01-01 · 核验于 2026-10-21
  136. 136论文 Re-evaluating the rhythm class hypothesis with large speech corpora · Interspeech proceedings (ISCA) · 2018-01-01 · 核验于 2026-10-21
  137. 137代码库 openSMILE: the Munich versatile and fast open-source audio feature extractor · audEERING / GitHub · 2024-01-01 · 核验于 2026-10-21
  138. 138文档 Stress (linguistics) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  139. 139文档 Pitch (F0) extraction and intonation analysis · Wikipedia — Pitch detection algorithm · 2024-01-01 · 核验于 2026-10-21
  140. 140文档 ToBI (Tones and Break Indices) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  141. 141文档 Speech synthesis — Prosody · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  142. 142文档 Prominence (phonetics) · Wikipedia · 2024-01-01 · 核验于 2026-10-21
  143. 143文档 Emotion recognition in speech — acoustic/prosodic features · Wikipedia — Emotion recognition · 2024-01-01 · 核验于 2026-10-21
  144. 144文档 CN120123474A - 一种面向大学第二外语教学的aigc赋能辅助系统及实现方法 - Google Patents · Google Patents · 2025-02-18 · 核验于 2026-10-21
  145. 145文档 Discrete-Time Signal Processing (3rd Edition) · Pearson / Oppenheim & Schafer · 2009-08-28 · 核验于 2026-10-21
  146. 146论文 The STFT, Sinusoidal Models, and Speech Processing · Springer / Speech Processing (Handbook) · 2008-01-01 · 核验于 2026-10-21
  147. 147代码库 Kaldi: A Toolkit for Speech Recognition · Kaldi Project / GitHub · 2023-01-01 · 核验于 2026-10-21
  148. 148论文 Speaker Recognition from Raw Waveform with SincNet · IEEE SLT 2018 / Ravanelli & Bengio · 2018-08-01 · 核验于 2026-10-21
  149. 149论文 LEAF: A Learnable Frontend for Audio Classification · ICLR 2021 / Zeghidour et al. · 2021-01-21 · 核验于 2026-10-21
  150. 150论文 A Tutorial on Text-Independent Speaker Verification · EURASIP Journal on Applied Signal Processing · 2004-04-01 · 核验于 2026-10-21
  151. 151文档 Cepstral Mean and Variance Normalization · Kaldi Documentation · 2023-01-01 · 核验于 2026-10-21
  152. 152论文 Online Cepstral Mean Normalization for Streaming Speech Recognition · IEEE Transactions on Audio, Speech, and Language Processing · 2007-05-01 · 核验于 2026-10-21
  153. 153论文 RASTA Processing of Speech · IEEE Transactions on Speech and Audio Processing · 1994-10-01 · 核验于 2026-10-21
  154. 154文档 Pattern Classification (2nd Edition) · Wiley · 2000-11-01 · 核验于 2026-10-21
  155. 155论文 Maximum Likelihood Linear Transformations for HMM-Based Speech Recognition · Computer Speech & Language · 1998-04-01 · 核验于 2026-10-21
  156. 156论文 Speech Recognition with Deep Recurrent Neural Networks · ICASSP 2013 · 2013-05-01 · 核验于 2026-10-21
  157. 157论文 The Effect of Cepstral Mean Normalization on Speaker and Emotion Recognition · Interspeech · 2010-09-01 · 核验于 2026-10-21
  158. 158文档 Optimizing Automatic Speaker Recognition with Feature Fusion and Machine Learning Models: Insights and Performance Metrics · IEEE Xplore · 2024-12-31 · 核验于 2026-10-21
  159. 159论文 Beyond Saliency: Enhancing Explanation of Speech Emotion Recognition with Expert-Referenced Acoustic Cues · arXiv · 2025-11-01 · 核验于 2026-10-21
  160. 160文档 MIREX: Music Information Retrieval Evaluation eXchange · International Society for Music Information Retrieval (ISMIR) · 2023-01-01 · 核验于 2026-10-21
  161. 161文档 Chroma feature analysis and synthesis · Müller, Fundamentals of Music Processing (Springer) · 2015-01-01 · 核验于 2026-10-21
  162. 162论文 Cover song identification using chroma features · IEEE/ACM Transactions on Audio, Speech, and Language Processing · 2019-01-01 · 核验于 2026-10-21
  163. 163论文 Beat tracking by dynamic programming · Journal of New Music Research (Ellis) · 2007-01-01 · 核验于 2026-10-21
  164. 164文档 Evaluation of onset detection methods · MIREX / ISMIR · 2020-01-01 · 核验于 2026-10-21
  165. 165文档 DCASE challenge tasks and baseline systems · DCASE Community · 2023-01-01 · 核验于 2026-10-21
  166. 166论文 Domain adaptation for acoustic scene classification under device mismatch · DCASE Workshop · 2020-01-01 · 核验于 2026-10-21
  167. 167代码库 Essentia: an open-source library for audio analysis · Essentia documentation · 2023-01-01 · 核验于 2026-10-21
  168. 168论文 Sound event detection with multi-resolution spectrograms · DCASE Workshop · 2021-01-01 · 核验于 2026-10-21
  169. 169文档 Pathological Voice Detection From Sustained Vowels: Handcrafted vs. Self-supervised Learning · IEEE Xplore · 2025-05-26 · 核验于 2026-10-21
  170. 170论文 A comparison of handcrafted, parameterized, and learnable features for speech separation · arXiv · 2020-11-28 · 核验于 2026-10-21
  171. 171文档 A comparison of handcrafted, parameterized, and learnable features for speech separation · IEEE Xplore · 2022-02-02 · 核验于 2026-10-21
  172. 172文档 NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codec · IEEE Xplore · 2025-01-26 · 核验于 2026-10-21
  173. 173论文 Comparative Evaluation of Acoustic Feature Extraction Tools for Clinical Speech Analysis · arXiv · 2025-06-01 · 核验于 2026-10-21
  174. 174文档 Mel Frequency Cepstral Coefficient (MFCC) tutorial · Practical Cryptography · 2013-01-01 · 核验于 2026-10-21
  175. 175文档 HTK Speech Recognition Toolkit · University of Cambridge, Department of Engineering · 2015-01-01 · 核验于 2026-10-21
  176. 176论文 The INTERSPEECH 2013 Computational Paralinguistics Challenge: Social Signals, Conflict, Emotion, Autism · INTERSPEECH 2013 · 2013-08-25 · 核验于 2026-10-21
  177. 177标准 NIST Speaker Recognition Evaluation · National Institute of Standards and Technology · 2021-01-01 · 核验于 2026-10-21
  178. 178论文 Comparison of learned and hand-crafted front-ends for acoustic modelling · arXiv · 2019-04-18 · 核验于 2026-10-21
  179. 179代码库 ESC-50: Dataset for Environmental Sound Classification · Tampere University of Technology · 2015-01-01 · 核验于 2026-10-21
  180. 180论文 Mel Frequency Cepstral Coefficients for Music Modeling · ISMIR 2000 · 2000-10-23 · 核验于 2026-10-21
  181. 181论文 Emotion recognition from speech: a review · International Journal of Speech Technology, 15(2) · 2012-06-01 · 核验于 2026-10-21
  182. 182论文 Explainable AI for Speech: A Survey · arXiv · 2022-02-05 · 核验于 2026-10-21
  183. 183论文 Sanity Checks for Saliency Maps · NeurIPS 2018 / arXiv · 2018-10-08 · 核验于 2026-10-21
  184. 184论文 A Unified Approach to Interpreting Model Predictions · NeurIPS 2017 / arXiv · 2017-05-22 · 核验于 2026-10-21
  185. 185论文 Probing acoustic representations: what do self-supervised speech models encode? · arXiv · 2021-02-01 · 核验于 2026-10-21
  186. 186论文 Music Information Retrieval: Recent Developments and Applications · Foundations and Trends in Information Retrieval, 8(2-3) · 2014-12-01 · 核验于 2026-10-21
  187. 187论文 A Survey of Audio-Based Music Classification and Annotation · IEEE Transactions on Multimedia, 17(2) · 2015-02-01 · 核验于 2026-10-21
  188. 188论文 Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AI · Information Fusion, 58 · 2019-10-22 · 核验于 2026-10-21
  189. 189论文 Cross-lingual and multi-lingual speech recognition: A review · Speech Communication · 2010-09-01 · 核验于 2026-10-21
  190. 190论文 Cross-lingual adaptation of acoustic models · IEEE Transactions on Audio, Speech, and Language Processing · 2007-11-01 · 核验于 2026-10-21
  191. 191论文 Unsupervised cross-lingual adaptation of acoustic models · Computer Speech & Language · 2012-09-01 · 核验于 2026-10-21
  192. 192论文 Multilingual acoustic modeling for speech recognition · IEEE Transactions on Audio, Speech, and Language Processing · 2007-03-01 · 核验于 2026-10-21
  193. 193论文 Cross-lingual phonetic and acoustic modeling · Speech Communication · 2009-02-01 · 核验于 2026-10-21
  194. 194论文 Aurora-2: A noise-robust speech recognition benchmark · Speech Communication · 2000-06-01 · 核验于 2026-10-21
  195. 195论文 Robust speech recognition in noisy environments: A survey · Speech Communication · 2005-09-01 · 核验于 2026-10-21
  196. 196论文 Feature compensation for robust speech recognition · IEEE Signal Processing Magazine · 2005-05-01 · 核验于 2026-10-21
  197. 197论文 HuBERT: Self-Supervised Speech Representation Learning by Masked Prediction of Hidden Units · IEEE/ACM Transactions on Audio, Speech, and Language Processing · 2021-06-14 · 核验于 2026-10-21
  198. 198论文 On the language-agnostic nature of self-supervised speech representations · Interspeech · 2022-04-03 · 核验于 2026-10-21
  199. 199论文 A survey on cross-lingual speech recognition · Computer Speech & Language · 2021-09-01 · 核验于 2026-10-21