Gradient-Based Speech-to-Text Alignment for Any ASR Model: From CTC to Speech LLMs
基于梯度的任意语音识别模型的语音到文本对齐:从连接主义时间分类到语音大语言模型
机构 * Machine Learning and Human Language Technology Group, RWTH Aachen University(机器学习与人类语言技术组,亚琛工业大学) ; AppTek GmbH(AppTek公司)
专题命中 其他安全 :alignment(title,abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 研究基于梯度的任意可微语音识别模型的语音到文本对齐方法,通过对教师强制令牌对数概率取梯度并解码,无需训练、改模型及对齐头,适用于各模型家族,在多模型上评估,结果显示该方法能产生可用对齐,有优有劣。