讯飞寰语申请语音识别及模型训练专利,提升语音识别模型在特定领域下的识别效果

金融界 2024-12-19 10:49:19

金融界2024年12月19日消息,国家知识产权局信息显示,安徽讯飞寰语科技有限公司申请一项名为“语音识别及模型训练方法、装置、设备及计算机程序产品”的专利,公开号CN119132283A,申请日期为2024年9月。

专利摘要显示,本申请公开了一种语音识别及模型训练方法、装置、设备及计算机程序产品,涉及语音识别技术领域,本申请对语音识别模型和文本重建模型联合训练,二者共享同一解码器,文本重建模型还包括基于大语言模型构建的文本编码器,能够对识别文本标签提取文本语义表征,计算音频编码器对音频样本提取的音频语义表征与文本语义表征间的特征对齐损失值,以及计算解码器输出的文本与识别文本标签间的文本识别损失值,大语言模型能够提取丰富的语义信息,通过特征对齐损失值可以将大语言模型丰富的语义信息迁移到音频编码器中,提升语音识别模型在特定领域下的识别效果。推理阶段,将待识别语音信号的声学特征输入语音识别模型,得到模型输出的语音识别结果。

本文源自:金融界

0 阅读:0
金融界

金融界

财经媒体、互联网金融、财富管理