wav2vec2-large-xlsr-53-spanish

wav2vec2-large-xlsr-53-spanish

基于XLSR-53微调的西班牙语语音识别模型

此西班牙语语音识别模型基于Facebook的wav2vec2-large-xlsr-53,在Common Voice数据集上微调。模型在测试集上达到8.82%词错误率和2.58%字符错误率,可直接处理16kHz采样的语音输入。项目提供使用示例和评估脚本,便于用户应用和评估。模型采用16kHz采样率,无需额外语言模型即可使用。项目还包含详细的使用说明和评估方法,有助于研究人员和开发者快速集成和测试。

模型西班牙语Wav2Vec2Common Voice开源项目HuggingfaceXLSR-53语音识别Github

wav2vec2-large-xlsr-53-spanish项目介绍

wav2vec2-large-xlsr-53-spanish是一个针对西班牙语自动语音识别(ASR)任务的预训练模型。该模型是在Facebook的wav2vec2-large-xlsr-53模型基础上,使用Common Voice 6.1数据集的训练集和验证集进行微调得到的。

模型特点

  1. 该模型专门用于识别16kHz采样率的西班牙语语音。

  2. 模型在Common Voice es测试集上取得了较好的性能:

    • 无语言模型时,词错误率(WER)为8.82%,字符错误率(CER)为2.58%
    • 加入语言模型后,WER降至6.27%,CER降至2.06%
  3. 在Robust Speech Event的开发数据集上:

    • 无语言模型时,WER为30.19%,CER为13.56%
    • 加入语言模型后,WER降至24.71%,CER降至12.61%

使用方法

该模型可以直接使用,无需额外的语言模型。使用时有两种方式:

  1. 通过HuggingSound库: 只需几行代码即可实现语音识别,使用简单方便。

  2. 自定义推理脚本: 可以更灵活地控制识别过程,适合有特定需求的用户。

评估方法

项目提供了两种评估方法:

  1. 在Common Voice 6.0测试集上评估
  2. 在speech-recognition-community-v2开发数据集上评估

用户可以根据需要选择合适的评估方法。

项目贡献

该项目由Jonatas Grosman开发,使用了OVHcloud慷慨提供的GPU资源。项目的训练脚本已在GitHub上开源,方便其他研究者复现或进一步改进。

总结

wav2vec2-large-xlsr-53-spanish项目为西班牙语自动语音识别提供了一个性能优秀、使用简便的预训练模型。无论是研究人员还是开发者,都可以方便地使用该模型进行西班牙语语音识别任务,为相关应用的开发提供了有力支持。

编辑推荐精选

潮际好麦

潮际好麦

AI赋能电商视觉革命,一站式智能商拍平台

潮际好麦深耕服装行业,是国内AI试衣效果最好的软件。使用先进AIGC能力为电商卖家批量提供优质的、低成本的商拍图。合作品牌有Shein、Lazada、安踏、百丽等65个国内外头部品牌,以及国内10万+淘宝、天猫、京东等主流平台的品牌商家,为卖家节省将近85%的出图成本,提升约3倍出图效率,让品牌能够快速上架。

iTerms

iTerms

企业专属的AI法律顾问

iTerms是法大大集团旗下法律子品牌,基于最先进的大语言模型(LLM)、专业的法律知识库和强大的智能体架构,帮助企业扫清合规障碍,筑牢风控防线,成为您企业专属的AI法律顾问。

SimilarWeb流量提升

SimilarWeb流量提升

稳定高效的流量提升解决方案,助力品牌曝光

稳定高效的流量提升解决方案,助力品牌曝光

Sora2视频免费生成

Sora2视频免费生成

最新版Sora2模型免费使用,一键生成无水印视频

最新版Sora2模型免费使用,一键生成无水印视频

Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手,它拥有超精准的音频识别翻译能力,几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球,无论你是留学生、商务人士、韩剧美剧爱好者,还是出国游玩、多国会议、跨国追星等等,都可以满足你所有需要同传的场景需求,线上线下通用,扫除语言障碍,让全世界的语言交流不再有国界。

讯飞绘文

讯飞绘文

选题、配图、成文,一站式创作,让内容运营更高效

讯飞绘文,一个AI集成平台,支持写作、选题、配图、排版和发布。高效生成适用于各类媒体的定制内容,加速品牌传播,提升内容营销效果。

热门AI辅助写作AI工具讯飞绘文内容运营AI创作个性化文章多平台分发AI助手
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
商汤小浣熊

商汤小浣熊

最强AI数据分析助手

小浣熊家族Raccoon,您的AI智能助手,致力于通过先进的人工智能技术,为用户提供高效、便捷的智能服务。无论是日常咨询还是专业问题解答,小浣熊都能以快速、准确的响应满足您的需求,让您的生活更加智能便捷。

imini AI

imini AI

像人一样思考的AI智能体

imini 是一款超级AI智能体,能根据人类指令,自主思考、自主完成、并且交付结果的AI智能体。

Keevx

Keevx

AI数字人视频创作平台

Keevx 一款开箱即用的AI数字人视频创作平台,广泛适用于电商广告、企业培训与社媒宣传,让全球企业与个人创作者无需拍摄剪辑,就能快速生成多语言、高质量的专业视频。

下拉加载更多