懂AI
Leaderboard

Leaderboard

多语言语音识别基准测试平台 促进ASR系统评估

SpeechColab ASR leaderboard是一个开源的语音识别基准平台，集成测试集、模型集和标准化评估流程。平台提供多样化测试数据，涵盖广泛ASR场景，支持商业API和开源模型评估。它简化了ASR系统的基准测试、复现和验证过程，方便研究人员和开发者比较不同系统性能。通过统一的评估标准，该平台有助于推动语音识别技术的持续进步。

语音识别基准测试数据集模型评估Github开源项目
GitHub

SpeechColab ASR leaderboard

result result

1. Overview

"If you can’t measure it, you can’t improve it." -- Peter Drucker

SpeechIO leaderboard serves as an ASR benchmarking platform by providing 3 components:

  1. TestSet Zoo: A collection of test sets covering wide range of speech recognition tasks & scenarios

  2. Model Zoo: A collection of models including commercial APIs & open-sourced models

  3. Benchmarking Pipeline: a simple & well-specified pipeline to take care of data preparation / recognition / post processing / error rate evaluation.

People should be able to easily benchmark, reproduce, examine ASR systems from each other

Overview

2. TestSet Zoo: datasets/*

<details><summary> Academic Test Sets (EN & ZH) </summary><p>
已公开 <br> UNLOCKED编号 <br> DATASET_ID说明 <br> DESCRIPTION语言 <br> LANGUAGE
✓AISHELL1_TESTtest set of AISHELL-1zh
✓AISHELL2_IOS_TESTtest set of AISHELL-2 (iOS channel)zh
✓AISHELL2_ANDROID_TESTtest set of AISHELL-2 (Android channel)zh
✓AISHELL2_MIC_TESTtest set of AISHELL-2 (Microphone channel)zh
✓ALIMEETING_EVAL_NEAR_FIELDAliMeetingzh
✓ALIMEETING_TEST_NEAR_FIELDAliMeetingzh
✓ALIMEETING_EVAL_FAR_FIELDAliMeetingzh
✓ALIMEETING_TEST_FAR_FIELDAliMeetingzh
✓LIBRISPEECH_TEST_CLEAN"test_clean" set of LibriSpeechen
✓LIBRISPEECH_TEST_OTHER"test_other" set of LibriSpeechen
✓TEDLIUM_RELEASE3_LEGACY_DEVtedlium release 3, legacy dir dev set TEDLium3en
✓TEDLIUM_RELEASE3_LEGACY_TESTtedlium release 3, legacy dir test set TEDLium3en
✓GIGASPEECH_V1.0.0_DEVdev set of GigaSpeechen
✓GIGASPEECH_V1.0.0_TESTtest set of GigaSpeechen
✓VOXPOPULI_V1.0_EN_DEVdev set of VoxPopulien
✓VOXPOPULI_V1.0_EN_TESTtest set of VoxPopulien
✓VOXPOPULI_V1.0_EN_ACCENTED_TESTaccented test set of VoxPopulien
✓COMMON_VOICE_V11.0_DEVdev set of Common Voiceen
✓COMMON_VOICE_V11.0_TESTtest set of Common Voiceen
</p></details> <details><summary> SpeechIO Test Sets (ZH) </summary><p> 
SpeechIO test sets are carefully curated by SpeechIO authors, crawled from publicly available sources (Youtube, TV programs, Podcast etc), covering various well-known scenarios and topics, transcribed by payed professional annotators.
已公开 <br> UNLOCKED编号 <br> DATASET_ID名称 <br> NAME场景 <br> SCENARIO内容领域 <br> TOPIC有效时长 <br> DURATION (HOURS)难度(1-5) <br> DIFFICULTY
✓SPEECHIO_ASR_ZH00000调试集 <br> for debugging视频会议、论坛演讲 <br> conference & speech经济、货币、金融 <br> economy, currency, finance1.0★★☆
✓SPEECHIO_ASR_ZH00001新闻联播新闻播报 <br> TV News时政 <br> news & politics9★
✓SPEECHIO_ASR_ZH00002鲁豫有约访谈电视节目 <br> TV interview名人工作/生活 <br> celebrity & film & music & daily3★★☆
✓SPEECHIO_ASR_ZH00003天下足球专题电视节目 <br> TV program足球 <br> Sports & Football & Worldcup2.7★★☆
✓SPEECHIO_ASR_ZH00004罗振宇跨年演讲会场演讲 <br> Stadium Public Speech社会、人文、商业 <br> Society & Culture & Business Trend2.7★★
✓SPEECHIO_ASR_ZH00005李永乐讲堂在线教育 <br> Online Education科普 <br> Popular Science4.4★★★
✓SPEECHIO_ASR_ZH00006王者荣耀 <br> 张大仙 & 骚白直播 <br> Live Broadcasting游戏 <br> Game1.6★★★☆
✓SPEECHIO_ASR_ZH00007直播带货 <br> 李佳琪 & 薇娅直播 <br> Live Broadcasting电商、美妆 <br> Makeup & Online shopping/advertising0.9★★★★☆
✓SPEECHIO_ASR_ZH00008老罗语录线下培训 <br> Offline lecture段子、做人 <br> Life & Purpose & Ethics1.3★★★★☆
✓SPEECHIO_ASR_ZH00009故事FM播客 <br> Podcast人生故事、见闻 <br> Ordinary Life Story Telling4.5★★☆
✓SPEECHIO_ASR_ZH00010创业内幕播客 <br> Podcast创业、产品、投资 <br> Startup & Enterprenuer & Product & Investment4.2★★☆
✓SPEECHIO_ASR_ZH00011罗翔刑法法考在线教育 <br> Online Education法律 法考 <br> Law & Lawyer Qualification Exams3.4★★☆
✓SPEECHIO_ASR_ZH00012张雪峰考研在线教育 <br> Online Education考研 高校报考 <br> University & Graduate School Entrance Exams3.4★★★☆
✓SPEECHIO_ASR_ZH00013谷阿莫 <br> 牛叔说电影短视频 <br> VLog电影剪辑 <br> Movie Cuts1.8★★★
✓SPEECHIO_ASR_ZH00014贫穷料理 <br> 琼斯爱生活短视频 <br> VLog美食、烹饪 <br> Food & Cooking & Gourmet1★★★☆
✓SPEECHIO_ASR_ZH00015单田芳 白眉大侠评书 <br> Traditional Podcast江湖、武侠 <br> Kongfu Fiction2.2★★☆
✓SPEECHIO_ASR_ZH00016德云社演出剧场相声 <br> Theater Crosstalk Show包袱段子 <br> Funny Stories1★★★
✓SPEECHIO_ASR_ZH00017吐槽大会脱口秀电视节目 <br> Standup Comedy明星糗事 <br> Celebrity Jokes1.8★★☆
✓SPEECHIO_ASR_ZH00018小猪佩奇 <br> 熊出没少儿动画 <br> Children Cartoon童话故事、日常 <br> Fairy Tale0.9★☆
✓SPEECHIO_ASR_ZH00019CCTV5 NBA 转播体育赛事解说 <br> Sports Game Live篮球、NBA <br> NBA Game0.7★★★
✓SPEECHIO_ASR_ZH00020篮球人物纪录片 <br> Documentary篮球明星、成长 <br> NBA Super Stars' Life & History2.2★★
✓SPEECHIO_ASR_ZH00021汽车之家评测短视频 <br> VLog汽车测评 <br> Car benchmarks, Road driving test1.7★★★☆
✓SPEECHIO_ASR_ZH00022小艾大叔 豪宅带看短视频 <br> VLog房地产、豪宅 <br> Realestate, Mansion tour1.7★★★
✓SPEECHIO_ASR_ZH00023无聊开箱 <br> Zealer评测短视频 <br> VLog产品开箱评测 <br> Unboxing2★★★
✓SPEECHIO_ASR_ZH00024付老师种植技术短视频 <br> VLog农业、种植 <br> Agriculture, Planting2.7★★★☆
✓SPEECHIO_ASR_ZH00025石国鹏讲历史线下培训 <br> Offline lecture历史，古希腊哲学 <br> History, Greek philosophy1.3★★☆
✓SPEECHIO_ASR_ZH00026张震鬼故事广播节目 <br> Broadcasting Program鬼故事 <br> Horror Stories2.4★★★
✗SPEECHIO_ASR_ZH00027华语辩论世界杯辩论赛 <br> Debates Contest兴趣、技能、成长 <br> Hobby, Skill, Growth1.4★★★
✗SPEECHIO_ASR_ZH00028时政现场同传同声传译 <br> Simultaneous Translation时政、社会公共治理 <br> News & Events on Public Governance2.1★★★☆
✗SPEECHIO_ASR_ZH00029港台明星访谈 <br> 周杰伦,曾志伟 <br> 张家辉,陈小春 <br> 周星驰口音(港台) <br> HongKong/Taiwan Accents娱乐、生活、演艺 <br> Entertainment, Acting, Musics1.5★★★☆
✗SPEECHIO_ASR_ZH00030世界青年说口音(老外) <br> Foreigner Accents异国文化比较 <br> Cultural Difference2★★★☆
✗SPEECHIO_ASR_ZH00031东方甄选直播 <br> broadcast带货，英语教学 <br> Online advertising & English Education2.4★★★☆
✗SPEECHIO_ASR_ZH00032郎朗钢琴课长视频 <br> long-form video音乐乐理，钢琴 <br> Music & piano1.7★★☆
✗SPEECHIO_ASR_ZH00033老石谈芯短视频 <br> VLog芯片 <br> chips2.8★★★
✗SPEECHIO_ASR_ZH00034电丸科技AK短视频 <br> VLog网络 IT <br> Internet tech, IT1.4★★★☆
✗SPEECHIO_ASR_ZH00035新氧医美短视频 <br> VLog医疗美容 <br> Medical Cosmetology1.4★★
✗SPEECHIO_ASR_ZH00036交通广播交通广播 <br> traffic radio路况，娱乐 <br> Traffics1.2★★★☆
✗SPEECHIO_ASR_ZH00037老俞闲聊在线会议 <br> Online meeting闲聊 <br> chat2.4★★★
✗SPEECHIO_ASR_ZH00038电影：疯狂石头+疯狂赛车电影 <br> Film重庆话、山东青岛、四川成都话、河北唐山话、粤语、天津话、河南话、陕西话、闽南话，武汉话等 <br> multiple accents1.3★★★★☆
✗SPEECHIO_ASR_ZH00039电影：1942电影 <br> Film河南话 <br> HeNan Accent0.9★★★★
✗SPEECHIO_ASR_ZH00040电影：白鹿原电影 <br> Film陕西话 <br> ShaanXi Accent1.1★★★★★
✗SPEECHIO_ASR_ZH00041电影：让子弹飞电影 <br> Film四川话 <br> SiChuan Accent1.1★★★★☆
✗SPEECHIO_ASR_ZH00042电影：人生大事电影 <br> Film武汉话 <br> WuHan Accent0.8★★★★
</p></details>

Download Dataset

3. Model Zoo: models/*

<details><summary> EN Models </summary><p>
编号 <br> MODEL_ID类型 <br> TYPE厂商/作者 <br> PROVIDER/AUTHOR简介 <br> DESCRIPTION链接 <br> URL
aliyun_api_en

编辑推荐精选

商汤小浣熊

商汤小浣熊

最强AI数据分析助手

小浣熊家族Raccoon，您的AI智能助手，致力于通过先进的人工智能技术，为用户提供高效、便捷的智能服务。无论是日常咨询还是专业问题解答，小浣熊都能以快速、准确的响应满足您的需求，让您的生活更加智能便捷。

imini AI

imini AI

像人一样思考的AI智能体

imini 是一款超级AI智能体，能根据人类指令，自主思考、自主完成、并且交付结果的AI智能体。

Keevx

Keevx

AI数字人视频创作平台

Keevx 一款开箱即用的AI数字人视频创作平台，广泛适用于电商广告、企业培训与社媒宣传，让全球企业与个人创作者无需拍摄剪辑，就能快速生成多语言、高质量的专业视频。

即梦AI

即梦AI

一站式AI创作平台

提供 AI 驱动的图片、视频生成及数字人等功能，助力创意创作

扣子-AI办公

扣子-AI办公

AI办公助手，复杂任务高效处理

AI办公助手，复杂任务高效处理。办公效率低？扣子空间AI助手支持播客生成、PPT制作、网页开发及报告写作，覆盖科研、商业、舆情等领域的专家Agent 7x24小时响应，生活工作无缝切换，提升50%效率！

TRAE编程

TRAE编程

AI辅助编程，代码自动修复

Trae是一种自适应的集成开发环境（IDE），通过自动化和多元协作改变开发流程。利用Trae，团队能够更快速、精确地编写和部署代码，从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能，是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
蛙蛙写作

蛙蛙写作

AI小说写作助手，一站式润色、改写、扩写

蛙蛙写作—国内先进的AI写作平台，涵盖小说、学术、社交媒体等多场景。提供续写、改写、润色等功能，助力创作者高效优化写作流程。界面简洁,功能全面,适合各类写作者提升内容品质和工作效率。

AI辅助写作AI工具蛙蛙写作AI写作工具学术助手办公助手营销助手AI助手
问小白

问小白

全能AI智能助手，随时解答生活与工作的多样问题

问小白，由元石科技研发的AI智能助手，快速准确地解答各种生活和工作问题，包括但不限于搜索、规划和社交互动，帮助用户在日常生活中提高效率，轻松管理个人事务。

热门AI助手AI对话AI工具聊天机器人
Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手，它拥有超精准的音频识别翻译能力，几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球，无论你是留学生、商务人士、韩剧美剧爱好者，还是出国游玩、多国会议、跨国追星等等，都可以满足你所有需要同传的场景需求，线上线下通用，扫除语言障碍，让全世界的语言交流不再有国界。

讯飞智文

讯飞智文

一键生成PPT和Word，让学习生活更轻松

讯飞智文是一个利用 AI 技术的项目，能够帮助用户生成 PPT 以及各类文档。无论是商业领域的市场分析报告、年度目标制定，还是学生群体的职业生涯规划、实习避坑指南，亦或是活动策划、旅游攻略等内容，它都能提供支持，帮助用户精准表达，轻松呈现各种信息。

AI办公办公工具AI工具讯飞智文AI在线生成PPTAI撰写助手多语种文档生成AI自动配图热门
下拉加载更多