SpeechIO TIOBE Benchmark

新增测试场景

本篇文章只给出新增测试集的具体信息,并不包含测试结果。滚动测试结果会在近期发布。

共新增7个测试集:

  • 直播带货 东方甄选

  • 音乐: 郎朗钢琴课

  • 芯片:老石谈芯

  • IT:电丸科技AK

  • 医疗美容:新氧

  • 交通广播

  • 网络视频聊天:老俞闲话

新增场景中重点涵盖了中英文混合的语音识别。Word-based和Char-based的语言在这类场景中的评测指标会发生冲突,我们目前不打算花费精力处理该问题,统一跟随汉语,简化为字错误率统计。中文字符和英文字符通常包含不同量级的信息量,字错误率指标下,英文部分的识别性能对数字有较大影响,特此说明。如果读者朋友愿意帮忙改进,欢迎在 Leaderboard 项目中提交 PR,项目地址在:

https://github.com/SpeechColab/Leaderboard









扫描下面二维码 或 微信搜索 SpeechIO,关注公众号。

加入讨论群,第一时间接收 SpeechIO 信息,请添加微信 JerryEjwt 备注 SpeechIO


SpeechIO

微信扫码二维码,关注我的公众号