vvt004

speech-eval-arena

vvt004

A small CLI harness for evaluating speech LLMs and ASR models on standard benchmarks (LibriSpeech, FLEURS, VoxPopuli).

AI 简介

Speech Eval Arena 是一个轻量级命令行工具,用于在标准语音基准数据集上统一评估语音大语言模型和自动语音识别(ASR)模型。它支持 LibriSpeech、FLEURS、VoxPopuli 等多语言/多任务数据集,提供 WER、CER、F1、Accuracy 等核心指标,并通过 YAML 配置灵活接入 Hugging Face 模型。项目采用极简设计,避免重型依赖,适合快速验证模型性能或开展对比实验,尤其适用于语音模型研发、学术评测及论文复现等场景。

Python
MIT License
220
Stars
3.2k
Forks
5
Watchers
0
Issues

Star 增长

今日0
近 7 天0
近 30 天0
综合评分50
默认分支main