Back to Feed
总结
清华NLP实验室、OpenBMB与面壁智能联合发布并开源音频模型测评框架UltraEval-Audio,旨在完善音频与全模态模型的评测体系。其最新版本v1.1.0在原有“一键测评”基础上,新增热门音频模型一键复现能力,扩展对专业模型与专项评测的支持,并引入隔离推理运行机制,以降低复现门槛、提升评测流程的可控性与可迁移性。发布方称该工具已被用于高影响力音频与全模态模型评测,本次开源有望提升音频模型研发与对比验证效率,文中同时提供了框架与论文链接。
正文
清华 NLP 实验室、OpenBMB 与面壁智能联合发布并开源面向音频模型的测评框架 UltraEval-Audio,它完善了音频评测体系和框架。其最新版本 v1.1.0 在原「一键测评」基础上,新增热门音频模型一键复现能力,扩展对专业模型与专项评测的支持,引入隔离推理运行机制,降低复现门槛、提升评测流程可控性与可迁移性。作为高影响力音频、全模态模型的御用测评工具,该版本开源将提高音频模型研发效率。此外,文中还给出了 UltraEval-Audio v1.1.0 评测框架及论文的相关链接。
发布时间: