arXiv cs.CL· Massa Baali, Bhiksha Raj·· 2 天前AI 评分34
Inquesto Score:面向语音智能体的可靠性评测协议
Inquesto Score: A reliability Protocol For Voice Agents
AI 导读
Inquesto Score(IS)是一套语音智能体可靠性评测协议,把可靠性定义为固定、版本化评测人群中没有出现功能故障或更严重失效的通话占比。其 v0.1 覆盖 30 个场景、3 种声学条件、4 个说话人分组,对参考语音智能体系统的 13 种配置各评测 306 通通话,其中 talk-over、响应延迟等时序失效直接从音频测量。协议、参考实现与评测记录已公开。
来源:arXiv cs.CL · arxiv.org