Sierra推出语音Agent实体细节基准𝜏-Entity
Sierra于2026年10月22日发布τ-Entity基准,用于测试语音智能体能否准确捕获、识别并修正姓名、电话、地址、邮箱等实体细节错误。该基准包含200个任务、覆盖十类实体,并设有六语言榜单。榜单显示,GPT Live 1在常规通话中正确率为60.3%,但在常规、强噪声、强语音三种条件下全部通过的任务仅占34.0%;Gemini 3.8 Live与Grok Voice Think Fast 2.0的全条件通过率分别为19.5%和24.0%。论文还发现,规定“询问—拼读/复述—确认修正—提交”流程可将全条件成功率提升14至31个百分点,代价是每通电话多花21至28秒。目前尚无后续发展。
匹配字段标题