本次查询:Task Success Rate
中文解释:任务成功率
常见场景:智能客服对话系统 / 机器人流程自动化(RPA) / AI Agent自主任务执行
一句话解释
Task Success Rate(任务成功率)是AI系统完成指定任务的比例,比如智能客服成功帮用户完成查账单、改地址等操作,而不是只回答了一句“好的”。它衡量的是“做成了什么”,而不是“说了什么”。
为什么会被关注
随着AI从“聊天机器”转向“办事助手”,用户不再满足于流畅对话,而是要求实际问题被解决。Task Success Rate直接关联业务转化和用户留存,企业用它判断AI是否真的能替代人工完成核心任务,避免“答非所问”或“半途而废”的体验。
在智能客服、RPA、AI Agent等产品宣传中,Task Success Rate成为比“响应速度”或“意图识别准确率”更有说服力的指标,因为它直接反映最终收益——比如减少人工转接、提升订单完成率。
核心逻辑
Task Success Rate通常定义为:成功完成的用户请求数 / 总用户请求数 × 100%。其中“成功”需明确定义,例如:用户确认问题解决、系统执行了关键操作(如生成订单)、或达到预设的业务终点(如退款到账)。
计算时需排除因用户主动放弃或信息缺失导致的失败。与单纯准确率不同,它考察完整的任务链条:从意图理解到操作执行,再到结果确认。任何一个环节失败(如中间要求用户反复确认)都算未成功。
常见场景
智能客服:用户要求查询余额、办理挂失、修改密码等,成功完成全流程才算1次成功。若客服只给出步骤提示而未实际执行,则不计入。电商场景中,帮用户查物流、申请退款、改地址等任务。
RPA流程自动化:机器人执行数据录入、跨系统搬运、报表生成等任务。成功指按预期输出正确结果且无人工干预。例如自动开票流程,从读取数据到生成PDF并发送邮件,全链条无报错。
AI Agent(如浏览器插件、代码助手):用户让Agent预订会议室、写周报、搜索资料并整理。成功指最终交付物符合用户原始需求,且不需要用户二次修改。
容易混淆的点
Task Success Rate ≠ 意图识别准确率。意图识别只判断“用户想做什么”,而任务成功要求“实际做到了”。例如智能客服猜对了用户要退款,但退款流程卡住或退回错误金额,意图准确率再高,任务成功率仍然为零。
也不等于“回答准确率”或“语法正确率”。AI可能给出完美话术但没解决问题(如告诉用户“请拨打热线”),这类情况在任务成功率统计中属于失败。更要注意与“首次解决率”(First Contact Resolution)的区别:后者强调一次交互完成,而任务成功率允许多轮交互,但必须最终实现目标。
