标准详细信息 去购物车结算

【团体标准】 远程银行人工智能客服评价指标规范

本网站 发布时间: 2023-11-06
  • T/CBA 220-2021
  • 现行
  • 定价: 无文本 / 折扣价: 0
  • 在线阅读
开通会员免费在线看70000余条国内标准,赠送文本下载次数,单本最低仅合13.3元!还可享标准出版进度查询、定制跟踪推送、标准查新等超多特权!   查看详情>>
标准简介标准简介

适用范围:

4.1评价指标的范围4.1.1性能指标,用于衡量人工智能客服语音识别及语义理解能力,主要包括语音识别准确率、问题识别率、意图理解准确率等。4.1.2运营效果指标,用于衡量人工智能客服在客户体验提升、服务分流等方面的能力,主要包括交互准确率、问题解决率、智能分流率等。4.2评价指标的方法4.2.1抽样法根据交互样本标注数据推算人工智能客服评价指标的方法。按照GB/T21664-2008规定,假设事项发生率为50%、绝对误差为1%时,所需的必要样本量为1万。完成样本抽取后,与标注人员对本单位业务流程判定的结果进行对比,一致即为正确。4.2.2报表法根据系统运营数据计算人工智能客服评价指标的方法。典型的系统运营数据包括进线量、交互数、客户评价数、转人工进线量。4.3评价指标的内容4.3.1语音识别准确率4.3.1.1指标释义标注有效交互中,语音识别正确的字数在人工智能客服转写总字数中的占比。该指标主要适用于语音交互AI。4.3.1.2计算口径4.3.1.2.1适用语种主要为中华人民共和国国家通用语言文字(普通话和规范汉字),包含阿拉伯数字及常用英文。在测算时,阿拉伯数字、单独英文字母(如:e缴费、ETC),一个数字或字母按一个文字计算;英文单词(如:card),一个单词按一个文字计算;标点符号不计算在内。注:中华人民共和国国家通用语言文字必须符合《中华人民共和国国家通用语言文字法》的要求。4.3.1.2.2计算方法语音识别准确率采用抽样法计算。4.3.1.2.3标注有效交互标注有效交互指抽样标注交互中剔除无效语音后的交互。无效语音由标注人员在测听过程中参考判定规则进行判断,详见表1。

基本信息

  • 标准号:

    T/CBA 220-2021

  • 标准名称:

    远程银行人工智能客服评价指标规范

  • 英文名称:

    Specification for evaluating indicators of AI customer service of the remote banking
  • 标准状态:

    现行
  • 发布日期:

    2021-09-16
  • 实施日期:

    2021-09-16
  • 出版语种:

标准分类号

  • 标准ICS号:

    03.060
  • 中标分类号:

关联标准

  • 替代以下标准:

  • 被以下标准替代:

  • 引用标准:

  • 采用标准:

出版信息

  • 页数:

  • 字数:

  • 开本:

其他信息

  • 起草人:

    潘光伟、刘峰、高峰、张庚、伊贵英、李宽、成星、任旭华、赵成刚、胡冬梅、刘鑫、吕林、仲峻锋、陈嘉、马铁军、周红艳、王立华、郭丛娜、李丹丹、刘梅、龙平、赵磊、马娟、熊洪营、王爱泽、吕盛蕾、陈炳基、李文娟、吴宏恩、林莉、袁倩、王山、濮丽佳、韩春笋、彭修文、章剑弘、李金龙、张萍、梁毅、林秀如、张淼、田多、金蕾蕾
  • 起草单位:

    中国银行业协会、中国建设银行股份有限公司、广发银行股份有限公司、中国工商银行股份有限公司、交通银行股份有限公司、中国邮政储蓄银行股份有限公司、中信银行股份有限公司、上海浦东发展银行股份有限公司、中国民生银行股份有限公司、华夏银行股份有限公司、平安银行股份有限公司、兴业银行股份有限公司、北京银行股份有限公司、杭州银行股份有限公司
  • 归口单位:

    中国银行业协会
  • 提出部门:

    中国银行业协会
  • 发布部门:

    中国银行业协会