AI 上线后最常听到的汇报是「大家都在用」,这句话没法核对。可执行的办法是:先记动手前的人工基线,再固定三个能每周查一次的指标,用同一张表、同一口径记一个季度。下面给指标定义、记录表和三步做法。
一、先把「用了没」换成能核对的三件事
使用量只说明有人打开过,不说明活儿变轻了。要判断一个场景有没有跑顺,得同时看三件事:活儿是不是真的被接走、人还得花多少时间擦屁股、出错时能不能兜住。三件事各配一个指标,比一句「感觉挺顺」有用得多。
这三个指标的共同要求是:口径能写成一句话、数据源现在就取得到、每周由同一个人记录。取不到的数据先别设成指标,否则第一周就断更。本文讲的是记录方法,不构成效果或工期承诺。
二、三个指标怎么定义
| 指标 | 口径 | 取数处 | 看什么 |
|---|---|---|---|
| 基线对比 | 同一批活人工做与现在做各花多久 | 抽样计时 | 单位耗时是否下降 |
| 人工复核量 | 输出里需人改、人补、重做的比例 | 复核记录 | 复核时间有没有被挪走 |
| 一次性解决率 | 一轮内闭环、不转人工的占比 | 工单日志 | 该转人工的是否被硬接 |
三个指标要一起看。只盯单位耗时,容易把该转人工的投诉硬接下来;只盯解决率,又可能把简单活全筛走凑好看。基线对比是第一位的:没有动手前的数,后面两项再漂亮也说不清变化从哪来。
三、一张周记录表,五列就够
- 周次与场景名:一次只记一个场景,别把三条流程混在一行。
- 本周样本量:写清多少条,样本忽多忽少时数字不能直接比。
- 三个指标各填本周值与上周值,不写「有改善」这类形容词。
- 异常说明:系统改过、人员换过、业务量波动,都记一笔。
- 一条结论:继续观察、补知识、还是暂停,只选一个并写理由。
表用一张共享表格就能维护,不必先上系统。关键是每周固定同一天、同一个人填,填完当场写结论。示例:某场景每周 60 条、人工复核每条 2 分钟,即约 120 分钟一周(示意测算,换成贵司自己的数字才算数)。这个数只用来判断要不要排复核班,不是成本或效果结论。
四、三步起步,别等数据齐了才动手
- 第 1 步:上线前抽样计时 20 条同类活,记下平均单位耗时和当时的人工复核比例,作为基线。
- 第 2 步:把三个指标的口径写成一页说明,指定记录人,约定每周哪天填表。
- 第 3 步:连记四周再判趋势;中途换过系统或口径,就在异常说明里断开,别硬接成一条曲线。
第四步以后才谈放大。四周里若单位耗时没动、复核量反而上升,先回去看知识是不是缺、规则是不是没写清,而不是先换工具。指标的作用是定位问题,不是给项目打分。
五、最容易走偏的三处
一是拿总耗时当效率。业务量涨了,总时长自然涨,要看单位耗时。二是把指标设成事后才取得的数据,比如季度财务口径,周会上根本用不上。三是每周换口径:这周算「改过就算复核」,下周算「重做才算」,两行数字没法比。
还有一处是老板只看一张汇总数。建议周会只看三行原值和一句异常说明,把解释权留给记录人。数字对不上时先查口径,别急着追责,否则下一周的表就开始好看了。
常见问答
问:只有三五个人的小团队也要记吗?答:要,但可以极简。一张表、三个数、每周十分钟就够;样本少时把「样本量」那列写清楚,避免误读。
问:指标变差是不是就该停?答:先查异常说明。系统改动、人员轮换、业务量波动都会让数字变,连看四周、口径不变再判断。
问:多久算能看出来?答:没有可承诺的时间,取决于业务量和流程稳定性。能控制的是基线先记、口径不改、每周不漏记。本文不承诺具体效果指标。
关于我们:西安赛腾网络信息技术有限公司(AI 项目孵化基地)位于陕西西安,开展 AI 落地诊断、岗位级 AI 员工定制、企业知识库建设与 FDE 驻场陪跑,官网 https://www.saitengai.com 。孵化基地偏向把基线口径、周记录表和复核留痕沉淀成企业自己能接着填的文件。本文为方法整理,不构成报价或效果承诺;方案、周期与验收以双方确认的项目文件为准。