开场与概念
建议用时约 4 分钟先看一个情境虚构示例,数字为示意
她说:用了专属助手,感觉快多了。
部门经理郑总问:快了多少?值不值?
她答不上来。感觉推不动资源,数字才推得动。
量效果要回答的三个问题
基线、样本与公平对比
建议用时约 7 分钟公平对比的四个同样
同样的活
不拿简单的会和复杂的会比;特别简单或复杂的,照常记录,备注写明
同样的范围
基线从哪算到哪,试跑也从哪算到哪;检查和修改的时间也要算进去
同样的标准
用同一张验收清单判断好坏,基线和试跑都不换尺子
同样的人
同一个人做,或同一水平的人做
基线怎么补:用同一把尺子回评往期
林悦的手工基线虚构示例,数字为示意
每次用时
往期 7 份会议记录,从拿到记录到纪要发出,含核对(实测,示意)
平均漏项
7 份共漏 15 项,平均每次约 2.1 项(实测,示意)
样本不够,怎么办:回测补样本
示范:四个指标与数字链
建议用时约 13 分钟四个指标,每个都要写清怎么量
时间
从开始到可以交付的总分钟数,含检查和修改,用手机计时
质量与出错
用同一张清单,数交出去之前的最终漏项
一致性
格式全部达标的次数 ÷ 总次数;同事接手、你请假时才能推广
成本
订阅费用、词元费用、一次性投入的小时数;金额来自自己的账单
成本的来龙去脉:词元是怎么来的
同样十个问题,两种对话示意单位“份”,不是真实词元数
同一个对话连问十轮
第 1 轮 11 份,第 10 轮已到 29 份,十轮合计(示意)
十件事各开一个新对话
每个对话只问一轮,每轮 11 份,十轮合计(示意)
林悦的数字链:三组数字不能混用
把合并数字拆开,才看得见真相虚构示例,数字为示意
回测 7 份
总漏项 3 项,约 0.4 项每次。是首次试用那 7 份,调过剧本后重跑,偏乐观。
实跑 4 份
总漏项 1 项,0.25 项每次。每周一次,最干净、更可靠,但只有 4 份。
行业版:栖岚智能的工单分类
练习 A:整理数据,同事抽查
建议用时约 6 分钟整理试跑数据
建议用时 约 6 分钟你是一位细心的数据整理员。下面是我试跑的记录,每行是一次:序号、来源(回测或实跑)、总用时(分钟,含检查)、最终漏项数、是否需要人工补正。 [把你的表格贴在这里] 请你: 1. 逐行复述我给的数据,确认没有读错。 2. 分别算出回测、实跑和合并的平均用时、最长和最短用时、平均漏项数、需要人工补正的次数。 3. 另外算出“后 4 次”(即实跑)的平均用时和平均漏项,我要同时写全部平均和稳定值。 4. 写出每个数字的计算过程,让我能自己复核。 5. 不要猜我没给的数据;缺数据的地方请直接指出来。
同事抽查:别只信自己数的漏项
练习 B:算账
建议用时约 12 分钟投入产出表:一格一格算
回本周数:金额版与小时版示意金额,非真实价格
金额版
600 元 ÷ 每周净收益 65 元(即每月净收益 260 元 ÷ 4)
小时版
6 ÷ 1.03:不把订阅费用算进去
让它只检查公式
建议用时 约 4 分钟我在做一张投入产出表。下面是我的数据和公式,请你只做一件事:检查公式有没有写错、单位有没有对不上、有没有重复计算。不要改我的数字,不要替我编价格。 每次省下分钟数 = [基线每次耗时] − [试跑平均用时] = [结果] 每周次数 = [数字] 每月订阅费用 = [我的账单数字] 每月词元费用 = [我的用量数字,或写已含在订阅内] 每小时时间价值 = [我的口径] 一次性投入小时数 = [数字] 请逐条列出你发现的问题;没有问题就写“未发现问题”。
投入产出表的检查标准
练习 C:写一页结果报告
建议用时约 9 分钟一页结果报告:六段
“同事怎么说”怎么来:同事五问同事五问:你在旁边看着,不插手、不教
请一位同事试用,用完问五个问题。
一、你用它做了什么?二、哪一刻觉得“它懂了我的活”?三、哪一刻觉得它在说废话?四、以后会不会用?五、用一个词形容它。
记原话。他说“还行吧”,你就写“还行吧”。
让它按六段写报告
建议用时 约 9 分钟你是一位写工作汇报的资深助理。请根据我提供的数据,写一页结果报告,严格按六段:一、问题;二、做法;三、数据;四、同事怎么说;五、意外发现;六、结论与下一步。 要求:只使用我给的数字,每个关键数字后面保留我标的“实测”或“估计”;同事的话必须原样引用,不要改写、不要合并、不要美化;样本少时要写明“样本偏少,结论暂定”;不要添加我没提供的数据或效果;语气平实,不夸大;全文不超过 500 字。 我的材料: 活的名称:[名称] 原来的情况:[基线,含每次耗时、每周次数、漏项数,注明实测或估计] 我的做法:[流程和人机分工,两三句] 试跑结果:[实跑几次、回测几次;各自的平均用时和漏项;合并数字;后几次稳定值] 抽查:[同事抽查几份,差异多少] 成本:[订阅费用、词元费用、一次性投入小时数,注明估计] 同事原话:[2 到 3 句,原样] 意外发现:[一件和预期不一样的事] 我想请求的下一步:[资源、范围、期限]
一页报告的检查标准
判定、小测验与作业
建议用时约 9 分钟判定:对照事先写下的线林悦的判定,数字为示意
成功线
- 平均用时不超过基线的一半(45 分钟)
- 平均漏项不高于 1.0 项,且低于基线 2.1 项
- 没有红线事故
止损线
- 出现一次红线事故
- 连续两次实跑用时不低于 90 分钟
- 累计 4 次后平均用时仍超过 72 分钟
三道小题,检验一下
第 1 题:实跑只有 4 份,样本不够,应该怎么做?
第 2 题:林悦说的“2.1 项”指的是什么?
第 3 题:同事抽查发现,三份合计和你数的差了 3 项,怎么办?
作业与项目卡更新
展开完整文字稿(视频旁白)
量效果
欢迎来到《AI 落地工作课》第九课,主题是量效果。前面的课程里,你已经做出了一个专属助手,并且开始试跑。这一课要回答一个问题:它到底省下了多少时间,质量有没有变差,值不值得。我们用数据来证明,而不是靠感觉。
学完这一课,你能做到
学完这一课,你能做到四件事。第一,用试跑数据和同一张验收清单,算出省时、质量变化和成本。第二,样本不够时,用往期记录回测补足,并且分开呈现。第三,做出投入产出表,写出一页结果报告。第四,对照事先写下的成功线与止损线,做出判定。
先看一个情境
先看一个情境,是虚构的,数字只是示意。远帆科技的行政专员林悦,用了专属助手以后,跟部门经理郑总说:感觉快多了。郑总接着问:快了多少?值不值?林悦一时答不上来。感觉推不动资源,数字才推得动。
量效果要回答的三个问题
量效果,要回答三个问题:有没有用?值不值?能不能推广?第一,和基线放在一起比,时间和质量是不是真的变好。第二,把订阅费用、词元费用和你花在检查上的时间都算进去,看投入产出。第三,同事接手、你请假的时候,结果还能不能保持一致。数字要诚实到每一个,实测的写实测,估计的写估计。没省下来,也要如实写。
公平对比的四个同样
做对比,要守住四个同样。同样的活:不拿简单的会和复杂的会比。同样的范围:基线从哪算到哪,试跑也从哪算到哪,AI 起草三分钟、你检查修改二十分钟,两个都要算进去。同样的标准:用同一张验收清单,基线和试跑都不换尺子。同样的人:同一个人做,或者同一水平的人做。还有一条:不要挑好的记。失败的、重做的、AI 帮倒忙的,都要记下来。
基线怎么补:用同一把尺子回评往期
基线怎么补。很多人的基线,只有耗时是量出来的,出错数是凭印象估的。这一步要用和试跑同一把尺子:拿项目卡第 8 栏的验收清单,回头给往期的七份人工产出逐份打分,每违反一条,算一个漏项。课前先回评三份,课后补齐到七份。基线还要写清三件事:测的是哪段范围,用的是什么标准,哪些数字是估的。
林悦的手工基线
看林悦的手工基线,虚构的,数字为示意。往期七份会议记录,按同一张七条验收清单回评。每次用时平均九十分钟,这是实测的示意数字。七份一共漏了十五项,平均每次约二点一项。这是人工做纪要的数字,它是基线,不是助手的成绩,后面对比时不能混用。
样本不够,怎么办:回测补样本
如果实跑样本不够,怎么办?规则只有一条:实跑不足六次,必须用往期记录回测补到十条以上。回测的做法是:取往期脱敏后的真实输入,交给助手出稿;你按真实流程检查并计时,用同一张验收清单数漏项;在来源一列标明回测还是实跑。报告里,实跑和回测分开写数字,再写合并数字。要注意,回测偏乐观,因为你知道这份记录该有什么。所以回测只能补样本,不能替代实跑。
四个指标,每个都要写清怎么量
只看快了多少不够。快了但错多了,不算赢。四个指标,每个都要写清怎么量。时间:从开始到可以交付的总分钟数,含你检查和修改的时间,用手机计时,不要事后凭印象填。质量与出错:用同一张验收清单,数交出去之前的最终漏项。一致性:格式全部达标的次数,除以总次数。成本:订阅费用、词元费用,以及一次性投入的小时数,金额必须来自自己的账单。
成本的来龙去脉:词元是怎么来的
很多人对词元费用只看到一个总数,不知道它从哪来。讲三句话。第一,每次送进去的,不是你最后那一句话,而是整个上下文:剧本、卷宗,前面所有的问和答,再加这一句。每一轮都整叠重新送一遍,所以对话越长,每一轮送的越多。第二,它吐出来的内容另外计量,通常单价更高,以你当前版本为准。第三,所以有两条省法:一件事开一个新对话;对话太长时,先让它写一份摘要,再带着摘要开新对话。剧本和卷宗要精简,但守门的条款不能为了省而删掉。中文一个字折合多少词元,各家不同,不要照搬英文的换算,更不要拿别人给的比例直接算钱。
同样十个问题,两种对话
用一张示意表看趋势。设剧本加卷宗合计十份,每个问题、每个回答各算一份,只算送进去的部分。同一个对话连问十轮,第一轮十一份,第十轮已经到二十九份,十轮合计两百份。十件事各开一个新对话,每轮十一份,合计一百一十份。长对话送进去的总量,约是新开对话的近两倍,而且越往后越多。这只是示意单位,不是真实词元数。前提是这十个问题互相不依赖;要依赖的,就留在同一个对话里。
林悦的数字链:三组数字不能混用
这是同一个人、同一张验收清单、三个阶段的数字。第一个是手工基线:往期七份,同一张清单回评,平均约九十分钟,漏项二点一项。第二个是助手首次试用:同样七份做回测,约三十五分钟,漏项一点三项。第三个是调整剧本后:回测七份,加上连续四周的实跑四份,共十一份,约二十八分钟,漏项零点四项。注意,二点一项是人工做纪要的漏项,不是助手的数字。三组数字互相不能混用。
把合并数字拆开,才看得见真相
把合并数字拆开看。回测七份,平均约三十分钟,总漏项三项,偏乐观,因为是调过剧本后重跑的。实跑四份,平均约二十五分钟,总漏项一项,每次零点二五项。实跑最干净、更可靠,但只有四份。合并十一份,平均约二十八分钟,漏项约零点四项。学习曲线也要写:前几次通常偏慢,报告里同时写全部平均和后几次的稳定值,不能只挑后者。
行业版:栖岚智能的工单分类
科技行业版。栖岚智能的罗小棠,她的活每天都做,样本够,不需要回测。这里的数字是示意。每天用时,从约九十分钟降到约四十五分钟,含检查。首次响应时间,从约三小时降到约一个半小时,取自系统时间戳。误分派率,基线约一成;试跑抽检二十张,错了一张。样本偏小,不能写成稳定降到百分之五,要写清结论暂定,并在下一轮抽检四十张。
练习 A:整理试跑数据
练习 A:整理试跑数据,并用计算器复核。把你的试跑记录整理成一张表,实跑与回测分开,算出平均用时、平均漏项数和一致率。没有自己的数据,就用林悦的十一行表。用这段提示词,让它做数据整理员的工作。它要先复述你给的数据,确认没读错;再分别算出回测、实跑和合并的数字;还要写出计算过程,让你能自己复核。缺的数据,它要直接指出来,不能编。平均数,一定要你自己算一遍。
同事抽查:别只信自己数的漏项
自己数自己的漏项,偏差最大。请一位同事随机抽三份产出,不看你的数字,用同一张验收清单独立数一遍,再对比。林悦抽查时,她数了一项,同事数了两项。原因是同事把期限只写周五、没写具体日期的一条算作漏项,林悦当时算作合格。于是把清单第一条改成期限要写到具体日期,之后按新标准重数。规则只有一条:三份合计差异超过一项,先找原因、统一标准,再下结论。对照下面的检查标准,逐条自查。
投入产出表:一格一格算
做投入产出表,一格一格算。基线减去试跑平均,林悦的数字是九十减二十八,每次省下六十二分钟。每周次数是一次,每周省下约一点零三小时。按四周算,每月省下约四点一小时,这是保守的算法。金额版里,每小时时间价值按一百元,每月省下的价值是四百一十元,减去每月订阅一百五十元,每月净收益二百六十元。这些金额都是示意,不是真实价格。每一格都要标实测或估计。
回本周数:金额版与小时版
回本周数,有两个版本。金额版:一次性投入六小时,按每小时一百元折成六百元,除以每周净收益六十五元,约九点二周。每周净收益,是每月净收益二百六十元除以四。小时版:一次性投入的小时数,除以每周省下的小时数,六除以一点零三,约五点八周。它比金额版快,是因为没把订阅费用算进去。两个版本不要混着讲,报告里写明用的是哪一版。
练习 B:让它只检查公式
练习 B:算账。先让它只做一件事:检查公式。数字由你自己填,它不改数字,也不替你编价格。它要检查的是公式有没有写错、单位有没有对不上、有没有重复计算。这一步常见的偏差有三种:让 AI 去查价格,它给的价格可能过时或张冠李戴;只算订阅,漏了一次性投入的搭建时间;把检查时间重复扣了一次。
投入产出表的检查标准
投入产出表的检查标准,对照着逐条看。每一格都有数字,或者明确写已含在订阅内,没有空格。每个数字都标了实测或估计。成本里,检查时间已经计入用时,不要再扣一次。回本周数的单位是周,不是月,并写明是金额版还是小时版。金额全部来自你自己的账单。另外,每小时时间价值有三种常见定法:按月薪折算,按公司内部工时成本,或者只写小时数、不折算成钱。选一种,写明白。
一页结果报告:六段
练习 C:写一页结果报告。结构六段,每段一两句话。第一段,一个问题:这件活原来是什么样,卡在哪里。第二段,一个做法:用了什么流程,人和神龙大侠怎么分工。第三段,一组数据:四个指标的前后对比,写明样本数,实跑和回测分开。第四段,同事怎么说:两到三句原话。第五段,意外发现:和你预期不一样的一件事。第六段,结论与下一步:值不值,一句话;请求什么资源、在什么范围、什么期限。没省下来,也要如实写,并写原因。
“同事怎么说”怎么来:同事五问
报告里的“同事怎么说”,从哪里来?请一位同事试用,你在旁边看着,不插手、不教。用完以后,问他五个问题:你用它做了什么;哪一刻觉得它懂了你的活;哪一刻觉得它在说废话;以后会不会用;用一个词形容它。记原话,不替他总结,不美化。他说还行吧,你就写还行吧。原话比你的总结值钱。AI 能帮你润色报告,但编不出一位同事的真实反应。课前还没有同事原话的,可以先用样例练结构,课后换成自己的。
练习 C:让它按六段写报告
用这段提示词,让它按六段写报告。它的要求是:只用你给的数字,每个关键数字后面保留实测或估计;同事的话原样引用,不改写、不合并、不美化;样本少时写明结论暂定;全文不超过五百字。注意,它有时会自作主张加上效率大幅提升这类好听的话。凡是你没给的数字和形容,统统删掉。
一页报告的检查标准
一页报告的检查标准,逐条看。一页纸,六段齐全,每个数字都能在记录表里找到,并标了实测或估计。实跑与回测分开写。同事的话是原话,不是你的总结。意外发现不能写成和预期一样;如果真的没有,说明观察还不够,回去再看一遍记录。结论只有一句,下一步要有范围和期限。真的没人愿意试用,也要如实写下为什么。
判定:对照事先写下的线
判定,对照事先写下的成功线与止损线。这两条线,要在试跑前写下,现在对照,不能事后改。林悦的成功线有三条:平均用时不超过基线的一半,也就是四十五分钟;平均漏项不高于一点零项,且低于基线两点一项;没有红线事故。止损线也有三条,只要触发,就要按四句话如实写。林悦的结果:平均二十八分钟,漏项零点四项,红线事故零次,止损线均未触发。判定为达到,继续,并申请小范围推广。判定写三档:达到、部分达到、未达到。
小测验 第 1 题
第一题:实跑只有四份,样本不够,应该怎么做?A,直接下结论。B,用往期记录回测补到十条以上,并在报告里分开呈现。C,把四份复制成十份。答案是 B。回测只能补样本,不能替代实跑,两部分要分开写。
小测验 第 2 题
第二题:林悦说的“2.1 项”指的是什么?A,助手首次试用的漏项。B,人工做纪要的漏项,也就是手工基线。C,调整剧本后的漏项。答案是 B。基线、首次试用、调整后是三个不同的数字,不能混用。
小测验 第 3 题
第三题:同事抽查发现,三份合计和你数的差了三项,怎么办?A,以自己的为准。B,先找原因、统一标准,再下结论。C,以同事的为准,不再解释。答案是 B。差异超过一项,说明验收清单的标准还不一致。
作业与项目卡更新
作业,以下六样都是必做的。整理好的试跑记录表,实跑和回测分开,合计至少十条,不足就写实际数量。用同一张验收清单回评的基线记录。同事抽查的记录。投入产出表,每格标实测或估计。一页结果报告草稿,加上判定。至少一位同事的五问原话。项目卡:第十栏收口,第十一栏填结果,第十二栏写结果报告草稿。AI 能帮你润色,编不出你的计时记录和同事的原话。
下一课:带回公司
这一课的核心,是把数字说清楚。记住三件事:一,对比要公平,同样的活、同样的标准、同样的人;二,实跑和回测分开,样本不够时如实写结论暂定;三,没省下来,也要如实写。下一课,带回公司:用三分钟汇报把它交给上级,再拉同事真人试用。请带上今天的结果报告草稿和判定。谢谢收看,我们下一课见。本视频的旁白由 AI 合成。