去年有一段时间,我每天上班第一件事是打开一张 badcase 表。
那是给一个客服问答场景做的助手。表里躺着两百来条真实提问和答错的记录,最右一列写着「本次修复」。我每天早上挑十条,改 prompt、补同义词、加兜底规则,然后跑一遍回归。
规则从个位数加到十几条,再到二十几条。到第三周,最右那一列开始出现「已修,但回归挂了」——我把 A 修好了,B 又坏了。
真正让我停下来的不是这个。是第三周评审会上有人问了一句:「如果下周三还是这个状态,我们怎么办?」
我张了张嘴,没有答案。我没法说「再给一周就好」,因为上一周我也是这么说的;我也没法说「那就换方案」,因为我从来没定义过什么叫「不行」。
散会后我在工位上坐了一会儿,意识到一件事:这三周我每天干十几个小时,看着很勤奋,但整件事没有止损线。我在优化一个我自己都说不出验收标准的系统。
根因不在我修的地方
后来我们还是停了两天做定位。把两百多条 badcase 按环节重归了一遍类:多少是意图识别阶段就错了,多少是检索没召回,多少是召回了但答案组织得不对。
结果是,超过一半的错误在第一步就发生了。用户的问法和我们预设的意图对不上,后面生成得再漂亮也是白搭。我前三周改的那些规则,绝大多数都在修第二步和第三步——在一个本来就错的分岔路上做装修。
如果第一周就写下一句「两周后如果 badcase 仍分散在五个以上环节,就停下来重新定位」,那两周是能省下来的。
那是我第一次真切感受到:让项目变慢的,往往不是做得不够快,而是没有人被授权说「停」。
写字楼里最常见的一种浪费,是一群人都在很努力地做一件没人敢判定为错的事。谁先开口谁像是不负责任,于是大家默契地继续往前推,推到排期兜不住,才用「资源不够」这个体面的理由收场。
我现在的做法:一张五行卡片
现在开任何一个稍微像样的活儿,我会先在文档最上面写五行。写满五行就往下做,不多写。
- 这件事要解决的到底是什么问题,一句话,不能用方案名代替问题
- 我预期它最可能以哪三种方式失败
- 什么信号出现,我就换方案
- 换之前,我必须先验证的一件事
- 这个判断由谁来做
第三行是核心,也是最难写的。难在大部分人写出来的是「效果不好就换」——这不是信号,这是情绪。信号得可观测、有阈值、有时间窗。
我给自己定的写法是「时间加可数的现象」。比如「两周内,同一类 badcase 在三次迭代后仍然排在前三」,而不是「优化效果不明显」。前者到点就能判,后者可以永远争论下去。
第四行是为了防止矫枉过正。有了止损线之后,人容易一有风吹草动就想撤,团队会被折腾散。所以我会提前写清楚:撤之前必须验证的那一件事是什么。往往就是这件事,能救回一个其实还有救的方案。
第一行看着最废话,但它治的是另一种病。把方案名写进目标,「做一个 RAG 系统」「上一套 Agent 编排」,后面的止损线就没法定,因为方案本身变成了目标。目标一旦是方案,失败就只剩一种形态:做完了但没人用。那时候沉没成本已经堆到不可能承认。
省下的不是时间,是「再坚持一下」
这张卡片真正的价值不在第三周的周三,而在第一天。
人的投入是会自我合理化的。我改到第二十条规则的时候,心里其实已经隐约知道方向不对,但那个念头一冒出来就被压回去了——已经投了两周,现在换方案,前面不就白干了。这就是沉没成本的典型形状:不是算不清账,是不愿意算。
提前写下放弃条件,等于在自己还清醒的时候,把判断权交给未来的自己以外的东西。到点看信号,不用重新做一次情绪上的决定。这一点上我更信机制,不太信意志力。做了十年 AI 产品,我见过的失败项目里,死于「方向一开始就错」的不多,死于「没人愿意做那个喊停的人」的很多。
这里有个明确的取舍:写下放弃条件,会让你在早期显得不够坚定,也可能让你过早放弃一个其实有希望的方向。我的选择是接受这个代价。理由是不对称——早两周放弃,代码、数据、对问题的理解都还在,换个方向能复用;晚两个月放弃,赔进去的是团队信心和一段窗口期,这两样都不可回收。
所以我不是在追求「判断更准」,我是在追求「错得更便宜」。
它把讨论从「行不行」变成「信号出现没有」
这张卡片还有个副作用,是沟通上的。
团队里最贵的争论,从来不是技术方案之争,而是「要不要继续」。这种讨论没法收敛,因为双方都在谈感觉。主张继续的人说「再调调能好」,主张停的人说「这就是个坑」,谁都没有裁判。
有了预先写好的信号,讨论就变成事实核对:那条信号出现了没有?出现了就按约定走,没出现就继续干,谁也不用说服谁。这听起来很冷,但对团队其实是种保护——坚持的人不必背上「固执」的名声,喊停的人也不必背上「不担事」的名声。
向上汇报时这一点更明显。我汇报进展时会把那张卡片一起带上去,说清楚「现在离那条止损线还有多远」。这比「进展顺利」有用得多,因为它给了对方一个可以参与判断的把手。反过来,如果我只报进度不报判断依据,等出了问题再解释,性质就完全变了。
这套东西在跨团队协作里尤其值钱。你和另一个团队一起推一件事,双方对「做到什么程度算成」的理解常常差得很远,而这个问题在项目开始时问,成本几乎为零;在两个月后问,就是一场事故。
什么时候我不写这张卡片
它不是万能的,有几种情况我会主动不写。
一种是目标本身还在漂移的探索期。这时候你连问题是什么都没定下来,写出来的信号一定是假的,写了反而给自己一个虚假的确定感。这种阶段我用另一个东西代替:时间盒。给自己三天,三天后不管做出什么,都回来重新问一遍问题是什么。
另一种是信号根本观测不到的时候。比如你想验证「用户会不会长期用」,但一周内拿不到任何留存数据,那写「四周后留存低于某个值就撤」只是自我安慰,因为中间三周你什么也做不了。这时候该写的不是信号,是「我最多花多久把这个观测能力建起来」。
还有一种,是这件事本身很便宜。改个文案、试个入口,一天就能出结果,那就直接做,别写卡片。仪式感是要花成本的,成本超过收益的习惯,最后都会变成走过场。
判断标准其实很简单:如果我写下的第三行,一周之内拿不到任何数据去对照它,那这张卡片就是废纸,我需要换一种写法。
写到这里我想说的是,效率这件事被讲得太偏了。大部分方法在教你怎么在单位时间里做更多事,但真正吃掉时间的,往往是那件你早该停、却一直没人喊停的事。
这周你手上正在推的那件事,如果现在补一句「什么信号出现我就撤」,你会写什么?如果写不出来,那大概就是问题本身。
评论