把自动评分当作线索而不是结论,是防止人工判断被替代的核心做法。具体操作是:先让评分给每个旧项目打一个可解释的标签(保留、退出、待定),再由人只对“待定”和“高价值但低分”两类做复核,并把复核理由写回资料里。这样评分负责缩小范围,人负责决定去留。
假设你手头有一批旧内容页面、旧系统模块或旧合作记录,想用自动评分决定哪些退出。第一步不是调分数,而是把评分拆成几个能单独核对的维度,例如:近期是否还有真实访问或调用、是否仍被其他页面或系统引用、维护成本是否高于替代成本。每个维度单独打分,再合成总分。
这么做的好处是,当某个项目总分很低时,你能看出它是“确实没人用”还是“只是某个维度拖累”。如果所有维度揉成一个黑箱分数,人工复核时就没有切入点,久而久之复核就变成了走过场,评分自然替代了判断。
评分跑完后,不要逐条看,而是按分数区间分流:
实际操作中,可以先把“总分低但被其他页面或系统引用”的项目单独列出来。这个动作会直接改变下一步:原本准备批量退出的清单,会因为引用关系被拆成“可退出”和“需先处理依赖”两组。
人工复核最容易失效的环节,是只留下“保留”或“删除”的结果,不留下原因。下次评分再跑,同样的问题会重复出现。建议在每条记录上补一个简短字段,记录判断依据,例如:
这些理由让评分从“替代判断”变成“触发判断”。当同一类理由反复出现时,你可以反过来调整评分维度,而不是继续靠人工兜底。
假设某站点有一批三年前的专题页,自动评分显示整体偏低。直接按分数退出,可能删掉仍被少数长尾查询命中的页面。改为人工抽查后,发现其中一部分页面虽然流量低,但仍是某几个查询在Google中少数匹配的结果,且没有替代页面。处理方案就变成:保留并合并到新的聚合页,而不是直接删除。
这个例子的关键不是“低分要保留”,而是说明评分只能回答“像不像该退出”,不能回答“退出后有没有替代”。替代性判断需要人来看,因为它依赖页面之间、系统之间、合作关系之间的实际关联。
一个可观察的信号是:复核时间越来越短,复核记录越来越空,退出决定几乎完全跟随分数。出现这种情况时,先不要急着换工具,而是检查两件事:评分维度是否还覆盖当前的真实目标;复核规则是否只剩“确认分数”。如果两者都退化了,人工判断其实已经被替代,只是名义上还在。
把复核规则重新写清楚,并保留每次判断的理由,是让自动评分回到辅助位置的最低成本动作。它不会让评分更准,但能让去留决定仍然由人负责。