结论是:当历史经验与当前项目条件冲突时,先判断历史经验依赖的那个前提今天是否还存在。如果前提已经消失,旧经验只能当假设,不能当依据;如果前提仍在,只是执行环境变了,旧经验可以保留,但要换一种验证方式。一个会让上述结论失效的反例是:历史经验本身来自一个从未被证实过的观察,比如某人说“以前在搜搜广告投放里换过素材就有效果”,但拿不出当时的账户结构、预算和归因方式,这种经验无论前提是否还在,都不该进入决策。
历史经验通常不是一句结论,而是一串条件压缩后的结果。把“以前这样做有效”拆开,至少会得到三样东西:当时投的是什么位置、当时用什么指标判断有效、当时谁在操作。搜搜广告投放这类已经不能按现行入口直接复现的历史场景,最容易丢掉的是第一样——位置本身可能已经不存在,或者名称还在但含义变了。
一个可操作的动作是:把旧经验写成“如果A,那么B”的形式,A就是前提。比如“如果后台能按关键词单独出价,那么提价能带来更多点击”。然后逐条核对A在当前项目里是否成立。A不成立,B就不能直接搬过来;A成立但B没出现,说明中间还有别的变量,下一步该去查变量,而不是回头质疑B。
这个动作的结果会直接改变下一步:前提消失的经验降级为参考,前提仍在的经验升级为待验证假设。两类经验的处理方式不同,混在一起就会反复争论“到底该不该信以前的做法”。
冲突可以粗分为三种,处理方式完全不同。
只有第二种冲突值得按旧经验办,而且要先限定范围。第一种和第三种如果硬按旧经验执行,通常会把一次本可以快速排除的尝试拖成长期争论。
假设一个团队要在当前项目里复现一段旧的搜搜广告投放经验:旧记录说,把预算集中到少数几个词上,转化成本会下降。当前项目预算更小、可选的词也更少。这时不要直接全量集中,而是选两组词做对照:一组按旧经验集中预算,一组维持原来的分散方式,观察一个固定周期内的转化成本和转化量。
这里的关键不是数字本身,而是先写下判断标准:如果集中组的转化成本明显更低且转化量没有塌掉,旧经验在当前条件下可以扩大使用;如果成本没降或转化量掉得太多,说明旧经验依赖的前提在当前项目里不成立,下一步该去查是词量不够还是预算门槛没到,而不是继续加预算硬撑。
这个例子里的数字只是说明比较方法,不代表任何真实投放结果。实验周期和判断阈值需要按项目自己的数据节奏来定,不能套用别人的标准。
出现下面这些信号时,继续坚持旧经验的成本会高于收益:
前两条指向前提问题,后两条指向证据问题。无论哪一条成立,下一步都应该是暂停照搬,转而记录当前项目的实际条件,再决定是重建方法还是彻底换思路。
取舍做完之后,留一条简短记录:旧经验是什么、它依赖的前提是什么、当前项目里这个前提是否成立、最终决定是采用、限定采用还是放弃、依据是什么。这条记录的价值不在当下,而在下一次条件再变时,能快速判断该翻出哪段经验、该忽略哪段经验。对搜搜广告投放这类历史概念,记录里尤其要写清前提是否还存在,否则下一次冲突会以同样的方式重来一遍。取舍的标准始终是前提是否成立,而不是经验本身听起来是否可靠。