度量验收:九项检查、四张表与一次决策复盘
季度末周岚想回答「这个季度我们到底搞清楚了什么」,翻了半小时只找到十几张看板截图:有数字,却没有记录过任何一个决定是怎么下的,也说不清哪条判断被推翻。九项检查、四张表、四维加权与一次季度复盘,把度量从看板变成能复查的决策依据。
tag
季度末周岚想回答「这个季度我们到底搞清楚了什么」,翻了半小时只找到十几张看板截图:有数字,却没有记录过任何一个决定是怎么下的,也说不清哪条判断被推翻。九项检查、四张表、四维加权与一次季度复盘,把度量从看板变成能复查的决策依据。
陈默把按钮从蓝改成绿,两周后注册转化从 24% 涨到 25.3%,他就把这个提升写进了复盘;三个月后再改一次,数字跌回 23%,他才意识到那次提升本来就落在噪声里。一个人做实验,小流量只能测大效应,所以要先算清样本量再开跑。
事件量涨了三倍,账单超过了服务器总成本,才发现每次滚动都被记成了一个事件。本文给出年 155,520 条的事件量模型、结果类与驱动类不采样而诊断类采 10% 的分层规则,以及九十天保留如何把年存储压到 110.7 MiB。
一次「激活率提升 9%」的复盘,被两天的 SDK 故障推翻。本文给出量级、必填属性、event_id 唯一与时间偏差四条每日校验,一张分析库、应用日志与支付回调的三方对账表,以及把差异拆成可解释条目、能直接照着查的异常清单。
周岚的看板有六张图四张表,她每天都会打开,却整整三周没发现其中一条核心曲线其实早已断掉,还以为在涨。本文把看板压到一屏四区十二个数字与四张图,配每周十五分钟流程、噪声带与决策记录,并复算一年十三小时到底买到了什么、又错过了什么。
陈默把注册到付费做成一根管子,三个月后才发现那 46% 的流失里有一半不该进分母。本文用五步漏斗、三个分母定义与两处提升复算,说明 2.5% 整链转化背后到底哪一步最值得先动手,以及月付费只有 120 人时哪些百分比真正不能信。
周岚在周报里写流失率 6.1%,投资人问是按付费用户算的吗,她才发现按全部 344 个账号算是 6.1%,按 120 个付费算是 4.2%。本文给出十二个指标的五个要素与八组同名不同义,用复算说明分母差一点,结论能差多少。
一个用户装了拦截扩展,注册上报被静默吃掉,陈默查了两天才发现产品没坏。本文把二十四个事件拆成客户端十四与服务端十,给出开发开关、上线三用例与二十四小时回归三道校验,并用丢失率、两侧差异与重复率复算一年十二小时的核对成本。
周岚把注册事件从 signup 改到 user_registered,又想改成 register,三个名字各有一段数据,拼起来少了四成。本文给出二十四个事件的分组、六个必填属性与一张变更表,用复算说明改名为什么等于删历史,字典该怎么写才不骗人。
陈默的看板上有四十个数字,每周真正进入决策的只有四个,被问「要不要做导出功能」时他翻了十分钟仍答不出依据。本文把度量倒过来做:先列六个必须拍板的决策,每个决策配两个指标,用三层结构与一次复算说明十二个为什么够用、四十个为什么浪费。
一个人做产品,最贵的不是没有数据,而是数据不可信。本组十篇从月访问 4800、注册 1150 与十二个指标出发:六个决策、事件字典、埋点校验、口径五要素、五步漏斗、看板四区、数据质量、采样与成本、实验与灰度,最后用九项检查与四张表验收。