性能改动改善技术指标却降低业务转化时应如何判断是否发布
简答题困难781 次浏览
参考答案与解析
# 核心结论
性能改动改善技术指标却降低业务转化时,不应因技术指标变好而直接发布,也不应看到一次转化下降就立即永久回滚。正确做法是先停止扩大实验流量,验证实验设计、数据口径和功能正确性,再判断转化下降是否由该改动造成、是否超过预设容忍范围,以及性能收益是否发生在真正受影响的人群和关键路径。发布必须同时满足正确性与稳定性护栏、用户体验指标和核心业务指标;任何一类关键护栏明显恶化,都不应全量放行。
# 底层机制
技术指标与用户价值并不天然等价。为了让 LCP 更早出现而展示低价值的大占位内容、为了降低启动耗时而延迟登录状态恢复、为了减少请求而使用过期库存,或者为了减小包体而把高频功能改为临时下载,都可能让测量值更漂亮,
