如何计算转化提升（Conversion Lift）

将处理组与参考组的转化率转换为绝对与相对提升（lift），避免夸大结果。

简要回答

将处理组与参考组的转化率转换为绝对与相对提升（lift），避免夸大结果。分别计算参考组与处理组的转化率（conversion rate）。用处理组转化率减去参考组转化率，得到以百分点（percentage points）表示的绝对提升。当参考组转化率不为零时，将绝对差异除以参考组转化率，得到以相对提升（relative lift）表示的结果。

适用对象

解读二元结局（binary outcomes），例如点击、注册、购买、捐赠或续订的研究人员与管理者。

步骤

分别计算参考组与处理组的转化率（conversion rate）。
用处理组转化率减去参考组转化率，得到以百分点（percentage points）表示的绝对提升。
当参考组转化率不为零时，将绝对差异除以参考组转化率，得到以相对提升（relative lift）表示的结果。
报告差异的样本量以及 95% 置信区间。
将该估计值换算为在现实流量（traffic）水平下预期的额外转化量。
检查合理区间（plausible range）是否包含小到在运营上也无关紧要的效应。

为何重要

绝对与相对提升回答的是不同问题。从 10% 到 12% 是 2 个百分点的增加，也是 20% 的相对提升；如果只报告看起来更大的那个数字，可能会误导决策者。

开展调查前

正确标注百分点与百分比。
同时展示两组的转化率。
纳入不确定性。
将提升与现实可实现的量（volume）相联系。
不要把统计显著性当作商业重要性。

常见问题

本指南有什么用途？

解读二元结局（binary outcomes），例如点击、注册、购买、捐赠或续订的研究人员与管理者。

基本流程是什么？

分别计算参考组与处理组的转化率（conversion rate）。用处理组转化率减去参考组转化率，得到以百分点（percentage points）表示的绝对提升。当参考组转化率不为零时，将绝对差异除以参考组转化率，得到以相对提升（relative lift）表示的结果。报告差异的样本量以及 95% 置信区间。

开展调查前应检查什么？

正确标注百分点与百分比。同时展示两组的转化率。纳入不确定性。将提升与现实可实现的量（volume）相联系。