大多数"换了主图点击率涨了 30%"的结论是假的。原因不在主图，在样本量不够、时间窗太短、同时改了别的变量。
经验门槛：检测 20% 以上的差异，每个变体约 300–500 次曝光；检测 10% 左右的差异，需要 1,000 次以上。时间窗至少 7 个完整自然日。
小卖家更实际的做法不是严格 A/B，而是横比同批多款商品——样本不够时，参照优于测试。
一、为什么大部分结论是假的
三个陷阱，任何一个踩了，结论就不可用：
- 点击率是比例，小样本波动极大
- 30 次曝光里 3 次点击 = 10%，再来 30 次可能变成 3%
- 结论基本等于随机
- 工作日与周末人群不同
- 推荐位的波动以天为单位
- 大促前后的数据完全不可比
- 换了主图，又调了价格
- 改了标题，又报了活动
- 加了优惠券，又换了主图
二、样本量怎么估
严格的算法要用双比例检验（显著性水平 0.05、统计功效 0.8）。对卖家来说不必算那么细，用下面这张经验表就够判断"我这组数据到底能不能下结论"：
| 想检测的差异 | 每变体最小曝光 | 小店现实情况 | 建议 |
|---|---|---|---|
| 30% 以上 | 约 200 次 | 一周能达到 | 可以做单品 A/B |
| 20% 左右 | 约 300–500 次 | 一到两周 | 可以做，但要跑满 14 天 |
| 10% 左右 | 约 1,000 次 | 单品很难达到 | 改用多品横比 |
| 5% 以下 | 4,000 次以上 | 基本不可能 | 不要测，直接看类目参照 |
三、可以测什么，不能测什么
主图能测的变量比想象中少，因为平台主图位只有一个，你改了就是全量替换：
| 变量 | 能不能单独测 | 说明 |
|---|---|---|
| 主图风格（白底 / 场景 / 手持） | 能 | 影响最大，优先测 |
| 图案在画面中的占比 | 能 | 壳大一点还是小一点 |
| 背景色调 | 能 | 影响缩略图的对比度 |
| 是否加卖点文字 | 谨慎 | 部分平台会判低质，风险不对称 |
| 第 2–5 张图的顺序 | 弱 | 对点击影响小，对转化有影响 |
| 价格、标题、活动 | 不能混测 | 必须单独测，否则无法归因 |
四、一个能直接用的记录表
做测试最容易被忽略的是记录。不记录，两周后你只记得"好像涨了"，不知道涨多少、跟什么比。建议每次测试都填一张：
| 字段 | 填什么 | 示例 |
|---|---|---|
| 测试编号 | 日期 + 序号 | 20261103-01 |
| 商品 ID | 被测链接 | SKU-8821 |
| 变体 | A / B | B |
| 改动内容 | 只写一项 | 首图背景由白底改为浅木纹 |
| 开始 / 结束 | 自然日 | 11-03 → 11-16 |
| 曝光 | 后台曝光量 | 1,240 |
| 点击 | 后台点击量 | 86 |
| 点击率 | 点击 ÷ 曝光 | 6.9% |
| 同期是否改价 | 是 / 否 | 否 |
| 结论 | 可用 / 不可用 + 原因 | 可用，>500 曝光，无其他改动 |
"同期是否改价"这一列看着多余，但它是最容易被忘、也最致命的一列。没有这一列，一个月后你无法判断当时的结论还成不成立。
五、怎么读结果
- 先看曝光够不够不够就直接标"不可用"，别急着下结论。宁可承认测不出来，也不要拿噪声当洞察。
- 再看差异幅度差异在 20% 以内、曝光又不到 1,000 的，一律视为"看不出差别"。这类结论落地后通常会反转。
- 最后看方向是否稳定把两周拆成两段，如果两段的方向相反，说明有外部因素在干扰，结论不成立。
- 落地的做法只落地"幅度大 + 方向稳定"的结论。小幅优化的收益通常小于它带来的风险。
六、三种常被误读的现象
下面三种情况，数据会变，但和主图无关。它们的共同点是：变化发生在换图的同一时间，但原因在别处。
| 现象 | 真实原因 | 怎么识别 |
|---|---|---|
| 换图后点击率明显上升，两周后回落 | 新品期推荐位加权 | 看曝光量是否同时暴涨 |
| 整体点击率上升，但转化下降 | 主图过度美化，与实物不符 | 看退款率与差评关键词 |
| 同款图在不同店表现差很多 | 价格、评价数、店铺权重不同 | 横比时先对齐这三项 |
常见问题
主图 A/B 测试要多少曝光才有结论？
粗略地看：检测 20% 以上的差异，每个变体约 300–500 次曝光；检测 10% 左右的差异，需要 1,000 次以上。手机壳小店的单品很难在两周内积累到这个量，所以更实际的做法是横比同批多款商品的主图表现。
A/B 测试要跑多久？
至少覆盖 7 个完整自然日，最好 14 天。手机壳的流量在工作日与周末、白天与晚上的构成不同，短于 7 天的数据很容易被某一天的推荐波动带偏。
换主图后点击率变了，能归因于主图吗？
要排除三个干扰：同时改了价格或促销、平台推荐位变化、季节性流量结构变化。任意一项同时发生，数据就不能归因于主图。严格做法是一次只改一个变量，并记录改动日期。
小卖家没有流量，还能优化主图吗？
能，但要换方法。不做单品 A/B，而是用同一批 5–10 个商品各用不同风格的主图，看哪一类整体表现更好；或者直接对照类目 TOP 链接的主图结构做拆解。样本不够时，参照优于测试。