使用公众号推广使用时，常见的拆分对比试验问题

1.如何查看实验结论，全量推荐度和优胜广告分别是什么？

当实验开启后，广告主可以通过在广告列表，点击管理实验广告，访问实验详情页；也可以到工具箱-拆分对比实验中查看到已创建的实验详情：在同一个报表页面，可以查看到实验开启到现在的全部数据，广告主可以选择自己关注的指标进行直观便捷的对比。同时，也可以参考公众号推广系统给到的指引来辅助进行结果判断，包括“全量推荐度”及“优胜广告”两项指标。

全量推荐度：根据目前的实验数据充分性，系统会给到全量推荐度指标，分为1星到5星五个等级。实验数据越充分，实验对比结论越可信，此时全量推荐度越高，反之则全量推荐度越低。当全量推荐度达到4星及以上时，此时已得到的实验结论具备统计意义；当全量推荐度在3星及以下时，建议广告主继续实验，待全量推荐度提升后再观察实验结论，一般需要1-3天。

优胜广告：依据公众号推广得出的实验数据，当某条/某几条实验广告显著优于其他实验广告时，会判定该条/多条广告为优胜广告，建议广告主全量实验并将优胜广告置于开启状态。

智能全量：如果在实验创建初期，授权了“智能放量”，则在系统判断出优胜广告后，会自动为优胜广告倾斜更多流量：仅在此条实验计划背后流量不再等分，整个实验广告加和仍为100%流量，其中优胜广告拿到更多流量，劣势广告逐步减少流量分配。

同前，当观察到优胜广告的显著优势后，建议通过全量实验并将该条广告置于开启状态，来放大优势。

2.拆分对比实验支持修改吗，推荐使用编辑功能修改的情况有哪些？

可以修改。普通列表视图下，支持观察实验，不可编辑；转入管理实验广告列表后，现已支持编辑，操作方式与普通广告一致，灵活方便。

以下场景推荐使用编辑功能，帮助实验顺利启动、观察数据：

a)审核未通过，实验无法进行时，通过编辑对创意、和落地页等予以优化；

b)App类推广，需配置、或更新渠道包跟进转化效果时，通过编辑选取应用渠道包进行推广；

c)必须对某些投放内容进行优化，如修改投放时间、活动细则、定向更新等非实验变量条件时：将所有实验广告均予以同样编辑修改（此时请注意：不要因编辑修改增加实验变量因素，使得差异复杂化，难以得到有效结论）。

为控制投放风险，也可以随时通过快捷编辑入口修改广告出价，以及随时暂停或开启实验中的任一条广告。

3.拆分对比实验支持复制吗？

普通列表视图下，支持观察实验，不可复制；转入管理实验广告列表后，现已支持复制，操作方式与普通广告一致，灵活方便。

拆分对比实验广告复制后，是一条普通广告，并非在实验条件下新增。在实验广告列表中，选中一条实验广告点击复制后，会和复制普通广告操作一样，进入广告的创建流程：

复制后的广告默认位于当前实验广告所在计划内，可以选择放入其他计划、或者新建计划放入。

复制后的广告名称默认是“原实验广告名称”-副本。

4.对于不同种类的广告主，建议的实验方案分别是什么？

对于初期使用拆分对比实验的广告主来说，建议选定明确的测试目标（如测试A/B两个标签的效果，或测试两个素材的效果），并将测试目标设置成唯一变量，价格保持相同。在测试过程中，如需调整价格，保证实验中的广告同时调整并调整为相同价格。通过严格的控制变量法得到有效的实验结果。建议通过实验验证7天以上时间，全量后选取效果较好的实验广告继续投放。

对于有经验的广告主来说，价格可以成为您调整实验的关键。在实验开始后，您可以通过对价格的调整将多条实验广告的转化成本或转化量调平，来在相同成本的情况下对比转化量的大小或在相同转化量的情况下对比成本的高低。