一、功能核心价值
为解决广告变现策略仅凭经验调整、优化效果无法量化、试错成本高的问题，芒果聚合SDK内置商业化A/B对照测试能力。开发者、芒果广告运营可针对同一广告位或同一流量分组，配置两套差异化变现方案进行对照实验。
通过精准对比两组方案的ARPU、填充率、eCPM、加载耗时等核心数据，可科学筛选最优瀑布流配置、流量分组策略与请求调度规则，让变现优化有据可依，有效规避盲目调整带来的收益波动，持续放大流量变现价值、稳步提升整体广告收益。
二、功能概述
芒果聚合A/B测试支持在单广告位或单流量分组维度下，搭建A、B两套独立对照方案。可差异化配置瀑布流层级、Bidding策略、请求加速规则、流量分组规则等内容，在保证单一变量、其他配置统一的前提下，通过数据对比判定更优的变现策略，适配绝大多数广告精细化调优场景。
三、核心测试场景与变量配置规范
日常变现优化中，高频测试场景、变量差异、固定配置及核心观测指标如下，开发者可按需选用：
测试场景 | 测试类型 | A/B组差异化变量 | 统一固定配置 | 核心观测指标 |
|---|---|---|---|---|
是否开启部分ADN Bidding能力 | 瀑布流A/B测试 | A组：仅配置常规标准代码位；B组：穿山甲Bidding代码位+常规标准代码位组合 | 标准代码位数量、排序、底价设价、串并行规则、超时时长完全一致 | 用户ARPU、整体收益、eCPM |
是否启用请求加速器 | 瀑布流A/B测试 | A组：固定数量并行常规请求；B组：开启聚合请求加速器能力 | 并行请求数量、单次请求超时、瀑布流总超时时长保持一致 | 广告填充耗时、整体填充量、加载成功率 |
是否启用精细化流量分组 | 流量分组A/B测试 | A组：原始通用瀑布流配置；B组：差异化流量分组策略（高价值流量配置高价密集代码位、下沉流量配置低价兜底代码位） | 串并行请求规则、超时参数、基础代码位属性一致 | 用户ARPU、分层流量收益 |
其他通用测试场景：
不同广告渠道（ADN）组合、差异化底价代码位对照测试；
瀑布流不同请求排序、不同层级数量对照测试；
不同串并行请求模式、不同超时时长配置对照测试；
开启/关闭用户展示控制功能的效果对照测试。
四、完整使用操作流程
4.1 创建A/B测试任务
进入芒果聚合后台【瀑布流管理】，选中目标广告位，点击「高级工具」-「创建A/B测试」，自定义测试名称并设置A、B两组流量分配比例，即可完成测试创建。
重要限制：广告位开启智能管家功能后，无法新建A/B测试任务，需关闭后再操作。
4.2 配置A/B组差异化方案
为提升配置效率，平台支持一键复制A组配置至B组，包含两种复制模式：全量复制所有代码位、仅复制已启用代码位。
代码位复用规范与建议：
若A、B组复用同一代码位，平台预估数据可通过瀑布流ID精准拆分、互不混淆，但API回传数据会按流量比例预估拆分，存在轻微数据偏差。若仅做效果粗略对比，可复用代码位；若需精准数据分析、正式落地策略优化，强烈建议A、B组新建独立代码位，规避数据误差问题。
核心原则：严格保证单一变量，仅保留测试所需的差异化配置，其余所有参数（层数、排序、底价、超时、串并行等）完全统一，保障测试结论真实可信。
4.3 开启测试并等待生效
配置完成后手动开启测试任务，受服务端缓存影响，配置预计30分钟左右全量生效。
测试周期规范：为保证数据稳定、结论置信，建议测试周期不少于7天，且满足单组累计展示量≥3万、或去重DAU累计＞5000。测试期间禁止随意修改瀑布流配置，避免干扰测试结果。
4.4 查看测试数据与趋势
测试生效后，点击「查看A/B测试数据」进入专属分析页面，支持两类数据查看模式：
1、组间对比报表：若所有广告渠道均已配置API数据回传，页面优先展示精准API数据；若部分渠道未配置，默认展示平台预估数据，建议提前完善各渠道API配置，保障数据准确性。
2、指标趋势图：默认展示按日统计数据，筛选「今日」可查看小时级实时数据；支持切换收益、填充率、eCPM等各类核心指标查看波动趋势，小时维度报表暂不支持API数据展示。
4.5 调整流量分配比例
测试过程中可随时进入数据页面，通过「修改流量分配」调整A、B两组流量占比。调整后系统会自动留存新旧比例的分段数据，方便全程追溯对比。
注意事项：不建议频繁调整流量比例，会影响数据稳定性。如需测试全新比例方案，建议关闭当前测试、新建任务。
4.6 最优方案采纳与全量推广
测试数据稳定后，可通过页面「采用A/采用B」功能，将收益更优的配置一键全量上线。推全前可使用置信度评估工具，系统会结合样本DAU、两组ARPU均值及方差，自动判断方案差异是否具备统计学显著性，同时测算达标所需样本量，辅助精准决策。
推全后，最优方案配置将正式生效，废弃组的配置会保留在历史记录中，可随时查阅。
4.7 历史测试记录查询
所有已结束的测试任务，均可通过「更多操作」-「查看历史A/B测试」追溯。支持查看历史配置详情、完整测试数据与指标对比结果，方便沉淀优化经验。
4.8 用户反转分流能力
当测试流量分配比例为标准5:5时，支持开启「用户反转」功能，一键交换A、B两组用户群体，用于校验实验稳定性、排除用户流量偏差干扰。该功能仅支持正反比例均为5:5的实验场景，其他比例无法生效。
五、常见问题排查解答
Q：A组代码位是否可以直接复制复用至B组？有什么影响？
A：支持复制复用，但不建议正式测试使用。复用代码位时，平台预估数据可通过瀑布流ID精准拆分，无混淆问题；但API真实数据为比例预估拆分，存在一定误差。粗略测试可复用代码位，精准对照实验建议两组独立新建代码位。
Q：A/B测试的对比数据是否支持导出？
A：可通过瀑布流管理页面分别导出A、B两组的独立数据。专属A/B测试页面的批量导出功能目前暂未上线，功能已规划迭代中。
Q：历史A/B测试的成熟配置，能否直接复用新建测试？
A：目前暂不支持历史配置一键复制复用，该功能正在优化迭代，后续将开放便捷复用能力。
注：以上功能若为托管模式由芒果专业的广告运营为开发者操作调优。
