测试自定义出价算法

测试新的自定义出价算法有助于您评估其表现并进行调整，从而优化投资回报率：

• 自定义出价测试沙盒：在首次将算法分配给正投放的广告系列之前，您可以使用测试沙盒来验证该算法。  
• 自定义出价 A/B 实验：将算法分配给正投放的广告系列后，您可改进该算法，以便在收集实时展示数据期间继续优化。

将算法分配给广告系列后，您可以通过创建和评估报告来继续跟踪和优化该算法的表现。

本文涵盖的主题

• 使用测试沙盒进行验证
• 通过实验优化自定义出价
• 利用报告跟踪自定义出价的效果

使用测试沙盒进行验证

您可以使用自定义出价测试沙盒来估算：

• 自定义出价脚本或自定义出价目标的效果
• 算法是否有望满足最低数据要求
• 算法的表现是否符合预期

当您使用自定义出价沙盒时，它会使用所选广告客户在过去 30 天内的最多 10,000 次历史展示来测试自定义出价算法。这有助于确定自定义出价算法能否获得预估的理想成效，或者您是否需要进行调整。您还可以使用沙盒来测试不同的出价策略，并比较不同自定义出价算法的结果。

样本规模

如需在测试算法时提高准确性，您可以通过查看最低数据要求来提供一个庞大且多样化的数据集。

如果样本规模不符合最低数据要求，您仍可以测试算法，但估计该算法可能表现欠佳。不过，随着系统生成的数据越来越多，该算法的表现会逐渐好转。

在评估测试结果时，您可以选择以下任一视图：

• 样本中的所有展示次数：查看所有展示次数，以了解估算的展示机会价值的总体分布情况。
• 仅限转化：仅查看促成转化的展示次数。此视图包含您广告客户名下基于默认归因模型来确定的所有转化事件。当转化次数是广告系列目标之一时，此视图很有用。
• 仅限点击次数：仅查看获得点击的展示次数。当点击次数是广告系列目标之一时，此视图很有用。

可获得的分析洞见如下：

分析洞见	说明
样本中的展示次数	显示过去 30 天内样本包含的展示次数。 包括符合以下条件的展示机会所占的百分比： 出错的展示机会：显示在接受算法评估时导致出错的展示机会。 不计分：显示由算法排除的展示机会所占的百分比。 没有价值的展示机会：显示得分为负或零的展示机会所占的百分比。这些展示机会不符合算法条件，且预计与广告系列目标不符。 得分较高的展示机会：显示得分较高的展示机会所占的百分比，估计这些展示机会有价值且与广告系列目标相符。 示例：样本中的展示机会 您可以根据展示机会数量来估算展示机会价值总额。 样本中的展示次数：10,000 不计分：5% 正得分：70% 无价值的展示机会：25% 在此示例中，样本规模为 10,000 次展示，其中： 有 5% 的视频展示机会不计分，因此在训练时，算法会排除这些视频展示机会。 也就是说，估计有 70% 的展示机会有价值，且与广告系列的目标相符。 有 25% 的展示机会不符合算法条件，预计这些展示机会与广告系列目标不符。
展示机会价值/费用	衡量您的算法在产生与广告系列目标相符的展示机会方面的成效。该值的计算方法是用展示机会总价值除以样本的总费用。 示例：展示机会价值/费用 您可以用展示机会价值与费用之比来估算自定义出价算法带来的投资回报率。 展示机会价值总额：1000 广告系列总费用：500 美元 展示机会价值/费用：2 也就是说，对于在广告系列上花费的每一元钱，该算法预计所产生的价值是广告系列费用的 2 倍，计算方式为 2/1。
得分的分布情况	显示得分的分布情况，并按得分范围对展示机会进行分组。如果不重复的得分超过 10 个，则显示各个得分。 得分指标也会显示在表格中，您可以下载 .csv 文件，查看构成得分分布的各个得分。 包含以下指标的计数： 不重复的得分：算法定义的不重复得分值的数量。在测试期间，算法定义的得分会分布在样本组中。 最高得分：自定义出价算法定义的最高得分值。 最低得分：自定义出价算法定义的最低得分值。 示例：得分分布 您可以使用得分分布对执行错误进行问题排查。例如： 如果您的自定义出价算法定义了有关哪些展示得分值为 1、2、3、4 和 5 的参数， 但是，得分分布图仅显示 3 个不重复的得分。 这可能表示存在执行错误，您可能需要检查自定义出价算法。 注意：将自定义出价算法分配给正投放的广告系列后，该算法可能会产生使用训练数据显示的值之外的得分值。

通过实验优化自定义出价

您可以设置实验来将某种算法与其他算法进行比较，以便确定哪种算法的表现更好。

例如：

您可以将新算法与其他算法自行指定的展示机会价值总额进行比较，以确定哪种算法能够带来更多的展示机会。

A/B 测试是一款功能强大的工具，可帮助您改进算法。详细了解如何设置实验。

利用报告跟踪自定义出价的效果

您可创建离线报告并查看内嵌指标，以评估自定义出价算法在实现 KPI 和支出费用方面的效果。

您可以使用报告中提供的下列指标来评估自定义出价效果：

• 自行指定出价值的展示次数
• 自行指定正出价值的展示次数
• 自行指定出价值的总展示次数
• 自行指定正出价值的展示次数占比 (%)
• 自行指定出价值的展示次数的估算总费用（广告客户币种）
• 自行指定出价值的展示次数的估算每千次展示费用 (CPM)（广告客户币种）
• 自行指定的展示价值/费用
• 每千次展示的展示机会价值

您可以查看完整说明，并详细了解报告中的指标。

创建离线报告

您可以通过选择自定义出价报告模板（包含算法和算法 ID 维度）来设置离线报告。

您可以选择自行指定的展示机会价值/费用和其他可用指标，以便评估算法在通过支出既定费用实现 KPI 方面的效果。

由于广告客户可在某个给定时间使用多种算法，因此您可以仅将需要评估的具体算法添加到过滤条件部分中。详细了解离线报告。

报告时间范围

尝试在生成报告时选择日期范围。例如：过去 7 天或广告系列的排期。

算法需要处于启用状态至少 2 天才能为报告生成数据。由于记录展示机会并为其评分需要一定的时间，因此报告不含当天和前一天的数据。

查看内嵌自定义出价指标

您可以查看使用自定义出价的所有广告订单和订单项的效果指标。

若要查看内嵌自定义出价指标，请按以下步骤操作：

1. 前往广告系列页面。
2. 选择广告订单。
3. 选择一个广告订单。
4. 使用表格上方的下拉箭头选择效果视图。
5. 在效果视图中，向右滚动表格以查看自定义出价列。

若要创建可显示更多自定义出价指标的自定义视图，请按以下步骤操作：

1. 前往广告系列页面。
2. 选择广告订单。
3. 选择一个广告订单。
4. 使用表格上方的下拉箭头选择创建新的自定义视图。
5. 在自定义出价部分中，选择要添加的指标。
6. 选择应用。