检验信息发布策略交互作用的方法、装置、介质及设备制造方法及图纸

本申请公开了一种检验信息发布策略交互作用的方法、装置、介质及设备，涉及信息发布领域，该方法包括：根据多个信息发布策略确定与每个所述信息发布策略对应的对照实验；对照实验的实验变量为是否向目标用户群中的用户实施信息发布策略；对所述目标用户群实施所述对照实验得到所述目标用户群对应的实验结果数据；根据所述实验结果数据确定预设检验统计量的均值；基于重抽样根据所述实验结果数据计算得到所述预设检验统计量的方差；根据所述均值和所述方差确定所述检验统计量的置信区间；根据所述检验统计量的置信区间确定所述多个信息发布策略交互作用的检验结果。本申请提出的检验方法能有效准确地确定多个信息发布策略之间的交互程度。之间的交互程度。之间的交互程度。

【技术实现步骤摘要】
检验信息发布策略交互作用的方法、装置、介质及设备


[0001]本申请涉及信息发布领域，具体涉及一种检验信息发布策略交互作用的方法、装置、介质及设备。

技术介绍

[0002]一般的，在进行A/B测试(也称分组隔离实验)时，通常只关注其中实验策略的单独效果，但在一个实验平台上是有众多实验策略同时生效并作用的。而多个实验策略之间是可能互相影响的。
[0003]实验平台衡量实验策略之间的交互作用，多数用的是方差分析(Analysis of Variance，简称ANOVA)，但是方差分析需要满足独立性、正态性和方差齐性三个假设，应用场景有限。有的平实验台会运用多变量测试(Multivariate Testing，简称MVT)，但是多变量测试中的方差估计方法，需要存储大量的数据，在工程实现难度大且估计不一定准确。

技术实现思路

[0004]为了准确地验证多个策略之间的交互作用，本申请提供了检验信息发布策略交互作用的方法、装置、介质及设备。所述技术方案如下：
[0005]第一方面，本申请提供了一种检验信息发布策略交互作用的方法，所述方法包括：
[0006]根据预设的多个信息发布策略，确定与每个所述信息发布策略对应的对照实验；所述对照实验的实验变量为是否向目标用户群中的用户实施所述信息发布策略；
[0007]对所述目标用户群实施所述对照实验，得到所述目标用户群对应的实验结果数据；
[0008]根据所述实验结果数据，确定预设检验统计量的均值；
[0009]基于重抽样方法，根据所述实验结果数据计算得到所述预设检验统计量的方差；
[0010]根据所述均值和所述方差，确定所述检验统计量的置信区间；
[0011]根据所述检验统计量的置信区间，确定所述多个信息发布策略交互作用的检验结果。
[0012]第二方面，本申请提供了一种检验信息发布策略交互作用的装置，所述装置包括：
[0013]实验设计模块，用于根据预设的多个信息发布策略，确定与每个所述信息发布策略对应的对照实验；所述对照实验的实验变量为是否向目标用户群中的用户实施所述信息发布策略；
[0014]策略测试模块，用于对所述目标用户群实施所述对照实验，得到所述目标用户群对应的实验结果数据；
[0015]第一数据处理模块，用于根据所述实验结果数据，确定预设检验统计量的均值；
[0016]第二数据处理模块，用于基于重抽样方法，根据所述实验结果数据计算得到所述预设检验统计量的方差；
[0017]第三数据处理模块，用于根据所述均值和所述方差，确定所述检验统计量的置信
区间；
[0018]检验结果确定模块，用于根据所述检验统计量的置信区间，确定所述多个信息发布策略交互作用的检验结果。
[0019]第三方面，本申请提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或至少一段程序由处理器加载并执行以实现如第一方面所述的一种检验信息发布策略交互作用的方法。
[0020]第四方面，本申请提供了一种计算机设备，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或至少一段程序由所述处理器加载并执行以实现如第一方面所述的一种检验信息发布策略交互作用的方法。
[0021]第五方面，本专利技术提供了一种计算机程序产品或计算机程序，所述计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行如第一方面所述的一种检验信息发布策略交互作用的方法。
[0022]本申请提供的检验信息发布策略交互作用的方法、装置、设备及存储介质，具有如下技术效果：
[0023]本申请提供的方案提出了检验多个信息发布策略之间交互作用的技术方案，该技术方案基于多个对照实验的实验结果数据计算得到预设检验统计量的均值和方法，基于检验统计量的置信区间检验不同信息发布策略是否存在交互作用，衡量相互影响的程度，能够更准确地评估和优化信息发布策略；在计算检验统计量方差时，无需考虑是否满足方差分析的假设，而是通过重抽样方法进行计算，所需要存储的数据是重抽样后的数据样本，降低了计算难度和存储难度。
[0024]本申请的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
[0025]为了更清楚地说明本申请实施例或现有技术中的技术方案和优点，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。
[0026]图1是本申请实施例提供的一种检验信息发布策略交互作用的方法的实施环境示意图；
[0027]图2是本申请实施例提供的一种检验信息发布策略交互作用的方法的流程示意图；
[0028]图3是本申请实施例提供的一种分层分流机制的示意图；
[0029]图4是本申请实施例提供的一种构建建设的流程示意图；
[0030]图5是本申请实施例提供的一种计算检验统计量均值的流程示意图；
[0031]图6是本申请实施例提供的一种计算检验统计量方差的流程示意图；
[0032]图7是本申请实施例提供的一种确定检验结果的流程示意图图；
[0033]图8是本申请实施例提供的一种检验信息发布策略交互作用的装置的示意图；
[0034]图9是本申请实施例提供的用于实现一种方法的设备的硬件结构示意图。
具体实施方式
[0035]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。
[0036]需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0037]为了便于理解本申请实施例所述的技术方案及其产生的技术效果，本申请实施例对于涉及到的相关专业名词进行解释本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种检验信息发布策略交互作用的方法，其特征在于，所述方法包括：根据预设的多个信息发布策略，确定与每个所述信息发布策略对应的对照实验；所述对照实验的实验变量为是否向目标用户群中的用户实施所述信息发布策略；对所述目标用户群实施所述对照实验，得到所述目标用户群对应的实验结果数据；根据所述实验结果数据，确定预设检验统计量的均值；基于重抽样方法，根据所述实验结果数据计算得到所述预设检验统计量的方差；根据所述均值和所述方差，确定所述检验统计量的置信区间；根据所述检验统计量的置信区间，确定所述多个信息发布策略交互作用的检验结果。2.根据权利要求1所述的方法，其特征在于，所述对目标用户群实施所述对照实验，得到所述目标用户群对应的实验结果数据，包括：基于分层分流机制，对目标用户群实施所述对照实验，得到所述目标用户群中各用户的实验结果数据，所述实验结果数据包括所述各用户的策略数据和目标指标对应的指标数据。3.根据权利要求2所述的方法，其特征在于，所述根据所述实验结果数据，确定预设检验统计量的均值，包括：根据所述多个信息发布策略确定多个策略组合；根据所述各用户的策略数据，将所述实验结果数据划分为与每个所述策略组合对应的第一实验结果数据子集；根据所述第一实验结果数据子集中所述目标指标对应的指标数据计算得到与每个所述策略组合对应的目标指标平均值；根据所述与每个所述策略组合对应的目标指标平均值，确定所述预设检验统计量的均值。4.根据权利要求1所述的方法，其特征在于，所述基于重抽样方法，根据所述实验结果数据计算得到所述预设检验统计量的方差，包括：对所述实验结果数据进行数据分桶，得到多个实验结果桶数据；对所述多个实验结果桶数据进行重抽样，得到多个第二实验结果数据子集，所述第二实验结果数据子集为从所述多个实验结果桶数据中去掉任一所述实验结果桶数据后的数据集合；根据所述多个第二实验结果数据子集，确定与每个所述第二实验结果数据子集对应的所述预设检验统计量的样本值；根据所述预设检验统计量的样本值进行方差估计，得到所述预设检验统计量的方差。5.根据权利要求1所述的方法，其特征在于，在所述...

【专利技术属性】
技术研发人员：李池洋，蔡政，任宇堃，林晓健，蔡越，邓颖，李成龙，朱志华，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：