数字营销优化制造技术

本申请涉及数字营销优化。具体地，公开了一种用于实验的系统，包括实验引擎，其能够定义涉及用于内容元素集合的各种处理的实验。实验引擎通过网络将处理递送至控制群组，从而进行实验。对递送的处理的选择进行优化，以提供具有满足实验目标的更大概率的处理。

【技术实现步骤摘要】

本专利技术涉及数字营销优化。并且更具体地，涉及用于实验的方法、系统和设备。
技术介绍
实验有助于测试新的或不同的思路，并且可以得到更好的产品、方法和技术。实验 可以包括为各种测试主题提供多种备选思路或者方法，以及观测结果。例如，可以建立实验 来测试内容(例如，可以通过某些形式或方式呈现给人们的数据或信息)的各种结构或安 排。为了最大化实验的益处，期望具有测试主题的适当总体。通常，备选思路的数量越多， 提供或者获得实验的准确测试结果所需的测试主题的数量就越多。随着获得准确结果所需 的测试主题数量的增长，管理所述实验变成困难、耗时以及昂贵的任务。由此，虽然实验可 以得到关于如何实现预期目标(例如，最大化产品销售)巨大灵感，但实验可能变得无法承 受。
技术实现思路
本专利技术的第一方面涉及一种用于通过数据网络来进行实验的方法，所述方法包 括确定将要通过用于所述实验的所述网络递送给至少一个控制群组的处理的第一集合， 其中，每个处理包括内容元素的组合；通过所述网络，将所述处理的第一集合递送至所述至 少一个控制群组；当为每个控制群组呈现所述第一集合中的至少一个所述处理时，跟踪每 个控制群组的行为本文档来自技高网...

【技术保护点】
一种用于通过数据网络来进行实验的方法，所述方法包括：确定将要通过用于所述实验的所述网络递送给至少一个控制群组的处理的第一集合，其中，每个处理包括内容元素的组合；通过所述网络，将所述处理的第一集合递送至所述至少一个控制群组；当为每个控制群组呈现所述第一集合中的至少一个所述处理时，跟踪每个控制群组的行为；基于所跟踪的行为确定每个处理的置信度，其中每个置信度是对将要使用的相应处理或者相应处理中的内容元素的所述组合满足所述实验的一个或多个目标的能力的估计；以及至少基于所述置信度来确定递送给所述至少一个控制群组的处理的新集合。

【技术特征摘要】
US 2008-10-21 12/255,071一种用于通过数据网络来进行实验的方法，所述方法包括确定将要通过用于所述实验的所述网络递送给至少一个控制群组的处理的第一集合，其中，每个处理包括内容元素的组合；通过所述网络，将所述处理的第一集合递送至所述至少一个控制群组；当为每个控制群组呈现所述第一集合中的至少一个所述处理时，跟踪每个控制群组的行为；基于所跟踪的行为确定每个处理的置信度，其中每个置信度是对将要使用的相应处理或者相应处理中的内容元素的所述组合满足所述实验的一个或多个目标的能力的估计；以及至少基于所述置信度来确定递送给所述至少一个控制群组的处理的新集合。2.根据权利要求1所述的方法，其中，至少基于所述确定的置信度来确定递送给所述 至少一个控制群组的处理的新集合进一步包括标识用于所述新集合的候选处理； 确定每个候选处理的置信度； 基于相应的置信度为每个候选处理加权；以及 基于所述加权来选择用于所述新集合的候选处理。3.根据权利要求2所述的方法，进一步包括基于所述加权来确定递送给每个控制群组的所述新集合的所述候选处理的比例。4.根据权利要求3所述的方法，其中，由于具有较高置信度而被确定为具有较高加权 的候选处理以高于被确定为具有较低加权的候选处理的比例被递送给每个控制群组。5.根据权利要求3所述的方法，进一步包括 使用置信度阈值来确定不将处理包括在所述新集合中。6.根据权利要求2所述的方法，进一步包括存储用于所述处理的第一集合以及递送给所述至少一个控制群组的任何其它处理的置信度。7.根据权利要求6所述的方法，其中确定每个候选处理的置信度进一步包括 获取每个候选处理的已存储的置信度。8.根据权利要求1-7中任一项所述的方法，其中，每个处理包括元素的组合，并且每个 元素包括用于所述元素的多个变化中的变化。9.根据权利要求1-7中任一项所述的方法，其中，至少基于所述置信度来确定递送给 所述至少一个控制群组的处理的新集合进一步包括基于对哪些处理被估计为能实现所述一个或多个目标的预测，来确定所述处理的新集合。10.根据权利要求9所述的方法，进一步包括根据包括所述至少一个控制群组的控制群组的观测行为，来确定预测模型；以及 根据所述预测模型来确定所述预测。11.根据权利要求1-7中任一项所述的方法，其中，所述新的处理集合包括具有与所述 第一集合中的至少一个处理相同的元素组合的一个或多个处理，所述一个或多个处理被确 定为相对于先前递送给所述至少一个控制群组的其他处理而言具有高置信度。12.根据权利要求1-7中任一项所述的方法，进一步包括 确定所述一个或多个目标是否被满足；以及如果所述一个或多个目标未被满足，则基于先前递送的处理的置信度来重复确定处理 的新集合。13.—种被配置以提供用于评估内容的实验的系统，所述系统包括内容系统，其可操作以存储内容，所述内容包括处理，每个处理具有内容元素的组合，以及其中所述内容系统可操作以存储每个处理的置信度，并且其中每个置信度是将要使用 的相应处理满足一个或多个目标的能力的估计；以及通信管理系统，其与所述内容系统通信，并且可操作以定义实验、通过数据网络将处理 递送给至少一个控制群组从而进行所述实验，以及通过所述数据网络从所述至少一个控制 群组收集观测数据，所述观测数据涉及针对每个处理的用户行为，其中，所述通信管理系统可操作以确定所述存储的置信度，并且所述内容系统可操作 以基于先前递送至所述至少一个控制群组的处理的所述置信度来选择新的处理以递送至 用于所述实验的所述至少一个控制群组。14.根据权利要求...

【专利技术属性】
技术研发人员：C纳托利，S默里，崔钟元，
申请(专利权)人：埃森哲环球服务有限公司，
类型：发明
国别省市：CH[瑞士]