联邦学习框架的构建方法、使用方法及相关设备技术

本公开的实施方式提供了联邦学习框架的构建方法、联邦学习框架的使用方法及装置、计算机可读存储介质和电子设备，属于计算机和通信技术领域。构建方法包括：对本地组件进行标准化处理；将进行标准化处理后的所述本地组件上传到联盟端；其中，所述标准化处理包括对所述本地组件进行清晰化计算步骤、清晰化通信步骤和标准化通信数据格式处理。本公开的方法，能够实现联邦学习框架的构建。能够实现联邦学习框架的构建。能够实现联邦学习框架的构建。

【技术实现步骤摘要】
联邦学习框架的构建方法、使用方法及相关设备


[0001]本公开涉及计算机和通信
，具体而言，涉及联邦学习框架的构建方法、联邦学习框架的使用方法及装置、计算机可读存储介质和电子设备。

技术介绍

[0002]联邦学习框架是一种分布式的人工智能模型训练框架，联邦学习可以保证各个企业的数据在无需共享的条件下实现联邦建模和联邦训练。联邦学习提供了一种破解数据安全和数据孤岛问题的可行性方向。现有技术中，在联邦平台异构时，合作方平台的特征分析、模型评估等组件，并不具备相同的功能，这需要双方投入一定人力成本，进行方案对齐、功能开发，以最终得到业务方想要看到的呈现指标。
[0003]需要说明的是，在上述
技术介绍
部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

技术实现思路

[0004]本公开实施例提供联邦学习框架的构建方法、联邦学习框架的使用方法及装置、计算机可读存储介质和电子设备，能够实现联邦学习框架的构建。
[0005]本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。
[0006]根据本公开的一个方面，提供一种联邦学习框架的构建方法，应用于参与机构端，包括：
[0007]对本地组件进行标准化处理；
[0008]将进行标准化处理后的所述本地组件上传到联盟端；
[0009]其中，所述标准化处理包括对所述本地组件进行清晰化计算步骤、清晰化通信步骤和标准化通信数据格式处理。r/>[0010]在一个实施例中，对本地组件进行标准化处理包括：
[0011]对所述本地组件统一通信协议，统一序列化与反向序列化方式。
[0012]在一个实施例中，对本地组件进行标准化处理包括：
[0013]抽象出在联邦学习组件的通信步骤中的一般数据结构作为传输训练中间数据的标准格式，在序列化文件中定义每个通信变量的唯一标识。
[0014]根据本公开的一个方面，提供一种联邦学习框架的构建方法，应用于联盟端，包括：
[0015]接收参与机构端发送的标准化处理后的本地组件；
[0016]对标准化处理后的所述本地组件进行审核；
[0017]在标准化处理后的所述本地组件符合要求时，将标准化处理后的所述本地组件加入组件库；
[0018]其中，所述标准化处理包括对所述本地组件进行清晰化计算步骤、清晰化通信步
骤和标准化通信数据格式处理。
[0019]在一个实施例中，对标准化处理后的所述本地组件进行审核包括：
[0020]委托具有技术实力的参与机构对标准化处理后的所述本地组件进行审核。
[0021]在一个实施例中，对标准化处理后的所述本地组件进行审核包括：
[0022]从实现难度、组件标准化程度、实际应用价值的角度对标准化处理后的所述本地组件进行审核。
[0023]根据本公开的一个方面，提供一种联邦学习框架的使用方法，包括：
[0024]获取组件库中的组件以及所述组件的开发文档；
[0025]根据所述组件以及所述组件的开发文档适配本地的存储计算；
[0026]其中，所述组件已完成进行清晰化计算步骤、清晰化通信步骤和标准化通信数据格式处理的标准化处理。
[0027]根据本公开的一个方面，提供一种联邦学习的框架的使用装置，包括：
[0028]获取模块，配置为获取组件库中的组件以及所述组件的开发文档；
[0029]适配模块，配置为根据所述组件以及所述组件的开发文档适配本地的存储计算；
[0030]其中，所述组件已完成进行清晰化计算步骤、清晰化通信步骤和标准化通信数据格式处理的标准化处理。
[0031]根据本公开的一个方面，提供一种电子设备，包括：
[0032]一个或多个处理器；
[0033]存储装置，配置为存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如上实施例中任一项所述的方法。
[0034]根据本公开的一个方面，提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上实施例中任一项所述的方法。
[0035]在本公开的一些实施方式所提供的技术方案中，能够联邦学习框架的构建。
[0036]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
[0037]以下附图描述了本专利技术的某些说明性实施方式，其中相同的附图标记表示相同的元件。这些描述的实施方式将是本公开的示例性实施方式，而不是以任何方式进行限制。
[0038]图1示出了可以应用本公开实施方式的联邦学习框架的构建方法的示例性系统架构的示意图；
[0039]图2示出了适于用来实现本公开实施方式的电子设备的计算机系统的结构示意图；
[0040]图3示意性示出了根据本公开的一实施方式的联邦学习框架的构建方法的流程图，应用于参与机构端；
[0041]图4示意性示出了根据本公开的一实施方式的联邦学习框架的构建方法的流程图，应用于联盟端；
[0042]图5示出了本公开一个实施例的联邦学习框架的构建的示意图；
[0043]图6示出了本公开一个实施例的联邦学习框架的使用的示意图；
[0044]图7示出了本公开一个实施例的联邦学习框架中的合作机构的交互示意图；
[0045]图8示意性示出了根据本公开的一实施方式的联邦学习的框架的使用装置的框图。
具体实施方式
[0046]现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。
[0047]此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中，提供许多具体细节从而给出对本公开的实施方式的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而没有特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本公开的各方面。
[0048]附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
[0049]附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。
[0050]图1示出了可以应用本公开实施本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种联邦学习框架的构建方法，其特征在于，应用于参与机构端，包括：对本地组件进行标准化处理；将进行标准化处理后的所述本地组件上传到联盟端；其中，所述标准化处理包括对所述本地组件进行清晰化计算步骤、清晰化通信步骤和标准化通信数据格式处理。2.根据权利要求1所述的方法，其特征在于，对本地组件进行标准化处理包括：对所述本地组件统一通信协议，统一序列化与反向序列化方式。3.根据权利要求2所述的方法，其特征在于，对本地组件进行标准化处理包括：抽象出在联邦学习组件的通信步骤中的一般数据结构作为传输训练中间数据的标准格式，在序列化文件中定义每个通信变量的唯一标识。4.一种联邦学习框架的构建方法，其特征在于，应用于联盟端，包括：接收参与机构端发送的标准化处理后的本地组件；对标准化处理后的所述本地组件进行审核；在标准化处理后的所述本地组件符合要求时，将标准化处理后的所述本地组件加入组件库；其中，所述标准化处理包括对所述本地组件进行清晰化计算步骤、清晰化通信步骤和标准化通信数据格式处理。5.根据权利要求4所述的方法，其特征在于，对标准化处理后的所述本地组件进行审核包括：委托具有技术实力的参与机构对标准化处理后的所述本地组件进行审核。6.根据权利要...

【专利技术属性】
技术研发人员：张德，陈行，彭南博，
申请(专利权)人：京东科技控股股份有限公司，
类型：发明
国别省市：