联邦学习模型训练的通信方法、装置和电子设备制造方法及图纸

技术编号:31501319 阅读:24 留言:0更新日期:2021-12-22 23:18
本申请提出一种联邦学习模型训练的通信方法、装置和电子设备,方法包括:获取用户节点在执行训练任务期间的通信记录;根据所述通信记录对应的哈希值生成默克尔树;将所述默克尔树存储至区块链中对应的区块中。由此,获取用户节点在执行训练任务期间的通信记录,根据通信记录对应的哈希值生成默克尔树,将默克尔树存储至区块链中对应的区块中。由此,该方法可将用户节点的通信记录对应的哈希值生成默克尔树,并存储至区块链中,即可将训练过程中的通信记录存储至区块链中,使得通信记录可回溯,以便在后续出现问题时进行查证,提高了训练过程的透明度和安全性。练过程的透明度和安全性。练过程的透明度和安全性。

【技术实现步骤摘要】
联邦学习模型训练的通信方法、装置和电子设备


[0001]本申请涉及深度学习
,尤其涉及一种联邦学习模型训练的通信方法、装置、电子设备和存储介质。

技术介绍

[0002]目前,联邦学习可在不需要数据共享的前提下实现联邦建模和联邦训练,数据安全性较高,还可解决数据孤岛问题,得到了广泛应用。然而,相关技术中的联邦学习模型训练过程中,训练过程透明度较低,一些参与方会生成虚假数据与其他参与方进行联邦训练,以获取其他参与方的隐私数据,且训练过程不可回溯,出现问题无法查证。

技术实现思路

[0003]本申请旨在至少在一定程度上解决相关技术中联邦学习模型训练过程中,训练过程透明度较低,训练过程不可回溯,出现问题无法查证的技术问题之一。
[0004]为此,本申请第一方面实施例提出一种联邦学习模型训练的通信方法,获取用户节点在执行训练任务期间的通信记录,根据通信记录对应的哈希值生成默克尔树,将默克尔树存储至区块链中对应的区块中。由此,该方法可将用户节点的通信记录对应的哈希值生成默克尔树,并存储至区块链中,即可将训练过程中的通信记录存储至区块链中,使得通信记录可回溯,以便在后续出现问题时进行查证,提高了训练过程的透明度和安全性。
[0005]本申请第二方面实施例提出一种联邦学习模型训练的通信装置。
[0006]本申请第三方面实施例提出一种电子设备。
[0007]本申请第四方面实施例提出一种计算机可读存储介质。
[0008]本申请第一方面实施例提出了一种联邦学习模型训练的通信方法,包括:获取用户节点在执行训练任务期间的通信记录;根据所述通信记录对应的哈希值生成默克尔树;将所述默克尔树存储至区块链中对应的区块中。
[0009]根据本申请实施例的联邦学习模型训练的通信方法,获取用户节点在执行训练任务期间的通信记录,根据通信记录对应的哈希值生成默克尔树,将默克尔树存储至区块链中对应的区块中。由此,该方法可将用户节点的通信记录对应的哈希值生成默克尔树,并存储至区块链中,即可将训练过程中的通信记录存储至区块链中,使得通信记录可回溯,以便在后续出现问题时进行查证,提高了训练过程的透明度和安全性。
[0010]另外,根据本申请上述实施例的联邦学习模型训练的通信方法还可以具有如下附加的技术特征:
[0011]在本申请的一个实施例中,所述通信记录包括以下信息中的至少一种:发送方、接收方、变量唯一标识、消息大小和通信内容。
[0012]在本申请的一个实施例中,还包括:采用星际文件系统对所述通信内容进行存储,以生成所述通信内容对应的哈希值。
[0013]在本申请的一个实施例中,所述通信内容包括本地训练数据和/或中间训练结果。
[0014]在本申请的一个实施例中,所述获取用户节点在执行训练任务期间的通信记录之前,还包括:在所述区块链中建立所述区块;将区块属性信息存储至所述区块中。
[0015]在本申请的一个实施例中,所述区块属性信息包括以下信息中的至少一种:所述区块前一区块的哈希值、时间戳、随机数和所述区块后一区块的哈希值。
[0016]在本申请的一个实施例中,所述获取用户节点在执行训练任务期间的通信记录之前,还包括:获取所述用户节点提交的训练任务信息,所述训练任务信息中包括所述训练任务的配置信息;将所述配置信息存储至所述区块中。
[0017]在本申请的一个实施例中,所述配置信息包括以下信息中的至少一种:所述用户节点的标识、所述用户节点的角色和联邦学习模型的训练参数。
[0018]在本申请的一个实施例中,还包括:根据所述用户节点的本地训练模型和联邦学习模型的效果,确定所述用户节点的贡献值;根据所述贡献值确定所述用户节点的激励;将所述激励存储至所述区块中。
[0019]在本申请的一个实施例中,还包括:展示所述通信记录。
[0020]在本申请的一个实施例中,还包括:将所述通信记录发送至监管节点,以供所述监管节点对所述训练任务进行监管。
[0021]在本申请的一个实施例中,所述用户节点根据通信合约与所述通信合约中约定的用户节点进行通信,所述通信合约根据所述用户节点和其他用户节点的本地训练数据的的匹配度确定。
[0022]本申请第二方面实施例提出了一种联邦学习模型训练的通信装置,包括:获取模块,用于获取用户节点在执行训练任务期间的通信记录;生成模块,用于根据所述通信记录对应的哈希值生成默克尔树;存储模块,用于将所述默克尔树存储至区块链中对应的区块中。
[0023]本申请实施例的联邦学习模型训练的通信装置,获取用户节点在执行训练任务期间的通信记录,根据通信记录对应的哈希值生成默克尔树,将默克尔树存储至区块链中对应的区块中。由此,该方法可将用户节点的通信记录对应的哈希值生成默克尔树,并存储至区块链中,即可将训练过程中的通信记录存储至区块链中,使得通信记录可回溯,以便在后续出现问题时进行查证,提高了训练过程的透明度和安全性。
[0024]另外,根据本申请上述实施例的联邦学习模型训练的通信装置还可以具有如下附加的技术特征:
[0025]在本申请的一个实施例中,所述通信记录包括以下信息中的至少一种:发送方、接收方、变量唯一标识、消息大小和通信内容。
[0026]在本申请的一个实施例中,所述生成模块,还用于:采用星际文件系统对所述通信内容进行存储,以生成所述通信内容对应的哈希值。
[0027]在本申请的一个实施例中,所述通信内容包括本地训练数据和/或中间训练结果。
[0028]在本申请的一个实施例中,所述获取用户节点在执行训练任务期间的通信记录之前,所述存储模块,还用于:在所述区块链中建立所述区块;将区块属性信息存储至所述区块中。
[0029]在本申请的一个实施例中,所述区块属性信息包括以下信息中的至少一种:所述区块前一区块的哈希值、时间戳、随机数和所述区块后一区块的哈希值。
[0030]在本申请的一个实施例中,所述获取用户节点在执行训练任务期间的通信记录之前,所述存储模块,还用于:获取所述用户节点提交的训练任务信息,所述训练任务信息中包括所述训练任务的配置信息;将所述配置信息存储至所述区块中。
[0031]在本申请的一个实施例中,所述配置信息包括以下信息中的至少一种:所述用户节点的标识、所述用户节点的角色和联邦学习模型的训练参数。
[0032]在本申请的一个实施例中,所述存储模块,还用于:根据所述用户节点的本地训练模型和联邦学习模型的效果,确定所述用户节点的贡献值;根据所述贡献值确定所述用户节点的激励;将所述激励存储至所述区块中。
[0033]在本申请的一个实施例中,还包括:展示模块,用于:展示所述通信记录。
[0034]在本申请的一个实施例中,还包括:发送模块,用于:将所述通信记录发送至监管节点,以供所述监管节点对所述训练任务进行监管。
[0035]在本申请的一个实施例中,所述用户节点根据通信合约与所述通信合约中约定的用户节点进行通信,所本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种联邦学习模型训练的通信方法,其特征在于,包括:获取用户节点在执行训练任务期间的通信记录;根据所述通信记录对应的哈希值生成默克尔树;将所述默克尔树存储至区块链中对应的区块中。2.根据权利要求1所述的通信方法,其特征在于,所述通信记录包括以下信息中的至少一种:发送方、接收方、变量唯一标识、消息大小和通信内容。3.根据权利要求2所述的通信方法,其特征在于,还包括:采用星际文件系统对所述通信内容进行存储,以生成所述通信内容对应的哈希值。4.根据权利要求3所述的通信方法,其特征在于,所述通信内容包括本地训练数据和/或中间训练结果。5.根据权利要求1所述的通信方法,其特征在于,所述获取用户节点在执行训练任务期间的通信记录之前,还包括:在所述区块链中建立所述区块;将区块属性信息存储至所述区块中。6.根据权利要求5所述的通信方法,其特征在于,所述区块属性信息包括以下信息中的至少一种:所述区块前一区块的哈希值、时间戳、随机数和所述区块后一区块的哈希值。7.根据权利要求1所述的通信方法,其特征在于,所述获取用户节点在执行训练任务期间的通信记录之前,还包括:获取所述用户节点提交的训练任务信息,所述训练任务信息中包括所述训练任务的配置信息;将所述配置信息存储至所述区块中。8.根据权利要求7所述的通信方法,其特征在于,所述配置信息包括以下信息中的至少一种:所述用户节点的标识、所述用户节点的角色和联邦学习模型的训练参数。9.根据权利要求1所述的通信方法,其特征在于,还包括:根据所述用户节点的本地训练模型和联邦学习模型的效果,确定所述用户节点的贡献值;根据所述贡献值确定所述用户节点的激励;将所述激励存储至所述区块中。10.根据权利要求1所述的通信方法,其特征在于,还包括:展示所述通信记录。11.根据权利要求1所述的通信方法,其特征在于,还包括:将所述通信记录发送至监管节点,以供所述监管节点对所述训练任务进行监管。12.根据权利要求1所述的通信方法,其特征在于,所述用户节点根据通信合约与所述通信合约中约定的用户节点进行通信,所述通信合约根据所述用户节点和其他用户节点的本地训练数据的的匹配度确定。13.一种联邦学习模型训练的通信装置,其特征在于,包括:
获取模块,用于获取用户节点在执行训练任务期间的通信记录;生成模块,用于根据所述通信记录对应的哈希值生成默克尔树;存储模块,用于将所述默克尔树存储至区块链中对应的区块中。14.根据权利要求13所述的通信装置,其特征在于,所述通信记录包...

【专利技术属性】
技术研发人员:张德陈行刘帅朝彭南博
申请(专利权)人:京东科技控股股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1