一种光磁电融合的媒资数据分布式存储与管理方法、装置制造方法及图纸

本发明专利技术公开了一种光磁电融合的媒资数据分布式存储与管理方法、装置，方法包括监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次；将存储在热数据存储单元且预设时长内的访问频次低于第一预设阈值的数据迁移到温数据存储单元；将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元；响应于接收到用户的数据访问请求，当数据访问请求访问的数据存储在温数据存储单元将访问的数据迁移至热数据存储单元，当数据访问请求访问的数据存储在冷数据存储单元将访问的数据迁移至温数据存储单元，能够使媒资数据在多层级的介质中流动，在保证读写性能的基础上降低媒资数据的存储成本。媒资数据的存储成本。媒资数据的存储成本。

【技术实现步骤摘要】
一种光磁电融合的媒资数据分布式存储与管理方法、装置


[0001]本专利技术涉及数据存储
，具体涉及一种光磁电融合的媒资数据分布式存储与管理方法、装置。

技术介绍

[0002]在传媒行业环境中，媒资数据存储期要求较长，海量媒资数据存储能耗及成本过高，传统的存储介质无法满足存储的需求，而且目前存储介质大多为相对独立的存储介质，不能同时满足多种存储需求以及读写性能需求。故亟待提出一种新的光磁电融合的媒资数据分布式存储方法，在保证读写性能的基础上降低媒资数据的存储成本。

技术实现思路

[0003]因此，本专利技术要解决的技术问题在于克服现有单个存储介质不能同时满足多种存储需求的缺陷，从而提供一种光磁电融合的媒资数据分布式存储与管理方法、装置。
[0004]根据第一方面，本专利技术实施例公开了一种光磁电融合的媒资数据分布式存储方法，应用于数据存储节点，所述数据存储节点包括热数据存储单元、温数据存储单元以及冷数据存储单元，所述热数据存储单元采用的存储形式包括电存储，所述冷数据存储单元采用的存储形式包括蓝光存储；所述方法包括：监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次；将存储在热数据存储单元且预设时长内的访问频次低于第一预设阈值的数据迁移到温数据存储单元；将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元；响应于接收到用户的数据访问请求，当所述数据访问请求访问的数据存储在温数据存储单元将所述访问的数据迁移至热数据存储单元，当所述数据访问请求访问的数据存储在冷数据存储单元将所述访问的数据迁移至温数据存储单元；重复所述监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次的步骤到所述将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元的步骤。
[0005]可选地，所述方法还包括：响应于接收到用户上传的数据，确定所述数据是否为冷数据；当所述数据为冷数据时，将所述数据存储在冷数据存储单元；当所述数据不是冷数据时，将所述数据存储到热数据存储单元。
[0006]根据第二方面，本专利技术实施例还公开了一种光磁电融合的媒资数据分布式管理方法，应用于基于区块链的数据管理系统，所述数据管理系统包括多个数据存储节点，每一个数据存储节点用于执行上述第一方面或第一方面任一可选实施方式所述的光磁电融合的媒资数据分布式存储方法；所述方法包括：响应于接收到任一数据存储节点的数据调度请求，对发起所述数据调度请求的数据存储节点的身份进行核验；当核验结果满足要求，从存储有所述数据调度请求对应的待调度数据的数据存储节点获取待调度数据并发送至发起所述数据调度请求的数据存储节点。
[0007]可选地，所述方法还包括：响应于接收到任一用户节点上传的数据检索请求，确定
所述数据检索请求对应的待检索数据的标识；根据所述待检索数据的标识确定存储有所述待检索数据的数据存储节点；当存储有所述待检索数据的数据存储节点包括多个，从多个数据存储节点中确定最优数据存储节点；根据配置好的智能合约，将存储在所述最优数据存储节点的待检索数据反馈至所述用户节点。
[0008]根据第三方面，本专利技术实施例还公开了一种基于区块链的媒资数据分布式管理系统，所述系统包括：多个数据存储节点；用户节点，用于接收用户的应用请求；处理器，用于执行上述第二方面或第二方面任一可选实施方式所述的光磁电融合的媒资数据分布式管理方法。
[0009]根据第四方面，本专利技术实施例还公开了一种光磁电融合的媒资数据分布式存储装置，应用于数据存储节点，所述数据存储节点包括热数据存储单元、温数据存储单元以及冷数据存储单元，所述热数据存储单元采用的存储形式包括电存储，所述冷数据存储单元采用的存储形式包括蓝光存储；所述装置包括：数据监测模块，用于监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次；第一数据迁移模块，用于将存储在热数据存储单元且预设时长内的访问频次低于第一预设阈值的数据迁移到温数据存储单元；第二数据迁移模块，用于将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元；数据访问模块，用于响应于接收到用户的数据访问请求，当所述数据访问请求访问的数据存储在温数据存储单元将所述访问的数据迁移至热数据存储单元，当所述数据访问请求访问的数据存储在冷数据存储单元将所述访问的数据迁移至温数据存储单元；步骤循环模块，用于重复所述监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次的步骤到所述将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元的步骤。
[0010]根据第五方面，本专利技术实施例还公开了一种光磁电融合的媒资数据分布式管理装置，应用于基于区块链的数据管理系统，所述数据管理系统包括多个数据存储节点，每一个数据存储节点用于执行如第一方面或第一方面任一可选实施方式所述的光磁电融合的媒资数据分布式存储方法；所述装置包括：身份核验模块，用于响应于接收到任一数据存储节点的数据调度请求，对发起所述数据调度请求的数据存储节点的身份进行核验；数据调度模块，用于当核验结果满足要求，从存储有所述数据调度请求对应的待调度数据的数据存储节点获取待调度数据并发送至发起所述数据调度请求的数据存储节点。
[0011]可选地，所述装置还包括：数据标识确定模块，用于响应于接收到任一用户节点上传的数据检索请求，确定所述数据检索请求对应的待检索数据的标识；存储节点确定模块，用于根据所述待检索数据的标识确定存储有所述待检索数据的数据存储节点；最优存储节点确定模块，用于当存储有所述待检索数据的数据存储节点包括多个，从多个数据存储节点中确定最优数据存储节点；数据反馈模块，用于根据配置好的智能合约，将存储在所述最优数据存储节点的待检索数据反馈至所述用户节点。
[0012]根据第六方面，本专利技术实施例还公开了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如第一方面或第一方面任一可选实施方式所述的光磁电融合的媒资数据分布式存储方法，或如第二方面或第二方面任一可选实施方式所述的光磁电融合的媒资数据分布式管理方
法的步骤。
[0013]根据第七方面，本专利技术实施方式还公开了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面或第一方面任一可选实施方式所述的光磁电融合的媒资数据分布式存储方法，或如第二方面或第二方面任一可选实施方式所述的光磁电融合的媒资数据分布式管理方法的步骤。
[0014]本专利技术技术方案，具有如下优点：
[0015]本专利技术提供的光磁电融合的媒资数据分布式存储方法，通过监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次，将其与该存储的存储单元设置的阈值进行比较，若不满足该存储单元本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种光磁电融合的媒资数据分布式存储方法，其特征在于，应用于数据存储节点，所述数据存储节点包括热数据存储单元、温数据存储单元以及冷数据存储单元，所述热数据存储单元采用的存储形式包括电存储，所述冷数据存储单元采用的存储形式包括蓝光存储；所述方法包括：监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次；将存储在热数据存储单元且预设时长内的访问频次低于第一预设阈值的数据迁移到温数据存储单元；将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元；响应于接收到用户的数据访问请求，当所述数据访问请求访问的数据存储在温数据存储单元将所述访问的数据迁移至热数据存储单元，当所述数据访问请求访问的数据存储在冷数据存储单元将所述访问的数据迁移至温数据存储单元；重复所述监测存储在热数据存储单元以及温数据存储单元中的数据在预设时长内的访问频次的步骤到所述将存储在温数据存储单元且预设时长内的访问频次低于第二预设阈值的数据迁移到冷数据存储单元的步骤。2.根据权利要求1所述的光磁电融合的媒资数据分布式存储方法，其特征在于，所述方法还包括：响应于接收到用户上传的数据，确定所述数据是否为冷数据；当所述数据为冷数据时，将所述数据存储在冷数据存储单元；当所述数据不是冷数据时，将所述数据存储到热数据存储单元。3.一种光磁电融合的媒资数据分布式管理方法，其特征在于，应用于基于区块链的数据管理系统，所述数据管理系统包括多个数据存储节点，每一个数据存储节点用于执行如权利要求1或2所述的光磁电融合的媒资数据分布式存储方法；所述方法包括：响应于接收到任一数据存储节点的数据调度请求，对发起所述数据调度请求的数据存储节点的身份进行核验；当核验结果满足要求，从存储有所述数据调度请求对应的待调度数据的数据存储节点获取待调度数据并发送至发起所述数据调度请求的数据存储节点。4.根据权利要求3所述的光磁电融合的媒资数据分布式管理方法，其特征在于，所述方法还包括：响应于接收到任一用户节点上传的数据检索请求，确定所述数据检索请求对应的待检索数据的标识；根据所述待检索数据的标识确定存储有所述待检索数据的数据存储节点；当存储有所述待检索数据的数据存储节点包括多个，从多个数据存储节点中确定最优数据存储节点；根据配置好的智能合约，将存储在所述最优数据存储节点的待检索数据反馈至所述用户节点。5.一种基于区块链的媒资数据分布式管理系统，其特征在于，所述系统包括：多个数据存储节点；用户节点，用于接收用户的应用请求；
处理器，用于执行权利要求3或4所述的光磁电融合的媒资数据分布式管理方法。6.一种光磁电融合的媒资数据分布式存储装置，其特征在于，应用于数据存储节点，所述数据存储节点包括热数据存储单元、温数据存储单元以及冷数据存储单元，所述热数据存储单元采用的存储形式包括电存储，所述冷数据存储单元采用的存储形式包括蓝光存储；所述装置包括...

【专利技术属性】
技术研发人员：张允竞，杨宇波，赵阳，朱涛，高辉，
申请(专利权)人：北京易华录信息技术股份有限公司，
类型：发明
国别省市：