数据处理方法、装置、设备及计算机可读存储介质制造方法及图纸

本公开涉及一种数据处理方法、装置、设备及计算机可读存储介质，该方法包括：通过第一协议处理系统获取第一协议命令；基于所述第一协议命令，确定对应的内存访问操作命令并将所述内存访问操作命令写入共享信息缓冲区中；通过内存访问系统对所述共享信息缓冲区中的内存访问命令进行处理。本公开实现了NVMe over RDMA硬件卸载，在硬件设备中实现NVMe命令处理请求，主机端无需处理NVMe

【技术实现步骤摘要】
数据处理方法、装置、设备及计算机可读存储介质


[0001]本公开涉及计算机
，尤其涉及一种数据处理方法、装置、设备及计算机可读存储介质。

技术介绍

[0002]非易失性内存主机控制器接口规范(Non
‑
Volatile Memory express，NVMe)是一种用于存储设备的接口规范，用于规范计算机与存储设备的数据传输。NVMe over Fabric(NVMe oF)是于2019年正式提出的NVMe存储网络访问协议。
[0003]NVMe oF有三种重要的网络传输层，分别为传输控制协议(Transmission Control Protocol，TCP)、远程直接地址访问(Remote Direct Memory Access，RDAM)和光纤，其中RDMA是大部分网络协议栈卸载到RDMA网卡中，通过软件实现NVMe oF。
[0004]但是，通过软件实现NVMe oF时，运行RDMA用户态驱动或者内核态驱动，需要消耗中央处理器(Central Processing Unit，CPU)的资源，专门处理RDMA、NVMe
‑
oF等协议栈，而这些CPU资源本可以用来服务于用户业务。因此，基于软件实现的NVMe over RDMA会遇到性能瓶颈，延时、数据吞吐量，IOPS(Input/Output Per Second)指标都不够理想，无法满足用户需求。

技术实现思路

[0005]为了解决上述技术问题，本公开提供了一种数据处理方法、装置、设备及计算机可读存储介质，以满足用户需求。
[0006]第一方面，本公开实施例提供一种数据处理方法，所述方法应用于硬件设备中，所述硬件设备包括第一协议处理系统、共享信息缓冲区、内存访问系统，所述方法包括：
[0007]通过第一协议处理系统获取第一协议命令；
[0008]基于所述第一协议命令，确定对应的内存访问操作命令并将所述内存访问操作命令写入共享信息缓冲区中；
[0009]通过内存访问系统对所述共享信息缓冲区中的内存访问命令进行处理。
[0010]在一些实施例中，所述内存访问操作命令包括发送队列命令和接收队列命令；
[0011]所述基于所述第一协议命令，确定对应的内存访问命令并写入共享信息缓冲区中，包括：
[0012]基于所述第一协议命令，确定对应的发送队列命令和接收队列命令；
[0013]将所述发送队列命令和接收队列命令写入共享信息缓冲区中。
[0014]在一些实施例中，所述方法还包括：
[0015]获取所述内存访问操作命令对应的处理结果信息；
[0016]基于所述处理结果信息，执行相应操作。
[0017]在一些实施例中，所述内存访问操作命令对应的处理结果信息包括发送队列命令发送失败信息；
[0018]相应的，所述基于所述处理结果信息，执行相应操作，包括：
[0019]将所述发送队列命令发送失败信息写入主机内存，所述主机与所述硬件设备通信连接。
[0020]在一些实施例中，所述内存访问操作命令对应的处理结果信息包括接收队列命令完成信息；
[0021]相应的，所述基于所述处理结果信息，执行相应操作，包括：
[0022]根据所述接收队列命令完成信息，将所述共享信息缓冲区中对应的接收队列命令写入主机内存，所述主机与所述硬件设备通信连接。
[0023]在一些实施例中，所述将所述共享信息缓冲区中对应的接收队列命令写入主机内存，包括：
[0024]根据所述接收队列命令，生成第一协议接收队列命令；
[0025]将所述第一协议接收队列命令写入主机内存。
[0026]第二方面，本公开实施例提供一种数据处理装置，包括：
[0027]第一获取模块，用于通过第一协议处理系统获取第一协议命令；
[0028]确定模块，用于基于所述第一协议命令，确定对应的内存访问操作命令并将所述内存访问操作命令写入共享信息缓冲区中；
[0029]处理模块，用于通过内存访问系统对所述共享信息缓冲区中的内存访问命令进行处理。
[0030]在一些实施例中，所述装置还包括：
[0031]第二获取模块，用于获取所述内存访问操作命令对应的处理结果信息；
[0032]执行模块，用于基于所述处理结果信息，执行相应操作。
[0033]第三方面，本公开实施例提供一种电子设备，包括：
[0034]存储器；
[0035]处理器；以及
[0036]计算机程序；
[0037]其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如第一方面所述的方法。
[0038]第四方面，本公开实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行以实现第一方面所述的方法。
[0039]第五方面，本公开实施例还提供了一种计算机程序产品，该计算机程序产品包括计算机程序或指令，该计算机程序或指令被处理器执行时实现如上所述的数据处理方法。
[0040]本公开实施例提供的数据处理方法、装置、设备及计算机可读存储介质，实现了NVMe over RDMA硬件卸载，在硬件设备中实现NVMe命令处理请求，主机端无需处理NVMe
‑
oF以及相应的RDMA协议，释放主机端CPU用于上层业务的处理，提高CPU的利用率，同时基于NVMe over RDMA硬件实现，直接处理NVMe相关的数据指令，降低数据处理延时，增加数据的吞吐量，有效提高了数据处理的性能与效率。
附图说明
[0041]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施
例，并与说明书一起用于解释本公开的原理。
[0042]为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0043]图1为本公开实施例提供的数据处理方法流程图；
[0044]图2为本公开实施例提供的一种应用场景的示意图；
[0045]图3为本公开实施例提供的第一子系统结构示意图；
[0046]图4为本公开实施例提供的共享信息缓冲区结构示意图；
[0047]图5为本公开另一实施例提供的数据处理方法流程图；
[0048]图6为本公开实施例提供的第二子系统结构示意图；
[0049]图7为本公开实施例提供的数据处理装置的结构示意图；
[0050]图8为本公开实施例提供的电子设备的结构示意图。
具体实施方式
[0051]为了能够更清楚地理解本公开的上述目的、特征和优点，下面将对本公开的方案进行进一步描述。需要说明的是，在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合。
[00本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法应用于硬件设备中，所述硬件设备包括第一协议处理系统、共享信息缓冲区、内存访问系统，所述方法包括：通过第一协议处理系统获取第一协议命令；基于所述第一协议命令，确定对应的内存访问操作命令并将所述内存访问操作命令写入共享信息缓冲区中；通过内存访问系统对所述共享信息缓冲区中的内存访问命令进行处理。2.根据权利要求1所述的方法，其特征在于，所述内存访问操作命令包括发送队列命令和接收队列命令；所述基于所述第一协议命令，确定对应的内存访问命令并写入共享信息缓冲区中，包括：基于所述第一协议命令，确定对应的发送队列命令和接收队列命令；将所述发送队列命令和接收队列命令写入共享信息缓冲区中。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取所述内存访问操作命令对应的处理结果信息；基于所述处理结果信息，执行相应操作。4.根据权利要求3所述的方法，其特征在于，所述内存访问操作命令对应的处理结果信息包括发送队列命令发送失败信息；相应的，所述基于所述处理结果信息，执行相应操作，包括：将所述发送队列命令发送失败信息写入主机内存，所述主机与所述硬件设备通信连接。5.根据权利要求3所述的方法，其特征在于，所述内存访问操作命令对应的处理结果信息包括接收队列命令完成信息；相应的，所述基于所述处理结果信息，执行相应操作...

【专利技术属性】
技术研发人员：张宇军，孟繁毅，
申请(专利权)人：中科驭数北京科技有限公司，
类型：发明
国别省市：