数据的处理方法和装置、电子设备和存储介质制造方法及图纸

技术编号:28294908 阅读:29 留言:0更新日期:2021-04-30 16:18
本申请提供了一种数据的处理方法和装置、电子设备和存储介质,其中,该方法包括:接收到第一插入指令,其中,第一插入指令用于在第一数据页中插入与第一数据对应的第一记录,第一数据页为第一节点上的第一数据表中的一个数据页;确定第一记录的第一关联信息,其中,第一关联信息用于表征第一记录在第一节点上的存储位置;按照第一关联信息,生成与第一记录对应的第一行标识,其中,第一行标识用于唯一标识第一记录;将第一记录插入到第一数据页中,其中,第一记录中包含第一数据和第一行标识。通过本申请,解决了相关技术中分配行标识的方式存在由于需要使用I/O资源导致的服务器资源负载增大的问题。

【技术实现步骤摘要】
数据的处理方法和装置、电子设备和存储介质
本申请涉及数据处理领域,尤其涉及一种数据的处理方法和装置、电子设备和存储介质。
技术介绍
目前,数据库(例如,MySQL)通过计数器累加的方式生成rowid(行标识),通过维护一个自增加的计数器(累加器),保存到全局变量,在插入一个数据时从计数器中取一个计数,多个数据表共用一个计数器。为了保证宕机后的rowid分配的合理性,可以预先设定的增长步长,将按照增长步长所增长到的值保存到一个文件(磁盘中的文件),定时更新该文件,从而保证数据的增长。例如,增长步长为200,先在计数文件中写入200,表明当前分配的rowid均小于或者等于200,计数器的值增长到200时,再在计数文件中写入400,表明当前分配的rowid均小于或者等于400。在服务器宕机之后,可以直接读取到该文件中的值,并按照读取出到的值分配rowid。然而,上述分配行标识的方式,需要保存到磁盘中的文件,以更新文件中的记录值,由于需要使用I/O(Input/output,输入/输出)资源,因此增加服务器资源负载。...

【技术保护点】
1.一种数据的处理方法,其特征在于,包括:/n接收到第一插入指令,其中,所述第一插入指令用于在第一数据页中插入与第一数据对应的第一记录,所述第一数据页为第一节点上的第一数据表中的一个数据页;/n确定所述第一记录的第一关联信息,其中,所述第一关联信息用于表征所述第一记录在所述第一节点上的存储位置;/n按照所述第一关联信息,生成与所述第一记录对应的第一行标识,其中,第一行标识用于唯一标识所述第一记录;/n将所述第一记录插入到所述第一数据页中,其中,所述第一记录中包含所述第一数据和所述第一行标识。/n

【技术特征摘要】
1.一种数据的处理方法,其特征在于,包括:
接收到第一插入指令,其中,所述第一插入指令用于在第一数据页中插入与第一数据对应的第一记录,所述第一数据页为第一节点上的第一数据表中的一个数据页;
确定所述第一记录的第一关联信息,其中,所述第一关联信息用于表征所述第一记录在所述第一节点上的存储位置;
按照所述第一关联信息,生成与所述第一记录对应的第一行标识,其中,第一行标识用于唯一标识所述第一记录;
将所述第一记录插入到所述第一数据页中,其中,所述第一记录中包含所述第一数据和所述第一行标识。


2.根据权利要求1所述的方法,其特征在于,确定所述第一记录的所述第一关联信息包括:
确定所述第一节点的节点序号、所述第一数据表在所述第一节点上的数据表序号和所述第一数据页在所述第一数据表中的数据页序号;
确定所述第一记录在所述第一数据页中的页面偏移,其中,所述第一关联信息包括:所述节点序号,所述数据表序号,所述数据页序号,所述页面偏移。


3.根据权利要求2所述的方法,其特征在于,确定所述第一记录在所述第一数据页中的所述页面偏移包括:
获取所述第一数据页中所述第一记录的前一个记录的起始位置和所述前一个记录的记录长度;
按照所述前一个记录的起始位置和所述前一个记录的记录长度,确定所述第一记录在所述第一数据页中的所述页面偏移。


4.根据权利要求2所述的方法,其特征在于,按照所述第一关联信息,生成与所述第一记录对应的所述第一行标识包括:
初始化包含多个字节的初始行标识;
将所述第一关联信息的各个子关联信息分别写入到所述初始行标识中对应的字节位置上,得到所述第一行标识,其中,所述第一关联信息包括以下子关联信息:所述节点序号,所述数据表序号,所述数据页序号,所述页面偏移。


5.根据权利要求4所述的方法,其特征在于,将所述第一关联信息的所述各个子关联信息分别写入到所述初始行标识中对应的字节上包括:
按照为所述节点序号所分配的字节数,采用大端序模式将所述节点序号写入到所述初始行标识的第一字节位置上;
按照为所述数据表序号和所述数据页序号共分配的字节数,采用小端序模式将所述数据表序号写入到所述初始行标识的第二字节位置上,并采用大端序模式将所述数据页序号写入到所述初始行标识的第三字节位置上;
按照为所述页面偏移所分配的字节数,采用大端序模式将所述页面偏移写入到所述初始行标识的第四字节位置上。


6.根据权利要求5所述的方法,其特征在于,在采用大端序模式将所述数据页序号写入到所述初始行标识的所述第三字节位置上之后,所述方法还包括:
在存储所述数据页序号所需的位数大于为所述数据页序号所分配的字节的总位数的情况下,获取所述数据页序号中未存储的至少一位数据;
将所述至少一位数据写入到所述第二字节位置...

【专利技术属性】
技术研发人员:邱海港
申请(专利权)人:北京金山云网络技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1