一种数据处理方法和相关装置制造方法及图纸

技术编号:42904414 阅读:29 留言:0更新日期:2024-09-30 15:20
本申请实施例公开了一种数据处理方法和相关装置,获取包括多个键值对的待压缩数据,对键和值分别进行去重处理,得到键集合和值集合,从而通过去重处理,降低待压缩数据的数据量。根据多个键值对、键集合和值集合,得到索引值集合,通过索引值可以标识待压缩数据包括的各个值在值集合中的存储位置,且索引值在索引值集合中的位置是根据键集合包括的键的顺序确定的。从而通过索引值和值集合能够确定值的内容,通过索引值在索引值集合中的位置以及键集合,能够确定键的内容,进而还原出键值对,即根据键集合、值集合和索引值集合,能够实现对待压缩数据的压缩,得到压缩数据。由此,实现了在保证压缩数据可读性的同时,降低了待压缩数据的数据量。

【技术实现步骤摘要】

本申请涉及计算机,特别是涉及一种数据处理方法和相关装置


技术介绍

1、键值对是目前较为流行的数据格式,一个键值对包括键和与该键对应的值。例如,键为车辆使用年限,其对应的值可以是3年、5年等。通过键值对形式表示的数据的优势在于易读性。

2、但是,以键值对形式存储的数据对应的数据量一般较大,其在传输的时候会占用大量带宽,且容易出现因带宽不足而导致数据传输停滞,又或者在存储时,也会出现磁盘和内存占用较为严重等问题,故为了节省带宽、磁盘或内容占用,需要对数据进行压缩处理。

3、相关技术中,会对键值对形式表示的数据进行整体压缩,虽然压缩率较高,但是失去了可读性,从而使得高可读性与低空间占用率不能同时兼得,对数据的使用带来不便。


技术实现思路

1、为了解决上述技术问题,本申请提供了一种数据处理方法和相关装置,用于在针对以键值对形式表示的数据进行压缩后,使其具有可读性。

2、本申请实施例公开了如下技术方案:

3、一方面,本申请实施例提供一种数据处理方法,所述方法包括:...

【技术保护点】

1.一种数据处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述待压缩数据用于表征多个对象,各个所述对象包括的键值对中的键均相同。

3.根据权利要求1所述的方法,其特征在于,所述待压缩数据用于表征多个对象,所述多个对象中至少两个对象包括的键值对中的键不同;

4.根据权利要求2或3所述的方法,其特征在于,所述根据所述多个键值对、所述键集合和所述值集合,得到索引值集合,包括:

5.根据权利要求4所述的方法,其特征在于,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,若所述目标值的数据类型为...

【技术特征摘要】

1.一种数据处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述待压缩数据用于表征多个对象,各个所述对象包括的键值对中的键均相同。

3.根据权利要求1所述的方法,其特征在于,所述待压缩数据用于表征多个对象,所述多个对象中至少两个对象包括的键值对中的键不同;

4.根据权利要求2或3所述的方法,其特征在于,所述根据所述多个键值对、所述键集合和所述值集合,得到索引值集合,包括:

5.根据权利要求4所述的方法,其特征在于,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,若所述目标值的数据类型为字符串类型,所述根据所述存储位置、所述第一偏移量和所述第二偏移量,确定所述目标值所在的键值对对应的索引值,包括:

7.根据权利要求4所述的方法,其特征在于,所述确定所述目标对象包括的键值对中的值,在所述值集合中的存储位置,包括:

8.根据权利要求1所述的方法,其特征在于,所述根据所述多个键值对包括的多个...

【专利技术属性】
技术研发人员:张宇昂
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1