数据处理方法和装置、存储介质及处理器制造方法及图纸

本发明专利技术公开了一种数据处理方法和装置、存储介质及处理器。其中，该方法包括：接收对数据库中存储的数据进行处理的操作请求，其中，操作请求至少包括：待处理数据对应的关键字；基于关键字在索引文件中进行检索，得到第一检索结果，其中，索引文件包括：数据库中存储的文件对应的索引信息，以及索引信息对应的关键字；基于第一检索结果和操作请求，对数据库中存储的目标文件进行处理，其中，目标文件用于存储待处理数据。本发明专利技术解决了相关技术中轻量级数据库的性能较差，导致数据处理效率较低的技术问题。

Data processing method and device, storage medium and processor

【技术实现步骤摘要】
数据处理方法和装置、存储介质及处理器
本专利技术涉及数据库领域，具体而言，涉及一种数据处理方法和装置、存储介质及处理器。
技术介绍
数据库在系统开发中十分重要，非关系型数据库(NoSQL)的Key-Value类型数据库有着处理速度快和数据量大的特点，常见的数据库有Redis、Berkeley、LevelDB等。虽然上述数据库性能、可靠性和功能上都非常强大，但是，上述数据库的数据量较大，对于不需要相对重量级的服务的系统，上述数据库并不适合。对于上述系统，可以采用开发语言中自带的Key-Value类型数据库(如Java中的Map)或其他轻量级的关系型数据库(如：SQLite)。但是，开发语言中自带的Key-Value对象只会保存在内存中，并不会保存到硬盘中，无法实现数据的持久化存储。而使用轻量级的关系型数据库实现Key-Value的保存，由于硬盘的读写性能的限制，在系统并发量较大时磁盘的性能会限制系统的性能。针对相关技术中轻量级数据库的性能较差，导致数据处理效率较低的问题，目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种数据处理方法和装置、存储介质及处理器，以至少解决相关技术中轻量级数据库的性能较差，导致数据处理效率较低的技术问题。根据本专利技术实施例的一个方面，提供了一种数据处理方法，包括：接收对数据库中存储的数据进行处理的操作请求，其中，操作请求至少包括：待处理数据对应的关键字；基于关键字在索引文件中进行检索，得到第一检索结果，其中，索引文件包括：数据库中存储的文件对应的索引信息，以及索引信息对应的关键字；基于第一检索结果和操作请求，对数据库中存储的目标文件进行处理，其中，目标文件用于存储待处理数据。进一步地，操作请求还包括：操作类型，其中，基于第一检索结果和操作请求，对数据库中存储的目标文件进行处理包括：在操作类型为查询类型，且第一检索结果为检索到关键字对应的目标索引信息的情况下，输出目标文件中存储的待处理数据，其中，目标索引信息与目标文件相对应；在操作类型为添加类型的情况下，在目标文件中添加待处理数据和关键字，其中，操作请求还包括待处理数据；在操作类型为修改类型，且第一检索结果为检索到关键字对应的目标索引信息的情况下，基于目标数据对目标文件中存储的待处理数据进行修改，其中，操作请求还包括目标数据；在操作类型为删除类型，且第一检索结果为检索到关键字对应的目标索引信息的情况下，删除目标文件中存储的待处理数据和关键字。进一步地，在第一检索结果为检索到关键字对应的目标索引信息的情况下，删除目标文件中存储的原始数据和关键字，并在目标文件中添加待处理数据和关键字；在第一检索结果为未检索到关键字对应的目标索引信息的情况下，在目标文件中添加待处理数据和关键字。进一步地，基于目标数据对目标文件中存储的待处理数据进行修改包括：删除目标文件中存储的待处理数据和关键字，并在目标文件中添加目标数据和关键字。进一步地，在目标文件中添加数据之后，生成目标文件的新的索引信息，并将新的索引信息存储至索引文件。进一步地，在目标文件中添加待处理数据和关键字包括：将待处理数据和关键字组合成目标字符串，并在目标文件中添加目标字符串；在目标文件中添加目标数据和关键字包括：将目标数据和关键字组合成目标字符串，并在目标文件中添加目标字符串；删除目标文件中存储的待处理数据和关键字包括：删除目标文件中存储的原始字符串，其中，原始字符串由待处理数据和关键字组成。进一步地，在目标文件的末尾添加目标字符串。进一步地，在操作类型为添加类型、修改类型或删除类型的情况下，如果检索结果为未检索到关键字对应的目标索引信息，则输出提示信息，其中，提示信息用于表征数据库中不存在待处理数据。进一步地，基于检索结果和操作请求，对数据库中存储的目标文件进行处理包括：基于操作请求的操作类型，调用数据库的目标操作方法；基于检索结果和目标操作方法，对目标文件进行处理。进一步地，在接收到操作请求之后，该方法还包括：基于关键字在内存中进行检索，得到第二检索结果；基于第二检索结果和操作请求，对内存进行处理。进一步地，在操作请求的操作类型为查询类型的情况下，基于第二检索结果和操作请求，对内存进行处理包括：在第二检索结果为检索到关键字的情况下，输出内存中存储的待处理数据；在第二检索结果为未检索到关键字的情况下，基于关键字在索引文件中进行检索，得到第一检索结果，如果第一检索为检索到关键字对应的目标索引信息，则将待处理数据和关键字存储至内存，并输出待处理数据。进一步地，目标文件中还存储有待处理数据的过期时间，其中，在将待处理数据和关键字存储至内存之前，该方法还包括：基于过期时间判断待处理数据是否超期；如果判断出待处理数据未超期，则将待处理数据和关键字存储至内存；如果判断出待处理数据超期，则输出提示信息。进一步地，过期时间由操作请求中携带的有效时间和接收到操作请求的时间确定。进一步地，在操作请求的操作类型为添加类型、修改类型或删除类型的情况下，在对内存处理完成之后，基于关键字在索引文件中进行检索，得到第一检索结果，并基于第一检索结果和操作请求，对目标文件进行处理。进一步地，将操作请求存储至文件操作队列的尾部，并获取文件操作队列的头部存储的目标操作请求，并基于第一检索结果和目标操作请求，对目标文件进行处理。进一步地，按照预设周期获取数据库中存储的数据的过期时间，并在基于过期时间确定数据超期之后，删除数据；或在操作请求的操作类型为查询类型的情况下，获取待处理数据的过期时间，并在基于过期时间确定待处理数据超期之后，删除目标文件和/或内存中存储的待处理数据。根据本专利技术实施例的另一方面，还提供了一种数据处理装置，包括：接收模块，用于接收对数据库中存储的数据进行处理的操作请求，其中，操作请求至少包括：待处理数据对应的关键字；第一检索模块，用于基于关键字在索引文件中进行检索，得到第一检索结果，其中，索引文件包括：数据库中存储的文件对应的索引信息，以及索引信息对应的关键字；第一处理模块，用于基于第一检索结果和操作请求，对数据库中存储的目标文件进行处理，其中，目标文件用于存储待处理数据。进一步地，第一处理模块包括：调用单元，用于基于操作请求的操作类型，调用数据库的目标操作方法；处理单元，用于基于检索结果和目标操作方法，对目标文件进行处理。进一步地，该装置还包括：第二检索模块，用于基于关键字在内存中进行检索，得到第二检索结果；第二处理模块，用于基于第二检索结果和操作请求，对内存进行处理。进一步地，该装置还包括：删除模块，用于按照预设周期获取数据库中存储的数据的过期时间，并在基于过期时间确定数据超期之后，删除数据；或在操作请求的操作类型为查询类型的情况下，获取待处理数据的过期时间，并在基于过期时间确定待处理数据超期之后，删除目标文件和/或内存中存储的待处理数据。根据本专利技术实施例的另一方面，还提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时控本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，包括：/n接收对数据库中存储的数据进行处理的操作请求，其中，所述操作请求至少包括：待处理数据对应的关键字；/n基于所述关键字在索引文件中进行检索，得到第一检索结果，其中，所述索引文件包括：所述数据库中存储的文件对应的索引信息，以及所述索引信息对应的关键字；/n基于所述第一检索结果和所述操作请求，对所述数据库中存储的目标文件进行处理，其中，所述目标文件用于存储所述待处理数据。/n

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：
接收对数据库中存储的数据进行处理的操作请求，其中，所述操作请求至少包括：待处理数据对应的关键字；
基于所述关键字在索引文件中进行检索，得到第一检索结果，其中，所述索引文件包括：所述数据库中存储的文件对应的索引信息，以及所述索引信息对应的关键字；
基于所述第一检索结果和所述操作请求，对所述数据库中存储的目标文件进行处理，其中，所述目标文件用于存储所述待处理数据。


2.根据权利要求1所述的方法，其特征在于，所述操作请求还包括：操作类型，其中，基于所述第一检索结果和所述操作请求，对所述数据库中存储的目标文件进行处理包括：
在所述操作类型为查询类型，且所述第一检索结果为检索到所述关键字对应的目标索引信息的情况下，输出所述目标文件中存储的所述待处理数据，其中，所述目标索引信息与所述目标文件相对应；
在所述操作类型为添加类型的情况下，在所述目标文件中添加所述待处理数据和所述关键字，其中，所述操作请求还包括所述待处理数据；
在所述操作类型为修改类型，且所述第一检索结果为检索到所述关键字对应的目标索引信息的情况下，基于目标数据对所述目标文件中存储的所述待处理数据进行修改，其中，所述操作请求还包括所述目标数据；
在所述操作类型为删除类型，且所述第一检索结果为检索到所述关键字对应的目标索引信息的情况下，删除所述目标文件中存储的所述待处理数据和所述关键字。


3.根据权利要求2所述的方法，其特征在于，
在所述第一检索结果为检索到所述关键字对应的目标索引信息的情况下，删除所述目标文件中存储的原始数据和所述关键字，并在所述目标文件中添加所述待处理数据和所述关键字；
在所述第一检索结果为未检索到所述关键字对应的目标索引信息的情况下，在所述目标文件中添加所述待处理数据和所述关键字。


4.根据权利要求2所述的方法，其特征在于，基于目标数据对所述目标文件中存储的所述待处理数据进行修改包括：
删除所述目标文件中存储的所述待处理数据和所述关键字，并在所述目标文件中添加目标数据和所述关键字。


5.根据权利要求2所述的方法，其特征在于，在所述目标文件中添加数据之后，生成所述目标文件的新的索引信息，并将所述新的索引信息存储至所述索引文件。


6.根据权利要求2所述的方法，其特征在于，
在所述目标文件中添加所述待处理数据和所述关键字包括：将所述待处理数据和所述关键字组合成目标字符串，并在所述目标文件中添加所述目标字符串；
在所述目标文件中添加目标数据和所述关键字包括：将所述目标数据和所述关键字组合成目标字符串，并在所述目标文件中添加所述目标字符串；
删除所述目标文件中存储的所述待处理数据和所述关键字包括：删除所述目标文件中存储的原始字符串，其中，所述原始字符串由所述待处理数据和所述关键字组成。


7.根据权利要求6所述的方法，其特征在于，在所述目标文件的末尾添加所述目标字符串。


8.根据权利要求2所述的方法，其特征在于，在所述操作类型为所述添加类型、所述修改类型或所述删除类型的情况下，如果所述检索结果为未检索到所述关键字对应的目标索引信息，则输出提示信息，其中，所述提示信息用于表征所述数据库中不存在所述待处理数据。


9.根据权利要求1所述的方法，其特征在于，基于检索结果和所述操作请求，对所述数据库中存储的目标文件进行处理包括：
基于所述操作请求的操作类型，调用所述数据库的目标操作方法；
基于所述检索结果和所述目标操作方法，对所述目标文件进行处理。


10.根据权利要求1所述的方法，其特征在于，在接收到所述操作请求之后，所述方法还包括：
基于所述关键字在内存中进行检索，得到第二检索结果；
基于所述第二检索结果和所述操作请求，对所述内存进行处理。


11.根据权利要求10所述的方法，其特征在于，在所述操作请求的操作类型为查询类型的情况下，基...

【专利技术属性】
技术研发人员：杨丰玮，宋德超，王沅召，张家琪，赵慧子，
申请(专利权)人：珠海格力电器股份有限公司，珠海联云科技有限公司，
类型：发明
国别省市：广东;44