数据存储方法及装置制造方法及图纸

技术编号:37451986 阅读:11 留言:0更新日期:2023-05-06 09:24
本申请提供数据存储方法及装置,其中所述数据存储方法包括:获取待存储的目标数据;在所述目标数据中提取预设字段对应的字段值,以及调用所述目标数据对应的SQL自定义映射函数;将所述字段值加载至所述SQL自定义映射函数,通过执行加载所述字段值的SQL自定义映射函数在至少一条预设规则中确定所述字段值匹配的目标规则,并确定所述目标规则对应的目标数据表信息;将所述目标数据存储至所述目标数据表信息对应的目标数据表。实现了通过调用并执行SQL自定义函数目标数据中字段值对应的目标数据表信息基础上,确定目标数据对应的目标数据表并存储。数据表并存储。数据表并存储。

【技术实现步骤摘要】
数据存储方法及装置


[0001]本申请涉及数据处理
,特别涉及数据存储方法。本申请同时涉及数据存储装置,一种计算设备,以及一种计算机可读存储介质。

技术介绍

[0002]随着互联网的发展,企业可能涉及到多个业务场景的业务处理。而不同业务场景中可能包含相同类型的数据,比如埋点数据、订单数据等。将这些数据从数据源端存储到数据库时,一般会进行统一的采集,并将采集到的数据落地到数据库的数据表中供用户使用。用户在使用时,都统一消费统一的这张包含各种业务场景数据的数据表。每次查询时,会查询一次非本业务场景的数据,导致出现查询资源的浪费并影响业务的时效性。因此,亟需一种解决上述问题的技术方案。

技术实现思路

[0003]有鉴于此,本申请实施例提供了数据存储方法。本申请同时涉及数据存储装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中将数据存储于一张表时导致的存在的查询资源浪费并业务时效性低的问题。
[0004]根据本申请实施例的第一方面,提供了一种数据存储方法,包括:
[0005]获取待存储的目标数据;
[0006]在所述目标数据中提取预设字段对应的字段值,以及调用所述目标数据对应的SQL自定义映射函数;
[0007]将所述字段值加载至所述SQL自定义映射函数,通过执行加载所述字段值的SQL自定义映射函数在至少一条预设规则中确定所述字段值匹配的目标规则,并确定所述目标规则对应的目标数据表信息;
[0008]将所述目标数据存储至所述目标数据表信息对应的目标数据表。
[0009]根据本申请实施例的第二方面,提供了一种数据存储装置,包括:
[0010]获取模块,被配置为获取待存储的目标数据;
[0011]调用模块,被配置为在所述目标数据中提取预设字段对应的字段值,以及调用所述目标数据对应的SQL自定义映射函数;
[0012]执行模块,被配置为将所述字段值加载至所述SQL自定义映射函数,通过执行加载所述字段值的SQL自定义映射函数在至少一条预设规则中确定所述字段值匹配的目标规则,并确定所述目标规则对应的目标数据表信息;
[0013]存储模块,被配置为将所述目标数据存储至所述目标数据表信息对应的目标数据表。
[0014]根据本申请实施例的第三方面,提供了一种计算设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令,所述处理器执行所述计算机指令时实现所述数据存储方法的步骤。
[0015]根据本申请实施例的第四方面,提供了一种计算机可读存储介质,其存储有计算机指令,该计算机指令被处理器执行时实现所述数据存储方法的步骤。
[0016]本申请提供的数据存储方法,为了实现根据目标数据中包含的字段值,对目标数据进行分流存储,通过获取待存储的目标数据,在所述目标数据中提取预设字段对应的字段值,以及调用目标数据对应的SQL自定义映射函数,以便采用SQL自定义映射函数实现字段值和数据表信息之间的映射,并且由于SQL语言的简易性以及通用性,可以降低对目标数据存储的使用门槛。并将字段值作为参数加载至SQL自定义映射函数,通过执行加载字段值的SQL自定义映射函数在至少一条预设规则中确定字段值匹配的目标规则,并确定目标规则对应的目标数据表信息,实现了通过执行SQL自定义映射函数将字段值与预设规则进行匹配,进而根据匹配结果选择出字段值所映射的数据表信息,再将目标数据存储至目标数据表信息对应的目标数据表,实现了确定目标数据对应的目标数据表并存储。
附图说明
[0017]图1是本申请一实施例提供的一种数据存储方法的示意图;
[0018]图2是本申请一实施例提供的一种数据存储方法的流程图;
[0019]图3是本申请一实施例提供的一种数据存储方法的示意流程图;
[0020]图4是本申请一实施例提供的一种应用于数据仓库场景的数据存储方法的处理流程图;
[0021]图5是本申请一实施例提供的一种数据存储装置的结构示意图;
[0022]图6是本申请一实施例提供的一种计算设备的结构框图。
具体实施方式
[0023]在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似推广,因此本申请不受下面公开的具体实施的限制。
[0024]在本申请一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请一个或多个实施例。在本申请一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本申请一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
[0025]应当理解,尽管在本申请一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0026]首先,对本申请一个或多个实施例涉及的名词术语进行解释。
[0027]数据仓库(DataWarehouse):数据仓库是信息的中央存储库。通常,数据定期从事务系统、关系数据库和其他来源通过提取、转换、加载(ETL)的数据清洗工序引入到数据仓库中,并按照主题域、分层结构将数据归档有序存储在数据模型中。业务分析师、数据工程
师、数据科学家和决策者通过商业智能(BI)工具、SQL客户端和其他分析应用程序访问数据仓库中的数据模型进行查询、分析等工作。
[0028]表:数据库中用来存储数据的对象,是有结构的数据的集合。定义为列的集合。与电子表格相似,数据在表中式按行和列的格式组织排列的。表中的每一列都设计为存储某种类型的信息(例如日期、名称、美元金额或数字)。
[0029]字段:亦称作为列。包含某一专题的信息。就像“通讯录”数据库中,“姓名”、“联系电话”这些都是表中所有行共有的属性,所以把这些列称为“姓名”字段和“联系电话”字段。
[0030]主键:指的是一个列或多列的组合,其值能唯一地标识表中的每一行,通过它可强制表的实体完整性。主键主要是用与其他表的外键关联,以及文本记录的修改与删除。
[0031]SQL(Structured Query Language,结构化查询语言):是一种特殊目的的编程语言,是一种数据库查询和程序设计语言,用于存取数据以及查询、更新和管理关系数据库系统。包括DQL、DML、TCL、DCL、CCL等六部分。
[0032]数据查询语言(Data Query Language,DQL):其语句,也称为“数据检索语句”,用本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据存储方法,其特征在于,包括:获取待存储的目标数据;在所述目标数据中提取预设字段对应的字段值,以及调用所述目标数据对应的SQL自定义映射函数;将所述字段值加载至所述SQL自定义映射函数,通过执行加载所述字段值的SQL自定义映射函数在至少一条预设规则中确定所述字段值匹配的目标规则,并确定所述目标规则对应的目标数据表信息;将所述目标数据存储至所述目标数据表信息对应的目标数据表。2.根据权利要求1所述的数据存储方法,其特征在于,所述通过执行加载所述字段值的SQL自定义映射函数在至少一条预设规则中确定所述字段值满足的目标规则,包括:加载所述字段值的SQL自定义映射函数处于运行状态用于读取所述字段值对应的至少一条预设规则;将所述字段值与至少一条预设规则进行匹配,根据匹配结果在至少一条预设规则中选择与所述字段值匹配的目标规则。3.根据权利要求2所述的数据存储方法,其特征在于,在字段值的数量为至少两个的情况下,所述将所述字段值与至少一条预设规则进行匹配,根据匹配结果在至少一条预设规则中选择与所述字段值匹配的目标规则,包括:根据至少一条预设规则的排列顺序,在至少一条预设规则中确定第i预设规则,其中,i为正整数;将各个字段值分别与所述第i预设规则进行匹配;在存在至少一个匹配结果为匹配的情况下,将所述第i预设规则确定为目标规则;在匹配结果均为不匹配的情况下,i自增1,并返回执行所述根据至少一条预设规则的排列顺序,在至少一条预设规则中确定第i预设规则。4.根据权利要求2所述的数据存储方法,其特征在于,在字段值的数量为至少两个的情况下,所述将所述字段值与至少一条预设规则进行匹配,根据匹配结果在至少一条预设规则中选择与所述字段值匹配的目标规则,包括:将至少两个字段值进行拼接,获得拼接字段值;按照至少一条预设规则的排列顺序,将所述拼接字段值依次与至少一条预设规则进行匹配,直至获得匹配结果为匹配的预设规则;将所述匹配结果为匹配的预设规则确定为所述拼接字段值对应的目标规则。5.根据权利要求2所述的数据存储方法,其特征在于,所述读取所述字段值对应的至少一条预设规则,包括:判断缓存中是否存在至少一条预设规则;若是,从所述缓存中读取至少一条预设规则;若否,确定所述字段值对应的规则表,并从所述规则表中读取至少一条预设规则;相应的,在判断缓存中是否存在至少一条预设规则的判断结果为否的情况下,所述从所述规则表中读取至少一条预设...

【专利技术属性】
技术研发人员:董子平吴剑雄张靖
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1