数据获取方法、装置和计算机设备和存储介质制造方法及图纸

本申请涉及一种数据获取方法、装置、计算机设备和存储介质。所述方法包括：获取连接请求，连接请求包括第一存储器的连接信息；根据连接信息确定对应的连接器，并通过连接器与第一存储器建立连接，以将预先存储在第二存储器中的数据转存至第一存储器中，其中，从第一存储器中获取数据的速度比从第二存储器中获取数据的速度快；获取用户对数据的获取请求；根据获取请求，通过第一存储器的预设访问接口，将数据发送给用户。采用本方法能够提高获取数据获取的效率。据获取的效率。据获取的效率。

【技术实现步骤摘要】
数据获取方法、装置和计算机设备和存储介质


[0001]本申请涉及大数据
，特别是涉及一种数据获取方法、装置、计算机设备和存储介质。

技术介绍

[0002]在人工智能(Artificial Intelligence，AI)场景下，一般通过批处理顺序读取分布式数据库中存储的特征数据，来进行模型训练。
[0003]模型的在线服务时，通过随机的方式读取特征数据，以快速返回在线预测的结果。此在线服务的过程对数据源实时性要求较高，需要快速获取特征数据。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种能够提高数据获取效率的数据获取方法、装置、计算机设备和存储介质。
[0005]一方面，提供一种数据获取方法，包括：。
[0006]获取连接请求，所述连接请求包括第一存储器的连接信息；
[0007]根据所述连接信息确定对应的连接器，并通过所述连接器与所述第一存储器建立连接，以将预先存储在第二存储器中的数据转存至所述第一存储器中，其中，从所述第一存储器中获取所述数据的速度比从所述第二存储器中获本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据获取方法，其特征在于，包括：获取连接请求，所述连接请求包括第一存储器的连接信息；根据所述连接信息确定对应的连接器，并通过所述连接器与所述第一存储器建立连接，以将预先存储在第二存储器中的数据转存至所述第一存储器中，其中，从所述第一存储器中获取所述数据的速度比从所述第二存储器中获取所述数据的速度快；获取用户对所述数据的获取请求；根据所述获取请求，通过所述第一存储器的预设访问接口，将所述数据发送给所述用户。2.根据权利要求1所述的数据获取方法，其特征在于，所述根据所述连接信息确定对应的连接器，并通过所述连接器与所述第一存储器建立连接，以将预先存储在第二存储器中的数据转存至所述第一存储器中步骤，包括：获取所述连接信息中所述第一存储器存储数据的数据类型；根据所述数据类型，对所述数据进行结构解析，以将所述数据存储至所述第一存储器中。3.根据权利要求2所述的数据获取方法，其特征在于，所述数据类型包括哈希表，所述根据所述数据类型，对所述数据进行结构解析，以将所述数据存储至所述第一存储器中步骤，包括：根据所述数据中的主键生成所述哈希表的关键字；将所述数据中的每列数据依次存储到所述哈希表的哈希值中。4.根据权利要求3所述的数据获取方法，其特征在于，所述根据所述数据中的主键生成所述哈希表的关键字步骤，包括：获取前缀标识符；拼接所述前缀标识符和所述主键对应的值，得到所述关键字。5.根据权利要求1所述的数据获取方法，其特征在于，所述根据所述连接信息确定对应的连接器，并通过所述连接器与所述第一存储器建立连接，以将预先存储在第二存储器中的数据转存至所述第一存储器中步骤，包括：将所述数据以行为单位传递至所述连接器；通过所述连接器的数据处理函...

【专利技术属性】
技术研发人员：张浩，苏海红，黄政，包恒彬，马建江，王海艳，
申请(专利权)人：深圳依时货拉拉科技有限公司，
类型：发明
国别省市：