【技术实现步骤摘要】
一种股票交易数据处理方法、装置及计算机可读存储介质
[0001]本专利技术涉及数据处理
,具体涉及一种股票交易数据处理方法、装置及计算机可读存储介质。
技术介绍
[0002]在股票交易中,用户需要实时掌握各种数据,传统的方法是直接把数据进行统计整理,然后传输给手机,电脑等设备进行图像化显示。
[0003]传统的方法在进行数据整理和传输时,往往在进行数据请求时,响应时间过长;鉴于此,业内一直希望能够提供一种解决方案,能够对股票交易数据进行有效的处理,进一步加快数据请求的响应速度,从而能够即时响应用户的查询请求,提高查询效率。
技术实现思路
[0004]本专利技术提供一种股票交易数据处理方法、装置及计算机可读存储介质,以解决现有技术中所存在的一个或多个技术问题,至少提供一种有益的选择或创造条件。
[0005]为了实现上述目的,本专利技术提供以下技术方案:
[0006]一种股票交易数据处理方法,所述方法包括以下步骤:
[0007]步骤S100、从第三方数据库中获取有价证券对应的
【技术保护点】
【技术特征摘要】
1.一种股票交易数据处理方法,其特征在于,所述方法包括以下步骤:步骤S100、从第三方数据库中获取有价证券对应的原始交易数据;步骤S200、基于所述原始交易数据生成基础数据和派生数据,将所述基础数据和派生数据对应存储到自有数据库中的各个数据库;步骤S300、当接收到客户端发送的查询请求时,根据所述查询请求确定用户选择的有价证券以及想要查询的基础数据和预测类别;步骤S400、从自有数据库中对应的数据库分别获取基础数据和派生数据,将所述派生数据输入预先生成的函数模型,得到与所述预测类别对应的预测数据;步骤S500、将所述有价证券的基础数据和与所述预测类别对应的预测数据发送给客户端进行显示。2.根据权利要求1所述的一种股票交易数据处理方法,其特征在于,所述步骤S200包括:步骤S201、从各个交易所的第三方数据库中获取有价证券的原始交易数据;其中,所述原始交易数据包括实时数据、备份数据和离线历史数据;步骤S202、确定所述实时数据对应的数据类别,将所述数据类别对应的标签转换为指定标签,将转换为指定标签的原始交易数据作为该有价证券的第一交易数据;步骤S203、将不同有价证券的第一交易数据按交易时间顺序进行排序,形成第一数据队列;步骤S204、确定所述第一数据队列中各个原始交易数据的交易类别,按所述交易类别将所述第一数据队列进行分类,得到多个第二数据队列;步骤S205、确定每个第二数据队列的交易类别对应的数据类型;其中,所述数据类型包括秒级数据、分时数据、K线数据和备份数据;步骤S206、将数据类型为秒级数据的第二数据队列作为第一基础数据存储到第一HBASE数据库;将数据类型为分时数据的第二数据队列作为第二基础数据存储到Druid数据库;将数据类型为K线数据的第二数据队列存储到MySQL数据库;将数据类型为备份数据的第二数据队列存储到HDFS数据库,将离线历史数据存储到HIVE数据仓库中;步骤S207、对所述HIVE数据仓库中的离线历史数据进行数据清洗,得到清洗后的离线历史数据;从清洗后的离线历史数据中提取得到K线数据,将离线历史数据中提取得到的K线数据发到MySQL数据库;将所述离线历史数据中提取得到的K线数据和MySQL数据库中数据类型为K线数据按时间轴顺序排列后作为第三基础数据存储在MySQL数据库中;步骤S208、对所述HDFS数据库中的备份数据进行数据清洗,得到清洗后的备份数据,将清洗后的备份数据作为第四数据队列存储在所述HDFS数据库中;步骤S209、将第四数据队列发到HIVE数据仓库,将HIVE数据仓库中清洗后的离线历史数据和第四数据队列加载到Kylin引擎,以通过Kylin引擎对清洗后的离线历史数据和第四数据队列进行多维索引和数据聚合,得到预处理数据;步骤S210、采用预先设置...
【专利技术属性】
技术研发人员:陈辉,李志伟,
申请(专利权)人:佛山市广润科技信息有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。