实时数据入库方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种实时数据入库方法、装置、设备及存储介质，该方法通过定时发送资源构建请求至目标平台，目标平台在接收到资源构建请求时进行资源构建；通过预先与目标平台建立异步长连接，获取目标平台推送的数据构建事件；在接收到数据构建事件为资源构建完成时，获取目标平台构建的目标资源数据；将目标资源数据存储至托管数据库，以实现目标资源数据的入库。相较于现有技术大量人力干涉以及耗时长的缺点，由于本发明专利技术通过定时发送资源构建请求至目标平台，基于预先与所述目标平台建立异步长连接，及时进行数据捕获，实现数据入库，缩短整体业务流程的耗时，实现全流程自动化数据获取。取。取。

【技术实现步骤摘要】
实时数据入库方法、装置、设备及存储介质


[0001]本专利技术涉及数据入库
，尤其涉及一种实时数据入库方法、装置、设备及存储介质。

技术介绍

[0002]中国证券市场发展十分迅速，成为社会主义市场经济重要组成部分，投资过程中，境外证券实时行情信息十分重要，Bloomberg Data License Platform是银行托管系统获取境外证券信息的重要渠道之一，此平台提供基于SFTP传输协议的交互软件，是目前获取证券信息的主要方式。
[0003]目前，相关业务人员在使用此方式时，需要人力填充平台提供的请求模板，以及填写需要查询的字段信息等必要信息，组成完整的请求文件，通过交互软件将请求发送至境外平台，等待平台完成目标数据的构建，最后将构建完成的响应文件上传至托管系统中，完成信息入库。但随着金融市场以及托管规模的不断扩大，每日庞大的交易数据和特定化的信息需求，暴露传统传统方式需要大量人力干涉以及耗时长的缺点，因此，如何解决传统传统方式需要大量人力干涉以及耗时长的缺点，成为一个亟待解决的问题。
[0004]上述内容仅用于辅助理本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种实时数据入库方法，其特征在于，所述方法包括：定时发送资源构建请求至目标平台，所述目标平台在接收到所述资源构建请求时进行资源构建；通过预先与所述目标平台建立异步长连接，获取所述目标平台推送的数据构建事件；在接收到所述数据构建事件为资源构建完成时，获取所述目标平台构建的目标资源数据；将所述目标资源数据存储至托管数据库，以实现所述目标资源数据的入库。2.如权利要求1所述实时数据入库方法，其特征在于，所述定时发送资源构建请求至目标平台的步骤之前，还包括：确定待请求产品数据；根据所述待请求产品数据是否已存放在托管数据库，确定重复产品数据；根据所述待请求产品数据对应的产品是否属于持仓状态，确定无效产品数据；从待请求产品数据中剔除所述重复产品数据和所述无效产品数据，获得优化请求产品数据，并根据所述优化请求产品数据生成资源构建请求。3.如权利要求2所述实时数据入库方法，其特征在于，所述根据所述优化请求产品数据生成资源构建请求的步骤之后，包括：将所述资源构建请求保存至OSS，并对所述资源构建请求进行编号，获得请求标识；相应地，所述定时发送资源构建请求至目标平台，所述目标平台在接收到所述资源构建请求时进行资源构建的步骤包括：定时发送资源构建请求至目标平台；在请求发送失败时，通过所述请求标识将存储于所述OSS中的资源构建请求发送至目标平台，以使所述目标平台开始资源构建。4.如权利要求1所述实时数据入库方法，其特征在于，所述在接收到所述数据构建事件为资源构建完成时，获取所述目标平台构建的目标资源数据的步骤，包括：在接收到所述数据构建事件为资源构建完成时，通过SFTP方式向所述目标平台发送目标资源数据下载请求；接收所述目标平台基于所述目标资源数据下载请求返回的目标资源数据。5.如权利要求4所述实时数据入库方法，其特征在于，所述接收所述目标平台基于所述目标资源数据下载请求返回的目标资源数据的步骤之后，包括：将所述目标资源数据传输至OSS进行保存，并对所述目标资源数据进行编号，获得资源...

【专利技术属性】
技术研发人员：李镇耀，潘立杰，黄晨，王金名，周锋，
申请(专利权)人：招商银行股份有限公司，
类型：发明
国别省市：