数据处理的方法、装置、系统及存储介质制造方法及图纸

本申请公开了一种数据处理的方法、装置、系统及存储介质，应用于应用程序领域，该方法包括：获取最近时间段内终端发送的业务数据；从业务数据中提取资源转移数据；按照预设格式对资源转移数据进行自动存储，得到格式处理后的资源转移数据；基于设置的数据处理要素，调用预设算法对格式处理后的资源转移数据进行分析处理，得到数据处理结果。上述最近时间段是分钟级别的时间段，该方法通过对分钟级别时间段内的业务中的资源转移数据进行格式处理，并对格式处理后的资源转移数据进行分析处理，能够获得接近实时的数据处理结果；上述接近实时的数据处理结果可以即时的反馈资源流动情况，从而达到实时监控资源流动情况的目的。

Data processing methods, devices, systems and storage media

【技术实现步骤摘要】
数据处理的方法、装置、系统及存储介质
本申请涉及应用程序领域，特别涉及一种数据处理的方法、装置、系统及存储介质。
技术介绍
在平台上，每天会产生成千上万的业务流水，业务流水的产生伴随着资源的转移，而资源转移的过程涉及多方平台的参与。比如，第三方平台用于为用户提供资源转移通道，平台为用户提供资源转移服务需要借助于第三方平台提供的资源转移通道；平台还为用户提供资源暂存服务，并进行定期的资源清算及转移。因此，用户、平台、以及第三方平台之间需要进行定期的资源清算及转移。一般情况下，平台与用户、第三方平台之间每天进行一次资源清算及转移。
技术实现思路
本申请实施例提供了一种数据处理的方法、装置、系统及存储介质，可以解决在每天一次分析处理的情形下，若当天的资源数据出现了问题，第二天才能够发现，会导致解决问题的最佳时机被错过的问题。所述技术方案如下：根据本申请的一个方面，提供了一种数据处理系统，该系统包括数据存储服务器和数据处理服务器；数据存储服务器，用于通过消息中间件获取最近时间段内终端发送的业务数据，最近时间段本文档来自技高网...

【技术保护点】
1.一种数据处理系统，其特征在于，所述系统包括数据存储服务器和数据处理服务器；/n所述数据存储服务器，用于通过消息中间件获取最近时间段内终端发送的业务数据，所述最近时间段是指位于当前时刻之前且长度为预设时长的分钟级别时间段；从所述业务数据中提取资源转移数据；按照预设格式对所述资源转移数据进行自动存储，得到格式处理后的资源转移数据；/n所述数据处理服务器，用于从所述数据存储服务器中获取所述格式处理后的资源转移数据；基于设置的数据处理要素，调用预设算法对所述格式处理后的资源转移数据进行分析处理，得到数据处理结果。/n

【技术特征摘要】
1.一种数据处理系统，其特征在于，所述系统包括数据存储服务器和数据处理服务器；
所述数据存储服务器，用于通过消息中间件获取最近时间段内终端发送的业务数据，所述最近时间段是指位于当前时刻之前且长度为预设时长的分钟级别时间段；从所述业务数据中提取资源转移数据；按照预设格式对所述资源转移数据进行自动存储，得到格式处理后的资源转移数据；
所述数据处理服务器，用于从所述数据存储服务器中获取所述格式处理后的资源转移数据；基于设置的数据处理要素，调用预设算法对所述格式处理后的资源转移数据进行分析处理，得到数据处理结果。


2.根据权利要求1所述的系统，其特征在于，所述数据处理服务器中设置有至少两级数据处理要素；
所述数据处理服务器，用于按照数据处理场次、数据处理时间、以及所述至少两级数据处理要素构建数据处理任务；执行所述数据处理任务，通过所述预设算法对所述格式处理后的资源转移数据进行分层级的分析处理，得到所述数据处理结果；
其中，所述数据处理结果包括所述至少两级数据处理要素中每一级数据处理要素对应的数据处理结果。


3.根据权利要求2所述的系统，其特征在于，所述至少两级数据处理要素包括一级数据处理要素和二级数据处理要素，则所述数据处理任务包括一级子务和二级子任务；所述一级处理要素包括q类要素，所述二级处理要素包括p类要素，q大于或者等于p，q、p为正整数；
所述数据处理服务器，用于按照所述数据处理场次、所述数据处理时间构建在所述q类要素的q个维度上的所述一级子任务，以及在所述p类要素的p个维度上的所述二级子任务。


4.根据权利要求1至3任一所述的系统，其特征在于，
所述数据处理服务器，还用于根据预设监控规则对所述数据处理结果进行实时监控；响应于所述数据处理结果不符合所述预设监控规则，发出警报。


5.根据权利要求4所述的系统，其特征在于，
所述数据处理结果包括业务成本，所述预设监控规则包括所述业务成本小于成本阈值；
或者，
所述数据处理结果包括业务收入，所述预设监控规则包括所述业务收入大于收入阈值；
或者，
所述数据处理结果包括业务支出，所述预设监控规则包括所述业务支出小于支出阈值；
或者，
所述数据处理结果包括业务净金额，所述预设监控规则包括所述业务净金额大于净金额阈值。


6.根据权利要求1至3任一所述的系统，其特征在于，
所述数据存储服务器，用于校验所述资源转移数据中的每一项资源要素；响应于所述资源要素均准确无误，将所述资源要素按照所述预设格式自动存储，得到所述格式处理后的资源转移数据。


7.一种数据处理的方法，其特征在于，应用于如权利要求1所述的数据处理系统中，所述方法包括：
通过消息中间件获取最近时间段内终端发送的业务数据，所述最近时间段是指位于当前时刻之前且长度为预设时长的分钟级别时间段；
从所述业务数据中提取资源转移数据；
按照预设格式对所述资源转移数据进行自动存储，得到格式处理后的资源转移数据；
基于设置的数据处理要素，调用预设算法对所述格式处理后的资源转移数据进行分析处理，得到数据处理结果。


8.根据权利要求7所述的方法，其特征在于，所述计算机设备中设置有至少两级数据处理要素；
所述基于设置的数据处理...

【专利技术属性】
技术研发人员：赵雨露，陈海龙，樊士峰，蒋朋，
申请(专利权)人：北京三快在线科技有限公司，
类型：发明
国别省市：北京;11