一种贸易数据分析方法及装置制造方法及图纸

本发明专利技术公开了一种贸易数据分析方法及装置。所述贸易数据分析方法，包括：分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集；对所述结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集；将所述脚本化贸易数据集输入预先建立的贸易趋势预测模型，得到贸易趋势预测结果。本发明专利技术能够对不同类型的贸易数据进行统一整理分析，提高贸易数据的分析效率。提高贸易数据的分析效率。提高贸易数据的分析效率。

【技术实现步骤摘要】
一种贸易数据分析方法及装置


[0001]本专利技术涉及数据处理
，尤其涉及一种贸易数据分析方法及装置。

技术介绍

[0002]近年来，我国的国际贸易次数不断激增，整理、分析各国之间的贸易数据有助于更好地推动我国的贸易发展。但是各国政策不同，提供的贸易数据也均有不同，比如网络上的新闻公布，纳斯达克交易信息，股票行情等各种贸易数据，这些贸易数据看起来都毫无关系，且数据格式不一致。由于目前国内缺乏对不同类型的贸易数据进行统一整理分析的工具，主要采用人工统计整理方式来分析贸易数据，导致分析员很难从大量不同类型的贸易数据中整理出有用信息进行分析，极大地限制了贸易数据的分析效率。

技术实现思路

[0003]为了克服现有技术的缺陷，本专利技术提供一种贸易数据分析方法及装置，能够对不同类型的贸易数据进行统一整理分析，提高贸易数据的分析效率。
[0004]为了解决上述技术问题，第一方面，本专利技术一实施例提供一种贸易数据分析方法，包括：
[0005]分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集；
[0006]对所述结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集；
[0007]将所述脚本化贸易数据集输入预先建立的贸易趋势预测模型，得到贸易趋势预测结果。
[0008]进一步地，在所述分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集之前，还包括：
[0009]获取所述原始贸易数据集，对于所述原始贸易数据集中的每一原始贸易数据，将所述原始贸易数据存储于与所述原始贸易数据的数据类型对应的子数据库，建立分布式数据库。
[0010]进一步地，在所述分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集之后，还包括：
[0011]将所述结构化贸易数据集存储于关系型数据库。
[0012]进一步地，所述分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集，具体为：
[0013]根据所述原始贸易数据的数据类型，确定所述原始贸易数据对应的目标字段和标识信息；
[0014]根据所述原始贸易数据对应的目标字段，提取所述原始贸易数据的目标信息；
[0015]根据所述原始贸易数据对应的标识信息，生成所述原始贸易数据的数据标识；
[0016]将所述原始贸易数据的目标信息和数据标识作为一组结构化贸易数据。
[0017]进一步地，所述对所述结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集，具体为：
[0018]根据所述结构化贸易数据对应的原始贸易数据的数据类型，确定所述结构化贸易数据对应的数据模型；其中，所述结构化贸易数据对应的数据模型为所述结构化贸易数据与所述结构化贸易数据对应的原始贸易数据中的非目标信息的重组形式；
[0019]基于所述结构化贸易数据对应的数据模型，对所述结构化贸易数据和所述结构化贸易数据对应的原始贸易数据中的非目标信息进行重组，得到脚本化贸易数据。
[0020]进一步地，在所述建立分布式数据库之后，还包括：
[0021]响应用户终端发起的数据查询请求，采用Elasticsearch技术对所述分布式数据库中的原始贸易数据进行检索。
[0022]进一步地，所述贸易趋势预测模型为机器学习模型。
[0023]进一步地，所述分布式数据库包括Hbase数据库。
[0024]进一步地，所述关系型数据库包括Oracle数据库。
[0025]第二方面，本专利技术一实施例提供一种贸易数据分析装置，包括：
[0026]结构化处理模块，用于分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集；
[0027]脚本化处理模块，用于对所述结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集；
[0028]分析预测模块，用于将所述脚本化贸易数据集输入预先建立的贸易趋势预测模型，得到贸易趋势预测结果。
[0029]本专利技术的实施例，具有如下有益效果：
[0030]通过分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对原始贸易数据进行结构化处理，得到结构化贸易数据集；对结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集；将脚本化贸易数据集输入预先建立的贸易趋势预测模型，得到贸易趋势预测结果，完成贸易数据的整理、分析，提供贸易趋势预测结果。相比于现有技术，本专利技术的实施例通过针对不同类型的原始贸易数据进行不同的结构化处理，将原始贸易数据转化为结构化贸易数据，进而对所有结构化贸易数据进行批量的脚本化处理，利用两轮处理将原始贸易数据转化为以通用数据格式存储的脚本化贸易数据，且基于预先建立的贸易趋势预测模型进行贸易趋势预测，无需采用人工统计整理方式来分析贸易数据，从而实现对不同类型的贸易数据进行统一整理分析，提高贸易数据的分析效率。
附图说明
[0031]图1为本专利技术第一实施例中的一种贸易数据分析方法的流程示意图；
[0032]图2为本专利技术第一实施例中示例的分布式存储的数据流图；
[0033]图3为本专利技术第一实施例中示例的脚本化处理的数据流图；
[0034]图4为本专利技术第一实施例中示例的机器学习的数据流图；
[0035]图5为本专利技术第二实施例中的一种贸易数据分析装置的结构示意图。
具体实施方式
[0036]下面将结合本专利技术中的附图，对本专利技术中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0037]需要说明的是，文中的步骤编号，仅为了方便具体实施例的解释，不作为限定步骤执行先后顺序的作用。本实施例提供的方法可以由相关的终端设备执行，且下文均以处理器作为执行主体为例进行说明。
[0038]如图1所示，第一实施例提供一种贸易数据分析方法，包括步骤S1～S3：
[0039]S1、分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对原始贸易数据进行结构化处理，得到结构化贸易数据集；
[0040]S2、对结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集；
[0041]S3、将脚本化贸易数据集输入预先建立的贸易趋势预测模型，得到贸易趋势预测结果。
[0042]本实施例通过针对不同类型的原始贸易数据进行不同的结构化处理，将原始贸易数据转化为结构化贸易数据，进而对所有结构化贸易数据进行批量的脚本化处理，利用两轮处理将原始贸易数据转化为本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种贸易数据分析方法，其特征在于，包括：分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集；对所述结构化贸易数据集中的所有结构化贸易数据进行脚本化处理，得到脚本化贸易数据集；将所述脚本化贸易数据集输入预先建立的贸易趋势预测模型，得到贸易趋势预测结果。2.如权利要求1所述的贸易数据分析方法，其特征在于，在所述分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集之前，还包括：获取所述原始贸易数据集，对于所述原始贸易数据集中的每一原始贸易数据，将所述原始贸易数据存储于与所述原始贸易数据的数据类型对应的子数据库，建立分布式数据库。3.如权利要求1所述的贸易数据分析方法，其特征在于，在所述分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集之后，还包括：将所述结构化贸易数据集存储于关系型数据库。4.如权利要求1所述的贸易数据分析方法，其特征在于，所述分别根据原始贸易数据集中的每一原始贸易数据的数据类型，对所述原始贸易数据进行结构化处理，得到结构化贸易数据集，具体为：根据所述原始贸易数据的数据类型，确定所述原始贸易数据对应的目标字段和标识信息；根据所述原始贸易数据对应的目标字段，提取所述原始贸易数据的目标信息；根据所述原始贸易数据对应的标识信息，生成所述原始贸易数据的数据标识；将所述原始贸易数据的目标信息和数据标识作为一组结构化贸易数据。5.如权利要求4所述的贸...

【专利技术属性】
技术研发人员：乌斯曼，
申请(专利权)人：广州市西美信息科技有限公司，
类型：发明
国别省市：