本发明专利技术涉及数据采集处理技术领域，提供一种数据采集和标准化方法和系统，包括：通过设置和关联数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息，构建数据模型；通过构建的数据模型构建数据采集表单，为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息；根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象进行采集任务执行，完成业务数据的采集；在完成采集任务后，根据采集的业务数据构建标准化业务数据台账。本发明专利技术数据采集和标准化方法和系统，可以在快速完成数据标准化采集的同时，降低数据采集工作的成本，增强数据采集的质量。
【技术实现步骤摘要】
本专利技术涉及数据采集处理，尤其涉及一种数据采集和标准化方法和系统。
技术介绍
1、数据收集是分析和解决实际问题时非常重要的环节，准确地收集和整理数据可以为后续的数据分析和处理打下坚实的基础。常见的数据收集方法除了线下纸质文件填写外，还有在线问卷调查等方法，其中在线问卷调查因为其成本低、制作速度快、收集速度快等特点而被广泛应用。但在线问卷调查方式也存在以下不足：1.数据收集后无法快速标准化地行成标准的业务格式；2.无法对关联的数据字段进行关联性校验。而要解决上述问题往往需要通过大量的数据治理工作才能实现，费时费力还不能确保最终生成的数据台账的正确性。
2、因此，如何提供一种更加高效和准确的数据采集和标准化处理方法，成为亟待解决的技术问题。
技术实现思路
1、有鉴于此，为了克服现有技术的不足，本专利技术旨在提供一种数据采集和标准化方法和系统。
2、根据本专利技术的第一方面，提供一种数据采集和标准化方法，该方法包括：
3、通过设置和关联数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息，构建数据模型；
4、通过构建的数据模型构建数据采集表单，为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息；
5、根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象进行采集任务执行，完成业务数据的采集；
6、在完成采集任务后，根据采集的业务数据构建标准化业务数据台账。
7、优选地，本专利技术数据采集和标准化方法中，通过设置和关联数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息，构建数据模型，包括：
8、设置并保存数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息；
9、通过将数据模型信息和数据模型字段信息进行关联，将数据模型字段信息和字段展示配置操作信息进行关联，将数据模型字段信息和字段校验规则配置信息进行关联，构建数据模型；
10、采用构建的数据模型对关联后的数据模型信息、数据模型字段信息、字段展示配置操作信息和字段校验规则配置信息进行展示。
11、优选地，本专利技术数据采集和标准化方法中，通过构建的数据模型构建数据采集表单，为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息，包括：
12、根据业务场景需求，从数据模型展示的数据模型字段信息中选择对应的数据模型字段信息构建数据采集表单；
13、为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息，所述采集任务信息包括采集任务名称、采集任务周期、采集任务类型、采集任务执行时间以及采集任务执行对象。
14、优选地，本专利技术数据采集和标准化方法中，根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象进行采集任务执行，完成业务数据的采集，包括：
15、根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象；
16、执行对象根据数据采集表单中选择的数据模型字段信息采集业务数据，获得业务数据采集表单；
17、根据数据模型字段信息匹配关联的字段校验规则配置信息，采用匹配的字段校验规则配置信息对业务数据采集表单中的业务数据进行校验；
18、将通过校验的业务数据采集表单提交至当前执行对象所属的上级执行对象进行审核；
19、当业务数据采集表单通过上级执行对象的审核，上级执行对象将通过审核的业务数据采集表单提交至其所属的上级执行对象进行审核；
20、当业务数据采集表单未通过上级执行对象的审核，当前执行对象对采集任务和业务数据采集表单进行修改，将修改后的业务数据采集表单提交至上级执行对象进行审核；
21、当业务数据采集表单通过当前执行对象的所有上级执行对象的审核，将采集任务判定为完成。
22、优选地，本专利技术数据采集和标准化方法中，在完成采集任务后，根据采集的业务数据构建标准化业务数据台账，包括：在完成采集任务后，将采集的业务数据存储至数据库，根据数据模型中的数据模型字段信息对存储至数据库的业务数据进行分类，通过汇总分类后的业务数据构建标准化业务数据台账。
23、根据本专利技术的第二方面，提供一种数据采集和标准化系统，该系统包括数据采集和标准化服务端，该数据采集和标准化服务端包括：
24、数据模型构建单元，用于通过设置和关联数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息，构建数据模型；
25、采集任务创建和配置单元，用于通过构建的数据模型构建数据采集表单，为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息；
26、采集任务执行单元，用于根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象进行采集任务执行，完成业务数据的采集；
27、业务数据台账构建单元，用于在完成采集任务后，根据采集的业务数据构建标准化业务数据台账。
28、优选地，本专利技术数据采集和标准化系统中的数据模型构建单元具体用于：
29、设置并保存数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息；
30、通过将数据模型信息和数据模型字段信息进行关联，将数据模型字段信息和字段展示配置操作信息进行关联，将数据模型字段信息和字段校验规则配置信息进行关联，构建数据模型；
31、采用构建的数据模型对关联后的数据模型信息、数据模型字段信息、字段展示配置操作信息和字段校验规则配置信息进行展示。
32、优选地，本专利技术数据采集和标准化系统中的采集任务创建和配置单元，具体用于：
33、根据业务场景需求，从数据模型展示的数据模型字段信息中选择对应的数据模型字段信息构建数据采集表单；
34、为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息，所述采集任务信息包括采集任务名称、采集任务周期、采集任务类型、采集任务执行时间以及采集任务执行对象。
35、优选地，本专利技术数据采集和标准化系统中的采集任务执行单元具体用于：
36、根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象；
37、执行对象根据数据采集表单中选择的数据模型字段信息采集业务数据，获得业务数据采集表单；
38、根据数据模型字段信息匹配关联的字段校验规则配置信息，采用匹配的字段校验规则配置信息对业务数据采集表单中的业务数据进行校验；
39、将通过校验的业务数据采集表单提交至当前执行对象所属的上级执行对象进行审核；
40、当业务数据采集表单通过上级执行对象的审核，上级执行对象将通过审核的业务数据采集表单提交至其所属的上级执行对象进行审核；
41、当业务数据采集表单未通过上级执行对本文档来自技高网
...
【技术保护点】
1.一种数据采集和标准化方法，其特征在于，所述方法包括：
2.根据权利要求1所述的数据采集和标准化方法，其特征在于，通过设置和关联数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息，构建数据模型，包括：
3.根据权利要求1所述的数据采集和标准化方法，其特征在于，通过构建的数据模型构建数据采集表单，为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息，包括：
4.根据权利要求1所述的数据采集和标准化方法，其特征在于，根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象进行采集任务执行，完成业务数据的采集，包括：
5.根据权利要求1所述的数据采集和标准化方法，其特征在于，在完成采集任务后，根据采集的业务数据构建标准化业务数据台账，包括：在完成采集任务后，将采集的业务数据存储至数据库，根据数据模型中的数据模型字段信息对存储至数据库的业务数据进行分类，通过汇总分类后的业务数据构建标准化业务数据台账。
6.一种数据采集和标准化系统，其特征在于，所述系统包括数据采集和标准化服务端，所述数据采集和标准化服务端包括：
7.根据权利要求6所述的数据采集和标准化系统，其特征在于，数据模型构建单元具体用于：
8.根据权利要求6所述的数据采集和标准化系统，其特征在于，采集任务创建和配置单元，具体用于：
9.根据权利要求6所述的数据采集和标准化系统，其特征在于，采集任务执行单元具体用于：
10.根据权利要求6所述的数据采集和标准化系统，其特征在于，业务数据台账构建单元，具体用于：
...
【技术特征摘要】
1.一种数据采集和标准化方法，其特征在于，所述方法包括：
2.根据权利要求1所述的数据采集和标准化方法，其特征在于，通过设置和关联数据模型信息、数据模型字段信息、字段展示配置操作信息以及字段校验规则配置信息，构建数据模型，包括：
3.根据权利要求1所述的数据采集和标准化方法，其特征在于，通过构建的数据模型构建数据采集表单，为构建的数据采集表单创建对应的采集任务，为创建的采集任务配置采集任务信息，包括：
4.根据权利要求1所述的数据采集和标准化方法，其特征在于，根据配置的采集任务信息将采集任务和数据采集表单下发至执行对象进行采集任务执行，完成业务数据的采集，包括：
5.根据权利要求1所述的数据采集和标准化方法，其特征在于，在完成采集任务后，根据采集的业务数据构建标...
【专利技术属性】
技术研发人员：崔豪杰，
申请(专利权)人：中电云计算技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。