一种表格文件的转换方法和装置、电子设备及存储介质制造方法及图纸

技术编号:40311374 阅读:34 留言:0更新日期:2024-02-07 20:54
本申请实施例提供了一种表格文件的转换方法和装置、电子设备及存储介质,属于数据处理技术领域。该转换方法包括:获取配置表,所述配置表中包括至少一个源表格文件的文件名信息;对所述配置表进行数组化处理,得到第一数组;对所述第一数组进行遍历处理,并根据遍历结果建立空白表格文件,得到第一数据集,所述第一数据集用于表征空白表格文件的集合;根据所述源表格文件,对所述空白表格文件进行填充处理,得到第二数据集,所述第二数据集用于表征经表格文件类型转换后的目标表格文件的集合。本申请实施例能够提高表格文件的改造效率,减少人工干预的次数,提高表格文件改造的灵活性,方便表格文件的批量改造。

【技术实现步骤摘要】

本申请涉及数据处理,尤其涉及一种表格文件的转换方法和装置、电子设备及存储介质


技术介绍

1、在it生态提倡降本增效的大背景下,涉及大数据项目的相关企业选择对存储在数据仓库的数据进行优化整理,以此实现降本增效的目的。数据仓库在建设初期由于对表创建这一内容并没有规范的宣导,导致存在大量的表格文件的存储格式为txt格式,在同样的数据内容的情况下,其占用的存储空间是存储格式为orc格式的表格文件的数倍,且txt表的查表效率并没有orc表的查表效率高。

2、目前,数据仓库中存在的txt表的数量往往较多,且每个txt表的数据量非常大,其数据量级通常在tb级别及以上,在这一情况下,若以人工方式在hive客户端手动执行sql语句,实现txt表的改造所需的改造时间长,改造效率低,且不能实现txt表的批量改造,人工干预的次数较多。

3、因此,现有技术存在的问题还亟需解决和优化。


技术实现思路

1、本申请实施例的主要目的在于提出一种表格文件的转换方法和装置、电子设备及存储介质,旨在提高表格文件的改造效率,本文档来自技高网...

【技术保护点】

1.一种表格文件的转换方法,其特征在于,所述转换方法包括:

2.根据权利要求1所述的转换方法,其特征在于,所述对所述配置表进行数组化处理,得到第一数组,包括:

3.根据权利要求2所述的转换方法,其特征在于,所述对所述第一数组进行遍历处理,并根据遍历结果建立空白表格文件这一步骤,包括:

4.根据权利要求3所述的转换方法,其特征在于,所述创建与所述源表格文件对应的空白表格文件,包括:

5.根据权利要求1所述的转换方法,其特征在于,所述根据所述源表格文件,对所述空白表格文件进行填充处理这一步骤,包括:

6.根据权利要求5所述的转换方法...

【技术特征摘要】

1.一种表格文件的转换方法,其特征在于,所述转换方法包括:

2.根据权利要求1所述的转换方法,其特征在于,所述对所述配置表进行数组化处理,得到第一数组,包括:

3.根据权利要求2所述的转换方法,其特征在于,所述对所述第一数组进行遍历处理,并根据遍历结果建立空白表格文件这一步骤,包括:

4.根据权利要求3所述的转换方法,其特征在于,所述创建与所述源表格文件对应的空白表格文件,包括:

5.根据权利要求1所述的转换方法,其特征在于,所述根据所述源表格文件,对所述空白表格文件进行填充处理这一步骤,包括:

6.根据权利要求5所述的转换方法,其特征在于,所述根据所述类型结果和...

【专利技术属性】
技术研发人员:雷志勇
申请(专利权)人:中国平安人寿保险股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1