【技术实现步骤摘要】
本申请涉及数据处理,尤其涉及一种表格文件的转换方法和装置、电子设备及存储介质。
技术介绍
1、在it生态提倡降本增效的大背景下,涉及大数据项目的相关企业选择对存储在数据仓库的数据进行优化整理,以此实现降本增效的目的。数据仓库在建设初期由于对表创建这一内容并没有规范的宣导,导致存在大量的表格文件的存储格式为txt格式,在同样的数据内容的情况下,其占用的存储空间是存储格式为orc格式的表格文件的数倍,且txt表的查表效率并没有orc表的查表效率高。
2、目前,数据仓库中存在的txt表的数量往往较多,且每个txt表的数据量非常大,其数据量级通常在tb级别及以上,在这一情况下,若以人工方式在hive客户端手动执行sql语句,实现txt表的改造所需的改造时间长,改造效率低,且不能实现txt表的批量改造,人工干预的次数较多。
3、因此,现有技术存在的问题还亟需解决和优化。
技术实现思路
1、本申请实施例的主要目的在于提出一种表格文件的转换方法和装置、电子设备及存储介质,旨在提高
...【技术保护点】
1.一种表格文件的转换方法,其特征在于,所述转换方法包括:
2.根据权利要求1所述的转换方法,其特征在于,所述对所述配置表进行数组化处理,得到第一数组,包括:
3.根据权利要求2所述的转换方法,其特征在于,所述对所述第一数组进行遍历处理,并根据遍历结果建立空白表格文件这一步骤,包括:
4.根据权利要求3所述的转换方法,其特征在于,所述创建与所述源表格文件对应的空白表格文件,包括:
5.根据权利要求1所述的转换方法,其特征在于,所述根据所述源表格文件,对所述空白表格文件进行填充处理这一步骤,包括:
6.根据权利
...【技术特征摘要】
1.一种表格文件的转换方法,其特征在于,所述转换方法包括:
2.根据权利要求1所述的转换方法,其特征在于,所述对所述配置表进行数组化处理,得到第一数组,包括:
3.根据权利要求2所述的转换方法,其特征在于,所述对所述第一数组进行遍历处理,并根据遍历结果建立空白表格文件这一步骤,包括:
4.根据权利要求3所述的转换方法,其特征在于,所述创建与所述源表格文件对应的空白表格文件,包括:
5.根据权利要求1所述的转换方法,其特征在于,所述根据所述源表格文件,对所述空白表格文件进行填充处理这一步骤,包括:
6.根据权利要求5所述的转换方法,其特征在于,所述根据所述类型结果和...
【专利技术属性】
技术研发人员:雷志勇,
申请(专利权)人:中国平安人寿保险股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。