一种数据导入方法、装置、电子设备及存储介质制造方法及图纸

技术编号:27975465 阅读:36 留言:0更新日期:2021-04-06 14:09
本发明专利技术公开了一种数据导入方法、装置、电子设备及存储介质,所述方法包括:根据获取到的服务器的登录地址信息、用户名和密码,登录所述服务器;根据待导入数据在所述服务器中的存储路径信息,基于文件传输协议FTP从所述服务器中下载所述待导入数据;根据待导入数据在数据库中的目标路径信息,将所述待导入数据导入至所述数据库。本发明专利技术实施例中基于文件传输协议FTP的数据导入方法相较于现有的基于SQL命令行进行数据导入的方法,降低了在导入数据过程中占用的设备运行内存,设备运行速度快,即使在导入大量数据时,也能保证数据快速导入,解决了现有技术中数据导入效率较低的问题。

【技术实现步骤摘要】
一种数据导入方法、装置、电子设备及存储介质
本专利技术涉及数据库
,尤其涉及一种数据导入方法、装置、电子设备及存储介质。
技术介绍
很多公司的服务器中每天会新增很多的数据,为了便于对数据进行管理,需要将服务器中的数据导入到数据库中,通过数据库管理系统实现对数据的管理,例如读取数据、分析数据等。现有技术在将服务器中的数据导入到数据库中时,一般是基于SQL命令行进行数据导入的。基于命令生成器产生SQL命令集,然后将SQL命令集保存在一个脚本文件中,使用命令执行模块运行脚本文件,实现将数据导入到数据库中。现有技术基于SQL命令行进行数据导入的方案,在进行数据导入时占用设备的运行内存较大,设备运行速度慢,数据导入的效率较低。
技术实现思路
本专利技术实施例提供了一种数据导入方法、装置、电子设备及存储介质,用以解决现有的数据导入效率较低的问题。本专利技术实施例提供了一种数据导入方法,所述方法包括:根据获取到的服务器的登录地址信息、用户名和密码,登录所述服务器;根据待导入数据在所述服务器中的存储路径本文档来自技高网...

【技术保护点】
1.一种数据导入方法,其特征在于,所述方法包括:/n根据获取到的服务器的登录地址信息、用户名和密码,登录所述服务器;/n根据待导入数据在所述服务器中的存储路径信息,基于文件传输协议FTP从所述服务器中下载所述待导入数据;/n根据待导入数据在数据库中的目标路径信息,将所述待导入数据导入至所述数据库。/n

【技术特征摘要】
1.一种数据导入方法,其特征在于,所述方法包括:
根据获取到的服务器的登录地址信息、用户名和密码,登录所述服务器;
根据待导入数据在所述服务器中的存储路径信息,基于文件传输协议FTP从所述服务器中下载所述待导入数据;
根据待导入数据在数据库中的目标路径信息,将所述待导入数据导入至所述数据库。


2.如权利要求1所述的方法,其特征在于,所述根据待导入数据在所述服务器中的存储路径信息,基于文件传输协议FTP从所述服务器中下载所述待导入数据包括:
根据所述待导入数据的修改时间信息,将所述待导入数据划分至预设数量的分组中,根据待导入数据在所述服务器中的存储路径信息,基于文件传输协议FTP从所述服务器中依次下载每个分组内的待导入数据。


3.如权利要求2所述的方法,其特征在于,所述基于文件传输协议FTP从所述服务器中依次下载每个分组内的待导入数据包括:
根据预设的时间间隔,确定每个下载数据的时间点以及每个时间点与数据修改时间信息的对应关系;
当到达下载数据的时间点时,根据每个时间点与数据修改时间信息的对应关系确定该时间点对应的分组,基于文件传输协议FTP从所述服务器中下载与该时间点对应的分组内的待导入数据。


4.如权利要求1所述的方法,其特征在于,所述根据待导入数据在数据库中的目标路径信息,将所述待导入数据导入至所述数据库包括:
根据待导入数据在数据库中的目标路径信息,通过执行CTL文件控制所述待导入数据导入至所述数据库。


5.如权利要求4所述的方法,其特征在于,所述从所述服务器中下载所述待导入数据之后,根据待导入数据在数据库中的目标路径信息,通过执行CTL文件控制所述待导入数据导入至所述数据库之前,所述方法还包括:
判断下载的所述待导入数据的格式是否与所述CTL文件中配置的文件格式一致,如果是,根据待导入数据在数据库中的目标路径信息,通过执行CTL文件控制所述待导入数据导入至所述数据库,如果否,根据所述CTL文件中配置的文件格式对所述下载的待导入数据的格式进行转换,根据待导入数据在数据库中的目标路径信息,通过执行CTL文件控制格式转换后的待导入数据导入至所述数据库。

【专利技术属性】
技术研发人员:李金栋苗冬霜田浩贺占功于际超王宇
申请(专利权)人:航天信息股份有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1