数据读取方法、系统、设备以及可读存储介质技术方案

技术编号:38614930 阅读:35 留言:0更新日期:2023-08-26 23:42
本公开的实施例提供了一种数据读取方法、系统、设备以及可读存储介质。应用于数据读取领域;该方法包括:根据数据读取任务中的强制更新参数判断缓冲文件是否需要强制更新;若所述缓冲文件不需要强制更新,则根据所述数据读取任务中的读取参数生成数据索引;根据所述数据索引查找对应的缓冲文件,若所述对应的缓冲文件存在,则读取所述对应的缓冲文件中的数据;将读取到的所述对应的缓冲文件中的数据进行目标格式转换,得到目标数据。以此方式,能够在不需要配置账号的情况下,最大简化开发的过程,优化了数据共享过程,既保证数据的实时同步,又保证了数据读取时速度基本达到本地文件读取水平。读取水平。读取水平。

【技术实现步骤摘要】
数据读取方法、系统、设备以及可读存储介质


[0001]本公开涉及互联网领域,尤其涉及数据读取领域。

技术介绍

[0002]数据共享的机制很多,包括共享文件夹,Git共享,在线云共享等,但是这些共享方式在数据使用的过程中都需要将数据下载到本地,受制于网络环境,而且下载通常是一个耗时或不可靠的操作,即使使用Git这样的管理方法,也需要配置账号密码等内容。
[0003]因此,目前急需一种数据共享方法,可以在不需要配置账号的情况下,最大简化开发的过程,优化数据共享过程。

技术实现思路

[0004]本公开提供了一种数据读取方法、系统、设备以及可读存储介质。
[0005]根据本公开的第一方面,提供了一种数据读取方法,该方法包括:
[0006]根据数据读取任务中的强制更新参数判断缓冲文件是否需要强制更新;
[0007]若所述缓冲文件不需要强制更新,则根据所述数据读取任务中的读取参数生成数据索引;
[0008]根据所述数据索引查找对应的缓冲文件,若所述对应的缓冲文件存在,则读取所述对应的缓冲文件中的数据;本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据读取方法,其特征在于,所述方法包括:根据数据读取任务中的强制更新参数判断缓冲文件是否需要强制更新;若所述缓冲文件不需要强制更新,则根据所述数据读取任务中的读取参数生成数据索引;根据所述数据索引查找对应的缓冲文件,若所述对应的缓冲文件存在,则读取所述对应的缓冲文件中的数据;将读取到的所述对应的缓冲文件中的数据进行目标格式转换,得到目标数据。2.根据权利要求1所述的方法,其特征在于,所述读取参数包括:输入文件、输入路径以及读取次数。3.根据权利要求1所述的方法,其特征在于,所述方法还包括:若所述缓冲文件需要强制更新,则通过数据远程获取方法进行数据读取;若所述对应的缓冲文件不存在,则通过所述数据远程获取方法进行数据读取;若读取到的所述对应的缓冲文件中的数据格式转换失败,则通过所述数据远程获取方法重新进行数据读取。4.根据权利要求3所述的方法,其特征在于,所述方法还包括:将通过所述数据远程获取方法读取到的数据缓冲至本地,并将缓冲至本地的数据进行目标格式转换,得到目标数据。5.根据权利要求4所述的方法,其特征在于,所述数据远程获取方法包括:网络文件数据读取、云接口数据读取以及数据库数据读取。6.根据权利要求5所述的方法,其特征在于,所述网络文件数据读取包括:将URL作为数据索引,根据所述数据索引获取对...

【专利技术属性】
技术研发人员:郝伟刘加瑞
申请(专利权)人:安徽华云安科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1