一种数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:36339483 阅读:11 留言:0更新日期:2023-01-14 17:52
本申请涉及一种数据处理方法、装置、设备及存储介质,涉及计算机技术领域,方法由图片处理设备执行,图片处理设备包括若干数据库和存储介质,图片处理设备通过网络协议与平台通信,数据处理方法包括:获取图片发送请求;基于图片发送请求,确定目标数据库以及目标数据库中的目标图片属性信息;基于目标图片属性信息从存储介质中确定目标图片数据信息;将目标图片数据信息通过网络协议发送到目标数据库对应的平台;其中,数据库用于存储图片处理设备采集到的每一图片的图片属性信息,存储介质用于存储采集到的与每一图片的图片属性信息对应的图片数据信息。本申请具有提高数据处理效率的效果。率的效果。率的效果。

【技术实现步骤摘要】
一种数据处理方法、装置、设备及存储介质


[0001]本申请涉及计算机
,尤其涉及一种数据处理方法、装置、设备及存储介质。

技术介绍

[0002]目前,随着信息技术的发展,数据库的理论与技术应用日益广泛,尤其是关系数据库在数据存储方面的应用。在存储采集图片时,将图片存储至数据库已经成为惯常的手段。
[0003]然而,一张图片存储至数据库需要约200K的存储空间,数据库存储的图片量较少。平台在调用数据库中存储的图片时,需要从数据库中大量的数据中去寻找所需数据,导致数据处理效率低。
[0004]因而,如何提高数据处理效率成了本领域亟待解决的技术问题。

技术实现思路

[0005]为了提高数据处理效率,本申请提供一种数据处理方法、装置、设备及存储介质。
[0006]第一方面,本申请提供一种数据处理方法,采用如下的技术方案:一种数据处理方法,由图片处理设备执行,所述图片处理设备包括若干数据库和存储介质,所述图片处理设备通过网络协议与平台通信,所述数据处理方法包括:获取图片发送请求;基于所述图片发送请求,确定目标数据库以及所述目标数据库中的目标图片属性信息;基于所述目标图片属性信息从所述存储介质中确定目标图片数据信息;将所述目标图片数据信息通过网络协议发送到所述目标数据库对应的平台;其中,数据库用于存储所述图片处理设备采集到的每一图片的图片属性信息,所述存储介质用于存储采集到的与每一图片的图片属性信息对应的图片数据信息。
[0007]通过采用上述技术方案,图片处理设备包括若干数据库和存储介质,数据库存储图片处理设备采集到的每一图片的图片属性信息,存储介质用于存储采集到的与每一图片的图片属性信息对应的图片数据信息,能够将结构化数据(图片属性信息)与图片(图片数据信息)分开存储,占用空间更小,在获取到图片发送请求后,能够确定目标数据库,并快速确定目标数据库中图片的目标属性信息,图片的目标属性信息能够唯一确定图片的目标数据信息;根据图片的目标属性信息从存储介质中确定图片的目标数据信息;将图片的目标数据信息通过网络协议发送到目标数据库对应的平台,能够实现将图片稳定地发送至平台,以提高数据处理效率。
[0008]本申请在一较佳示例中可以进一步配置为:在基于所述目标图片属性信息从所述存储介质中确定目标图片数据信息之前,还包括:采集图片;获取采集图片的图片属性信息和图片数据信息;
将所述图片属性信息存储至源数据库,所述源数据库为存储新采集到图片的属性信息的数据库,并与其他数据库信息同步;将所述图片数据信息存储至所述存储介质。
[0009]通过采用上述技术方案,能够获取采集的图片的属性信息和图片数据信息,将图片属性信息存储至源数据库,源数据库与其他数据库信息同步,能够保证数据库不出现读写冲突。
[0010]本申请在一较佳示例中可以进一步配置为:将所述目标图片数据信息通过网络协议发送到所述目标数据库对应的平台,包括:将所述目标图片数据信息中的每一图片数据信息,依次通过网络协议发送到所述目标数据库对应的平台。
[0011]通过采用上述技术方案,依次发送每个图片对应的数据信息使得内存中最多缓存一条图片相关的数据,节省了大量的内存,在发送时也减轻了平台带宽不足的问题而造成的信息丢失的情况发生。
[0012]本申请在一较佳示例中可以进一步配置为:所述将所述目标图片数据信息中的每一图片数据信息,依次通过网络协议发送到所述目标数据库对应的平台,包括:在目标图片数据信息发送过程中,实时判断所述网络协议是否正常;若正常,则将所述目标图片数据信息中的剩余图片数据信息依次通过网络协议发送到所述目标数据库对应的平台;其中,所述目标图片数据信息包括已发送的图片数据信息和剩余图片数据信息;若不正常,则暂停发送,并当网络协议正常时继续发送目标图片数据信息中的剩余图片数据信息。
[0013]通过采用上述技术方案,能够在目标图片数据信息发送过程中,实时判断所述网络协议是否正常;当网络协议能够正常工作时,将图片的目标数据信息通过网络协议发送到目标数据库对应的平台;当网络协议不正常时,暂停发送,并当网络协议正常时继续发送目标图片数据信息,能够保证数据发送的可靠性。
[0014]本申请在一较佳示例中可以进一步配置为:当所述目标图片属性信息包括暂停发送阶段中的图片属性信息时,所述当网络协议正常时继续发送目标图片数据信息中的剩余图片数据信息,包括:当识别到所述网络协议恢复通信时,遍历目标数据库的每一条图片属性信息,判断当前图片属性信息中传出时间戳是否为空,所述图片属性信息包括传出时间戳,所述传出时间戳表征图片发送成功的时间;若传出时间戳为空,基于图片属性信息从存储介质中确定图片数据信息;将所述图片数据信息通过网络协议发送到所述目标数据库对应的平台;若发送成功,则继续遍历下一图片属性信息,直至不存在传出时间戳为空的图片属性信息,以完成所有断网期间图片数据信息的发送。
[0015]通过采用上述技术方案,当识别到网络协议恢复通信时,目标数据库中还包括在网络协议不正常时图片处理设备采集的图片数据信息,当传出时间戳为空时,根据图片属
性信息从存储介质中确定图片数据信息,将图片数据信息通过网络协议发送到网络协议对应的平台,能够在断网后实现图片数据的续传,当发送成功后,继续遍历下一图片的属性信息,直至不存在传出时间戳为空的图片属性信息,以完成所有断网期间图片数据信息的发送,能够保证在断网后续传图片的唯一性。
[0016]本申请在一较佳示例中可以进一步配置为:所述将所述目标图片数据信息通过网络协议发送到所述目标数据库对应的平台之后,还包括:获取由平台发出的丢失图片获取请求;解析所述丢失图片获取请求,确定备份数据库以及备份数据库中的丢失图片属性信息,所述备份数据库与目标数据库的内容一致;基于所述丢失图片属性信息从所述存储介质中确定丢失图片数据信息;将所述丢失图片数据信息通过网络协议发送到发出丢失图片获取请求对应的平台。
[0017]通过采用上述技术方案,在平台数据丢失时,图片处理设备能够获取并解析由平台发出的丢失图片获取请求,确定备份数据库以及备份数据库中的丢失图片属性信息,进而根据丢失图片属性信息确定并发送丢失图片数据信息至对应的平台,以保证平台能够获知完整的数据。
[0018]本申请在一较佳示例中可以进一步配置为:所述方法还包括:若有新平台与设备通信的需求,则确定所述新平台与图片处理设备通信的新网络协议;复制源数据库,得到新数据库;根据新网络协议以及新数据库,将需求图片数据信息与发送至新平台。
[0019]通过采用上述技术方案,当有新平台与设备通信的需求时,确定新平台与图片处理设备通信的新网络协议,不同的平台与设备进行通信的网络协议不同;复制源数据库,得到新数据库;利用新网络协议,实现图片处理设备与新平台之间的通信,使图片数据信息通过新网络协议发送至新平台;当有新平台与设备通信的需求时,只需确定新网络协议和新数据库即可与新平台进行通信,该方法的可扩展性强,扩展方便。...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,由图片处理设备执行,所述图片处理设备包括若干数据库和存储介质,所述图片处理设备通过网络协议与平台通信,所述数据处理方法包括:获取图片发送请求;基于所述图片发送请求,确定目标数据库以及所述目标数据库中的目标图片属性信息;基于所述目标图片属性信息从所述存储介质中确定目标图片数据信息;将所述目标图片数据信息通过网络协议发送到所述目标数据库对应的平台;其中,数据库用于存储所述图片处理设备采集到的每一图片的图片属性信息,所述存储介质用于存储采集到的与每一图片的图片属性信息对应的图片数据信息。2.根据权利要求1所述的方法,其特征在于,在基于所述目标图片属性信息从所述存储介质中确定目标图片数据信息之前,还包括:采集图片;获取采集图片的图片属性信息和图片数据信息;将所述图片属性信息存储至源数据库,所述源数据库为存储新采集到图片的属性信息的数据库,并与其他数据库信息同步;将所述图片数据信息存储至所述存储介质。3.根据权利要求1所述的方法,其特征在于,将所述目标图片数据信息通过网络协议发送到所述目标数据库对应的平台,包括:将所述目标图片数据信息中的每一图片数据信息,依次通过网络协议发送到所述目标数据库对应的平台。4.根据权利要求3所述的方法,所述将所述目标图片数据信息中的每一图片数据信息,依次通过网络协议发送到所述目标数据库对应的平台,包括:在目标图片数据信息发送过程中,实时判断所述网络协议是否正常;若正常,则将所述目标图片数据信息中的剩余图片数据信息依次通过网络协议发送到所述目标数据库对应的平台;其中,所述目标图片数据信息包括已发送的图片数据信息和剩余图片数据信息;若不正常,则暂停发送,并当网络协议正常时继续发送目标图片数据信息中的剩余图片数据信息。5.根据权利要求4所述的方法,其特征在于,当所述目标图片属性信息包括暂停发送阶段中的图片属性信息时,所述当网络协议正常时继续发送目标图片数据信息中的剩余图片数据信息,包括:当识别到所述网络协议恢复通信时,遍历目标数据库的每一条图片属性信息,判断当前图片属性信息中传出时间戳是否为空,所述图片属性信息包括...

【专利技术属性】
技术研发人员:孙成智王爱中阳噹铃
申请(专利权)人:深圳市巨龙创视科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1