【技术实现步骤摘要】
一种基于HDFS分布式文件系统的存储方法及使用方法
本专利技术属于医学图像处理领域,具体涉及一种基于HDFS分布式文件系统的存储方法及使用方法。
技术介绍
随着医学成像技术快速发展,医学图像已经成为医学临床诊断的重要依据。当前这些数据都存储在PACS(图像归档与通信系统)系统中,采用高性能、大容量的网络存储阵列、磁带库等存储介质。PACS遵循DICOM3.0国际标准,是医学图像的组织与通信标准。目前PACS系统已经从单机、科室逐步发展到全院、区域,实现了医院无胶片化。区域化是政府卫生部门和医疗机构目前的主要研究目标,但构建支持区域化PACS应用的大型共享医学图像中心和协作平台还面临如下挑战:1)建设费用高:图像数据量达到TB、PB级别,采用传统存储架构(如FCSAN/iSCSI)费用高,异构集成及扩展灵活性差;2)传输带宽存在瓶颈:即使是高性能的FCSAN网络带宽和处理能力也难以达到PB级数的快速处理和传输要求;3)可用性受限:大型医院PACS系统常用“在线-近线-离线”的存储模式,离线数据大多存储在磁带库中,可用性较差,数据不能实时获取;4)缺乏一体化的应用共享 ...
【技术保护点】
1.一种基于HDFS分布式文件系统的存储方法,其特征在于,包括:(1)一体化内容存储文件块结构:将所有本地图像文件按照如下分区块进行保存,分区块包括内容索引表块、采样体数据块、基础信息表块、三维体矩阵块、头信息备份块;内容索引表块:包括记录图像文件类型标记、每个分区块的起止位置、图像像素矩阵起止位置、图像大小和图像个数信息,共五个部分;图像文件读写顺序是按照内容索引表块五个部分的排序顺序进行读取的;采样体数据块:存储原始图像文件的降采样后数据,用于给用户的缩略图显示以及不需要高精度原始数据场景;基础信息表块:记录图像文件数据的公共信息;三维体矩阵块:存储每一个图像文件的图像 ...
【技术特征摘要】
1.一种基于HDFS分布式文件系统的存储方法,其特征在于,包括:(1)一体化内容存储文件块结构:将所有本地图像文件按照如下分区块进行保存,分区块包括内容索引表块、采样体数据块、基础信息表块、三维体矩阵块、头信息备份块;内容索引表块:包括记录图像文件类型标记、每个分区块的起止位置、图像像素矩阵起止位置、图像大小和图像个数信息,共五个部分;图像文件读写顺序是按照内容索引表块五个部分的排序顺序进行读取的;采样体数据块:存储原始图像文件的降采样后数据,用于给用户的缩略图显示以及不需要高精度原始数据场景;基础信息表块:记录图像文件数据的公共信息;三维体矩阵块:存储每一个图像文件的图像像素矩阵原始数据,按照医学图像内容的顺序排列;头信息备份块:保留原有图像文件信息,内容比基础信息表块中保存的信息全,包括所有原始图像文件标准规定的信息,保证通过头信息备份块中的信息还原原有图像,或者查找基础信息表块中不存在的信息;(2)基于一体化内容存储文件块结构的文件缓存池:文件缓存池位于服务器与本地图像文件系统之间,包括用户队列、用户数据队列和HDFS连接池;用户队列:采用哈希结构,保存着每个用户登录信息,并在每个哈希冲突采用一个双向链表实现,每一个登录用户自动在该队列中创建一个节点,每个用户节点自动创建一个用户的数据队列,并加载上一次登录加载的序列数据,如果是新用户,就不加载;用户数据队列:用户数据队列管理者当前用户能够访问的所有序列数据,采用哈希结构,并用双向链表解决冲突,用户每次加载一个序列数据,就会创建一个数据节点,该数据节点保存着三类信息:上述一体化内存存储文件中的基础信息数据;操作状态信息,即当前用户对这个数据操作;数据内存标识,即内存文件的引用,可以用该内存标识来访问内存文件;用户数据队列数据节点采用先进先出或最近使用作为淘汰策略;HDFS连接池:管理对HDFS分布式文件系统的连接,当需要创建新连接时,该模块返回一个连接句柄;每个用户数据队列创建的同时会打开一个HDFS访问连接,该连接一直保持,直到用户注销或者用户操作超时销毁。内存文件:指用户访问的图像数据,该图像数据对应本地图像文件中的一个物理文件,即本地...
【专利技术属性】
技术研发人员:栗伟,于鯤,郭志伟,赵大哲,丁邦杰,
申请(专利权)人:东北大学,
类型:发明
国别省市:辽宁,21
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。