数据管理系统和方法技术方案

公开了数据管理方法。所述方法提供多个数据存储介质，其中每个数据存储介质具有Ｍ种介质类型之一。所述方法为所述Ｍ种介质类型的每一种建立介质质量阈值、存取阈值、已使用时间阈值、环境阈值。所述方法还可选择地为所述Ｍ种介质类型的每一种建立数据管理策略。在检查第ｉ数据存储介质时，如果没有超过任何适当的阈值，并且如果数据管理策略不要求刷新数据，则将第ｉ数据存储介质返回以进行存储。如果数据管理策略要求数据刷新，则该方法读出编码在第ｉ数据存储介质上的信息，并且将该信息写到第ｉ数据存储介质。如果第ｉ介质质量小于第ｊ介质质量阈值，或者如果超过了任何其他适当的阈值，则该方法将编码在第ｉ数据存储介质上的信息复制到新数据存储介质。

【技术实现步骤摘要】

本专利技术总体涉及数据存档和数据管理。更具体地说，本专利技术根据存档和保留数据的时间长度而包括数据复制、数据刷新和介质选择中的一个或多个。
技术介绍
数据存档通常需要将数据保留一特定的时间段。有时将这种特定时间段称为保留时间。政府可以规定对于特定类型数据的保留时间。例如，在德国需要将金融记录保存最少10年，而必须将与帐户相关的文档保存5年。根据数据的特定类型，用于数据存档的其他保留时间的范围可以从1年到30年。规定要求存档数据在保留期间的任何时间点都是可读的。当必须将数据存储一较长的保留时间时产生一些问题。包含所存档的数据的数据存储介质可能随着时间而损坏。例如，由于氧化和交叉链接(crosslinking)而导致磁带的前膜(frontcoat)随着时间而变差。因此前膜可能变得较脆，并且化学分解(break-down)可能导致承载数据的磁性颗粒明显地从磁带上脱落。此外，存储介质的读出特性随着时间会变得更加容易出错。例如，在磁带中的磁性颗粒可能氧化，并且磁性的损失会导致永久的数据丢失。在硬盘驱动器中，磁畴可能通过振动的效应而变化，因此会使得1和0之间的转换变得不清楚。如果不定期地运行硬盘，则该硬盘的润滑剂可能由于毛细管作用而被移动到盘心。这意味着在数据区域的外边缘会没有润滑剂并且磁头损坏会导致数据丢失。即使存储介质保持可用，但是用于读出在该介质上所编码的数据的应用程序也可能不再存在了。可能不再对有些历史的软件进行支持和更新以在新的操作系统上运行。虽然使用这样的有些历史的软件而写的数据仍然存在，但是从功能上来说，该数据是没有用处的。过时的存储技术还产生另一个与数据存档有关的问题。存储技术具有有用的寿命，在该寿命之后该技术变得过时。计算机系统和/或应用程序不再支持这种过时的存储技术，并且因此不再能够对使用这种过时技术而写的数据进行使用。因此需要一种数据管理方法，其确定安置在系统中的每个数据存储介质的物理质量，进而检查每个数据存储介质的存取频率、每个数据存储介质的已使用时间和与每个数据存储介质的存储有关的环境参数。
技术实现思路
申请人的专利技术包括数据管理方法。该方法提供包括信息的多个数据存储介质，其中每个数据存储介质包括M种介质类型之一，其中M大于等于1。存储介质类型可以包括一种存储技术内的不同介质类型，例如对于磁带其可以是LTO-1、LTO-2和LTO-3。其还包括诸如磁带、光盘和盘之类的不同存储技术的介质类型。该方法针对M种介质类型的每一种确立介质质量阈值、存取阈值、已使用时间阈值和环境阈值。该方法还可选地为M种介质类型种的每一种确立数据管理策略。该方法选择第i数据存储介质，其中第i数据存储介质是多个数据存储介质之一，并且第i数据存储介质包括第j介质类型，其中第j介质类型是M个介质类型之一。该方法确定第i介质质量，并且确定第i介质质量是否高于第j介质质量阈值。如果第i介质质量不小于第j介质质量阈值，则该方法确定第i存取参数、第i已使用时间参数、第i环境参数，并且将这些参数分别与第j存取参数、第j已使用时间参数、第j环境参数进行比较。如果没有超过适当的阈值，并且如果数据管理策略不需要数据刷新，则对第i数据存储介质的检查结束。如果没有超过适当的阈值，但是数据管理策略要求数据刷新，则该方法读出在第i数据存储介质上所编码的信息，并且将该信息写到第i数据存储介质。如果第i介质质量小于第j介质质量阈值，或者如果超过了任何适当的阈值，则该方法提供新数据存储介质，并且把在第i数据存储介质上所编码的信息复制到新数据存储介质。该新数据存储介质可以与第i数据存储介质的介质类型相同或者不同。附图说明通过结合附图阅读下面的详细描述，可以更好的理解本专利技术，在附图中使用相似的参考标记指示相似的部件，并且图1示出了申请人的存储域网(“SAN”)的一些方面的框图；图2示出了申请人的包括左手服务机架、多个存储框架和右手服务机架的保管系统的一个实施方式的示意图；图3示出了图2的保管系统的某些元件的示意图；图4A示出了安装在驱动器机箱中的数据存储驱动器的前视图；图4B示出了图4A的设备的后视图；图5示出了包括套盒(cartridge)存储器的磁带盒的视图；图6示出了在图5的磁带盒中所包含的磁带卷盘的视图；图7示出了申请人的文档管理系统的内部结构的框图；图8A示出了申请人的复制过程的步骤的流程图；图8B是图8A的继续；图9示出了用于根据保留时间和存取时间要求而确定适当的存储介质的步骤的流程图；图10示出了在申请人的方法中的起始步骤的流程图；图11A示出了在申请人的方法中的附加步骤的流程图；图11B是图11A的继续；图12A示出了在申请人的方法中的附加步骤的流程图；图12B是图12A的继续；和图13示出了在申请人的方法中的附加步骤的流程图。具体实施例方式现在参照用相同的索引数字和标记指示相似部件的附图。图1示出了申请人的、包括存储域网络(“SAN”)99b的数据管理系统99a的一个实施方式的框图。在图1中所示的实施方式中，SAN 99b包括网络附接存储器(“NAS”)98和交换访问网络，其中使用交换机67来创建交换交织结构(fabric)66。在本专利技术的该实施方式中，使用在光纤信道(“FC”)物理层上运行的小型计算机系统接口(SCSI)协议来实施SAN 99b。在其他实施方式中，SAN 99b使用诸如Infiniband、FICON、TCP/IP、以太网、千兆以太网或iSCSI之类的其他协议，但不仅限于此。交换机67具有主机61、62、63、64、65、控制器80和网络附接存储器(NAS)98的地址。使用I/O接口71、72、73、74、75分别将主机计算机61、62、63、64、65连接到交织结构66。在图1中所示的实施方式中，主机计算机61包括文档管理系统(“DMS”)86。在其他实施方式中，保管系统90包括DMS 86。在其他事项中，DMS 86对在保管系统90中所放置的数据存储介质和信息建立索引。文档管理系统86将信息/文档与被编码有该信息/文档的数据存储介质进行关联。根据这些DMS索引，可以对保管系统中所存储的信息/文档进行搜索。I/O接口71-75可以是任何类型的I/O接口；例如，FC仲裁环、到交织结构66的直接附连或者由主机计算机61-65所使用以将信息分别地传送到交织结构66/从交织结构66进行传送的一个或多个信号线。交织结构66包括例如用于连接两个或多个计算机网络的一个或多个FC交换机67。交换机67将主机计算机61-65经过I/O接口79互连到控制器80。使用I/O接口将信息分别向/从控制器80和随后的磁带存储器91、盘存储器92和光存储器93进行传送。I/O接口79可以包括任何一种或多种类型的已知接口，例如光纤信道、Infinitband、千兆以太网、以太网、TCP/IP、iSCSI、SCSI I/O接口，或者由FC交换机67所使用的一条或多条信号线。在图1中所示的实施方式中，保管系统90包括控制器80、磁带存储器91、盘存储器92、光存储器93和离线(offline)存储器97，其中可以将来自磁带存储器91、盘存储器92和光存储器93的可拆卸介质在“离线”状态中搁置很长的一段时间。磁带存储器91、盘存储器92、光存储器9本文档来自技高网...

【技术保护点】
一种数据管理方法，包括步骤：　　　　提供包括信息的Ｎ个数据存储介质，其中所述Ｎ个数据存储介质的每一个都包括Ｍ种介质类型之一，其中Ｎ大于或等于１，并且Ｍ大于或等于１；　　　　为所述Ｍ种介质类型的每一种建立介质质量阈值；　　　　为所述Ｍ种介质类型的每一种建立存取阈值；　　　　为所述Ｍ种介质类型的每一种建立已使用时间阈值；　　　　为所述Ｍ种介质类型的每一种建立环境阈值；　　　　为所述Ｍ种介质类型的每一种建立数据管理策略。

【技术特征摘要】
US 2005-9-1 11/219,4241.一种数据管理方法，包括步骤提供包括信息的N个数据存储介质，其中所述N个数据存储介质的每一个都包括M种介质类型之一，其中N大于或等于1，并且M大于或等于1；为所述M种介质类型的每一种建立介质质量阈值；为所述M种介质类型的每一种建立存取阈值；为所述M种介质类型的每一种建立已使用时间阈值；为所述M种介质类型的每一种建立环境阈值；为所述M种介质类型的每一种建立数据管理策略。2.根据权利要求1所述的方法，还包括步骤选择第i数据存储介质，其中所述第i数据存储介质是所述N个数据存储介质之一，并且所述第i数据存储介质包括第j介质类型，其中第j介质类型是所述M种介质类型之一；确定第i介质质量；确定第i介质质量是否高于第j介质质量阈值；如果第i介质质量不高于第j介质质量阈值则进行操作提供新数据存储介质，其中所述新数据存储介质不是所述N个数据存储介质之一；和将编码在所述第i数据存储介质上的信息复制到所述新数据存储介质。3.根据权利要求2所述的方法，其中所述新数据存储介质包括VOLSER，该方法还包括步骤确定是否将要保留第i数据存储介质；如果不保留第i数据存储介质则进行操作在执行所述复制步骤之后销毁所述第i数据存储介质；将所述VOLSER与第i数据存储介质关联。4.根据权利要求3所述的方法，还包括步骤如果将保留第i数据存储介质则进行操作设置N等于N+1；和将所述VOLSER与第N+1数据存储介质关联。5.根据权利要求1所述的方法，还包括步骤如果第i介质质量高于第j介质质量阈值则进行操作确定第i环境参数；检索第j环境阈值；确定所述第i环境参数是否大于第j环境阈值；如果所述第i环境参数大于第j环境阈值则进行操作提供新数据存储介质，其中所述新数据存储介质不是所述N个数据存储介质之一；和将编码在所述第i数据存储介质上的信息复制到所述新数据存储介质。6.根据权利要求5所述的方法，还包括步骤如果第i环境参数大于第j环境阈值则进行操作确定第i存取参数；检索第j存取阈值；确定所述第i存取参数是否大于第j存取阈值；如果所述第i存取参数大于第j存取阈值则进行操作提供新数据存储介质，其中所述新数据存储介质不是所述N个数据存储介质之一；和将编码在所述第i数据存储介质上的信息复制到所述新数据存储介质。7.根据权利要求6所述的方法，还包括步骤如果第i存取参数大于第j存取阈值则进行操作确定第i已使用时间参数；检索第j已使用时间阈值；确定所述第i已使用时间参数是否大于第j已使用时间阈值；如果所述第i已使用时间大于第j已使用时间阈值则进行操作提供新数据存储介质，其中所述新数据存储介质不是所述N个数据存储介质之一；和将编码在所述第i数据存储介质上的信息复制到所述新数据存储介质。8.根据权利要求7所述的方法，还包括步骤如果第i已使用时间参数大于第j已使用时间阈值则进行操作确定所述数据管理策略是否要求刷新第i数据存储介质；如果所述数据管理策略要求刷新第i数据存储介质则进行操作将第i数据存储介质装载到能够读出编码在所述第i数据存储介质上的数据、并且能够将数据编码在所述第i数据存储介质上的数据存储设备中；读出编码在所述第i数据存储介质上的所述信息，其中所述信息被以第一格式编码在所述第i数据存储介质上；确定所述数据管理策略是否要求格式转换；如果所述数据管理策略不要求格式转换则进行操作，以将所述第一格式的所述信息写到所述第i数据存储介质中；如果所述数据管理策略要求格式转换则进行操作将所述信息从所述第一格式转换到第二格式；将所述第二格式的所述信息写到所述第i数据存储介质。9.根据权利要求7所述的方法，其中所述建立存取阈值还包括建立具有存取频率分量和存取总次数分量的存取阈值，其中所述存取频率分量包括在将信息向或者从数据存储介质进行写入或读出的操作之间的平均时间间隔，并且所述存取总次数分量包括在指定时间间隔内将数据向或者从数据存储介质进行写入或读出的次数。10.根据权利要求9所述的方法，其中所述建立环境阈值还包括建立具有最大可接受平均存储温度、最大可接受短期存储温度、最大可接受平均相对湿度、最大可接受短期存储相对湿度的环境阈值。11.一种包括N个数据存储介质的数据管理系统，其中所述N个数据存储介质的每一个都包括M种介质类型之一，用于所述M种介质类型的每一种的预定介质质量阈值，用于所述M种介质类型的每一种的预定存取阈值，用于所述M种介质类型的每一种的预定已使用时间阈值，用于所述M种介质类型的每一种的预定环境阈值，用于所述M种介质类型的每一种的预定数据管理策略，其中N大于或等于1，并且M大于或等于1，所述系统包括用于选择第i数据存储介质的装置，其中所述第i数据存储介质是所述N个数据存储介质之一，并且所述第i数据存储介质包括第j介质类型，其中第j介质类型是所述M种介质类型之一；用于确定第i数据存储介质质量的装置；用于确定第i介质质量是否高于第j介质质量阈值的装置；用于如果第i介质质量不高于第j介质质量阈值则可以进行操作以将编码在所述第i数据存储介质上的信息复制到新数据存储介质的装置。12.根据权利要求11所述的系统，还包括用于根据所述数据管理策略来选择用于所述新数据存储介质的第k介质类型的装置，其中所述第k介质类型是所述M种介质类型之一。13.根据权利要求12所述的系统，其中所述新数据存储介质包括VOLSER，所述系统还包括用于根据所述数据管理策略来确定是否保留第i数据存储介质的装置；如果不保留第i数据存储介质则进行操作的装置，包括用于销毁所述第i数据存储介质的装置；用于将所述VOLSER与第i数据存储介质关联的装置。14.根据权利要求13所述的系统，还包括如果将保留第i数据存储介质则进行操作的装置，包括用于设置N等于N+1的装置；和用于将所述VOLSER与第N+1数据存储介质关联的装置。15.根据权利要求11所述的系统，还包括如果第i介质质量高于第j介质质量阈值则进行操作的装置，包括用于确定第i环...

【专利技术属性】
技术研发人员：尼尔斯豪斯泰恩，克雷格A克莱因，丹尼尔J威纳斯基，
申请(专利权)人：国际商业机器公司，
类型：发明
国别省市：US[美国]