【技术实现步骤摘要】
一种基于HDFS的磁盘定位方法、装置、设备及介质
本专利技术涉及大数据领域,特别是涉及一种基于HDFS的磁盘定位方法、装置、设备及介质。
技术介绍
随着计算机的普及和互联网技术的发展,数据文件正在海量且迅速地增长,这些数据文件通常被保存于计算机存储系统中以便用户对数据文件进行检索、分析。为了利用开源技术拓展性高的这一优势并且降低存储设备的费用,越来越多的企业和政府机构在低成本商用硬件上,基于Hadoop分布式文件系统HDFS(HadoopDistributedFileSystem)构建具有高容错、高吞吐特性的海量数据存储系统。然而,由于集群规模庞大和硬件本身的可靠性原因,集群中的服务器节点经常由于硬件故障需要停机维护。为了保证数据完整性和集群可用性,系统维护人员通常都是在HDFS报告磁盘故障的情况下对出现故障的磁盘进行诊断和更换,但是由于一台服务器中往往挂载多个磁盘,并且构成HDFS的服务器节点的整体数量也往往较多,因此当前系统维护人员在获悉到构成HDFS的某一磁盘出现异常时,难以高效且准确地在众多的服务器节点中定位到挂载有异常磁盘的目标服务器,进而无法对异常磁盘 ...
【技术保护点】
1.一种基于HDFS的磁盘定位方法,其特征在于,包括:获取包含有HDFS中的磁盘与服务器之间映射关系的关系文件;根据所述关系文件中的映射关系生成对应的可视化分布图,以供系统维护人员根据所述可视化分布图定位各所述磁盘;其中,所述可视化分布图中以图形化方式记录有所述磁盘与所述服务器之间的挂载关系。
【技术特征摘要】
1.一种基于HDFS的磁盘定位方法,其特征在于,包括:获取包含有HDFS中的磁盘与服务器之间映射关系的关系文件;根据所述关系文件中的映射关系生成对应的可视化分布图,以供系统维护人员根据所述可视化分布图定位各所述磁盘;其中,所述可视化分布图中以图形化方式记录有所述磁盘与所述服务器之间的挂载关系。2.根据权利要求1所述的方法,其特征在于,所述关系文件中还包含有所述服务器与机柜之间的映射关系,以及所述机柜与机房之间的映射关系;相应的,所述可视化分布图中还以图形化方式记录有所述服务器与所述机柜之间的放置关系,以及所述机柜与所述机房之间的放置关系。3.根据权利要求2所述的方法,其特征在于,所述获取包含有HDFS中的磁盘与服务器之间映射关系的关系文件包括:获取包含有所述映射关系的JSON格式的所述关系文件。4.根据权利要求3所述的方法,其特征在于,所述获取包含有所述映射关系的JSON格式的所述关系文件包括:通过分析所述HDFS的操作系统信息以获取包含有所述映射关系的JSO...
【专利技术属性】
技术研发人员:何建军,
申请(专利权)人:浪潮商用机器有限公司,
类型:发明
国别省市:山东,37
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。