读取小文件的方法、装置和设备及计算机可读存储介质制造方法及图纸

本发明专利技术公开了一种读取小文件的方法，包括根据目标小文件的索引节点，判断缓存中是否存在所述目标小文件；若存在，则直接读取所述目标小文件；若不存在，则获取包含所述目标小文件的聚合文件，将所述聚合文件中的目标小文件读取至所述缓存，在所述缓存中读取所述目标小文件。该方法将目标小文件读取至缓存中，当需要大量读取小文件时，可获得较高的缓存命中率，缩短了小文件的读取IO路径，提高了小文件的读取效率。本发明专利技术还公开了一种读取小文件的装置和设备，均具有上述有益效果。本发明专利技术还公开了一种存储有计算机程序的计算机可读存储介质，也具有上述有益效果。

【技术实现步骤摘要】
读取小文件的方法、装置和设备及计算机可读存储介质
本专利技术涉及分布式存储系统领域，特别是涉及一种读取小文件的方法，还涉及一种读取小文件的装置及设备，也涉及一种存储有计算机程序的计算机可读存储介质。
技术介绍
分布式存储系统，是将数据分散存储在多台独立的设备上，以降低网络压力，具有较高的可靠性和安全性。在存储系统中，小文件场景则是需要考虑的核心场景之一，例如，在一些社交购物网站、广电、网络视频中，都会产生文本、图片、音乐等大量的小文件场景。因此小文件的性能问题是文件系统需要考虑的关键问题之一。在小文件场景下，文件数量众多，磁盘占用率较高；在操作时需要一次写入，多次读写，因此文件操作较为频繁。在现有技术中，每个小文件进行读取时，都需要调用一次数据读取接口，执行一次全读流程，磁盘读数据压力较大。当需要大量读取小文件时，则需要频繁调用所述数据读取接口，小文件读取IO路径较长，且分析元数据、读数据耗时较长，在此种情况下，小文件的读取效率大大降低。因此，如何缩短小文件的读取IO路径，提高小文件的读取效率，是本领域技术人员需要解决的技术问题。
技术实现思路
本专利技术的目的是提供一种读取小文件的方法本文档来自技高网...

【技术保护点】
一种读取小文件的方法，其特征在于，包括：根据目标小文件的索引节点，判断缓存中是否存在所述目标小文件；若存在，则直接读取所述目标小文件；若不存在，则获取包含所述目标小文件的聚合文件，将所述聚合文件中的目标小文件读取至所述缓存，在所述缓存中读取所述目标小文件。

【技术特征摘要】
1.一种读取小文件的方法，其特征在于，包括：根据目标小文件的索引节点，判断缓存中是否存在所述目标小文件；若存在，则直接读取所述目标小文件；若不存在，则获取包含所述目标小文件的聚合文件，将所述聚合文件中的目标小文件读取至所述缓存，在所述缓存中读取所述目标小文件。2.如权利要求1所述的方法，其特征在于，所述获取包含所述目标小文件的聚合文件，将所述聚合文件中的目标小文件读取至所述缓存，在所述缓存中读取所述目标小文件包括：根据所述目标小文件的索引节点，获取所述目标小文件在所述聚合文件中的偏移量，根据所述偏移量计算得出聚合对象；调用数据读取接口，将所述聚合对象读取至所述缓存；根据所述偏移量计算得出所述目标小文件在所述聚合对象中的起始位置和数据长度，根据所述起始位置和数据长度读取所述目标小文件。3.如权利要求2所述的方法，其特征在于，还包括：读取所述目标小文件之前，为所述目标小文件设置读写互斥的读锁；读取所述目标小文件之后，解除所述读锁。4.如权利要求3所述的方法，其特征在于，还包括：将读取的所述目标小文件发送给用户。5.一种读取小文件的装置，其特征在于，包括：判断模块，用于根据目标小文件的索引节点，判断缓存中是否存在所述目标小文件；第...

【专利技术属性】
技术研发人员：张书扬，
申请(专利权)人：郑州云海信息技术有限公司，
类型：发明
国别省市：河南,41