海量文件系统中基于特征实现文件多维度浏览
【出 处】:
【作 者】:
贺扬
何连跃
陈博
徐俊
徐照淼
国防科学技术大学计算机学院
湖南长沙410073
【摘 要】SMDFS可以高效地管理百亿级数量文件。然而针对照片、音乐等海量数据,往往需要从多个维度快速浏览文件,基于目录结构管理海量文件的传统文件组织方式很难满足这一要求。在SMDFS文件系统基础之上,为文件引入特征属性,并提出基于特征的海量小文件倒排索引技术和分布索引技术,使SMDFS可根据多个特征快速浏览文件。实验数据表明,支持特征的SMDFS能为海量小文件提供高效管理和多维度快速浏览能力,同时基于文件目录结构访问海量小文件的性能并没有明显下隆.
上一篇:基于OpenCL的JPEG压缩算法并行化设计与实现
下一篇:基于MapReduce的Bagging决策树优化算法