对象存储并行文件系统小文件性能优化研究
【出 处】:
【作 者】:
周恩强
[1] ;
董勇
[1] ;
张伟
[1] ;
卢宇彤
[1]
【摘 要】
对象存储并行文件系统在高性能计算领域被广泛采用,虽然大文件访问性能优异,但其小文件访问存在局限性.通过分析典型对象存储并行文件系统下的小文件的访问开销,采用服务端小文件专用缓存和基于对象命名关联性预取的方法提高小文件的缓存命中率,降低对象存储架构下小文件的读取延迟.基于Lustre并行文件系统实现了该方法.实际系统测试表明,该方法可显著提高小文件访问性能,其中小文件打包性能提升最大可达88%.
相关热词搜索: 并行文件系统 缓存 对象存储 文件预取 parallel file system cache object storage prefetching
上一篇:超级计算中心供电系统探讨
下一篇:GPGPU性能模型研究