首页 | 官方网站   微博 | 高级检索  
     

大规模分布式文件系统元数据管理综述
引用本文:王 洋,刘 星,须成忠,江 松,王 刚,文 韬,范小朋,陆 平.大规模分布式文件系统元数据管理综述[J].集成技术,2016,5(2):57-72.
作者姓名:王 洋  刘 星  须成忠  江 松  王 刚  文 韬  范小朋  陆 平
作者单位:1. 中国科学院深圳先进技术研究院云计算研究中心深圳 518055;2. 中国科学院深圳先进技术研究院云计算研究中心深圳 518055; 美国韦恩州立大学电子与计算机工程系底特律 482023;3. 中兴通讯股份有限公司南京 210012
基金项目:科技部973计划(2015CB352400);国家自然科学基金(U1401258
摘    要:文件系统的元数据主要是用来描述它的命名空间,访问权限和数据定位等信息的数据。由于50%~80%的文件系统访问要涉及到元数据,元数据服务的性能将极大地影响整个分布式文件系统的性能。为此,文章重点讨论元数据管理面临的问题,从元数据服务的高可扩展技术、高性能技术和高可用技术三个主要方向进行综述,重点分析了各自的主要问题以及目前发展起来的一些主流技术,同时对未来分布式文件系统的元数据管理一些值得关注的问题进行了梳理和展望,为相关研究提供一定的参考。

关 键 词:元数据  分布式文件系统  工作负载  高可扩展  高性能  高可用

A Review on Metadata Management in Large-Scale Distributed File Systems
Authors:WANG Yang  LIU Xing  XU Chengzhong  JIANG Song  WANG Gang  WEN Tao  FAN Xiaopeng and LU Ping
Abstract:Metadata of ifle systems is the data in charge of maintaining namespace, permission semantics and location of ifle data blocks. Metadata operations can account for up to 80% of total ifle system operations. As such, the performance of metadata services substantially impacts the overall performance of distributed ifle systems, especially with the advent of big data era, posing great pressure on the underlying storage systems. This paper reports the state-of-the-art research on the metadata services in large-scale distributed ifle systems. The study was conducted from three perspectives that are always used to characterize the ifle systems: high-scalability, high-performance and high-availability, with focus squarely on their respective major challenges as well as their developed mainstream technologies. Additionally, some existing problems in this research were also identiifed and analyzed, which could be used as a reference for related studies.
Keywords:metadata management  large-scale distributed file system  workload  high-scalability  high-performance  high-availability
本文献已被 万方数据 等数据库收录!
点击此处可从《集成技术》浏览原始摘要信息
点击此处可从《集成技术》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司    京ICP备09084417号-23

京公网安备 11010802026262号