HI,欢迎来到学术之家,发表咨询:400-888-7501  订阅咨询:400-888-7502  股权代码  102064
0

基于RS纠删码的HDFS云存储动态副本策略研究

作者:王引娜; 宋耀光; 倪巍; 徐广庆rs纠删码动态副本策略hdfs

摘要:目前多数云存储文件系统为保证其系统可靠性和性能所采用的静态完全副本冗余机制存在存储效率低、负载均衡能力差等缺点,为了提高云存储效率以及优化云存储的负载均衡能力,该文根据应用HDFS的经验,提出一种基于RS纠删码的云存储动态副本的冗余策略-SeaMaiden。SeaMaiden引入了副本调整模块和纠删码编解码模块,通过周期性的计算文件的热度,进而动态调整文件的副本数。当文件的副本数低于3时,则调用纠删码编解码模块对文件进行编码,提升文件的可靠性。当文件的热度级别上升时,则动态增加文件副本数,提升HDFS的负载均衡能力。通过实验证明SeaMaiden能有效提高HDFS的存储效率、可靠性及响应速度。

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

科技创新导报

《科技创新导报》(旬刊)创刊于2004年,由中国航天科技集团公司主管,中国宇航出版有限责任公司;北京合作创新国际科技服务中心主办,CN刊号为:11-5640/N,自创刊以来,颇受业界和广大读者的关注和好评。

杂志详情