作者：张栗粽; 崔园; 罗光春; 陈爱国; 卢国明; ...大数据分布式存储元数据管理hdfs
摘要：随着大数据时代的到来，分布式存储技术应运而生。目前主流大数据技术Hadoop的HDFS分布式存储系统的元数据存储架构上一直存在可扩展性差和写延迟高等问题，其在官方2．0版本中针对可扩展性的解决方案（Fe-deration）仍不完美，仅解决了原有HDFS扩展性的问题，在元数据分配的问题上没有考虑NameNode的异构性能差异，也未解决NameNode集群动态负载均衡的问题。针对该情况，提出了一种动态负载均衡的分布NameNode算法，通过元数据多副本异构节点的动态适应性备份，使元数据在考虑节点性能及负载的情况下实现了动态分布，保证了元数据服务器集群的性能；同时结合缓存策略及自动恢复机制，提高了元数据的读写性及可用性。该算法在试验验证中达到了较为理想的效果。
注：因版权方要求，不能公开全文，如需全文，请咨询杂志社
