消息机制下的MapReduce数据流优化

作者：葛君伟 蒋仙 方义秋mapreduce数据密集型计算数据流

摘要：MapReduce编程模型是广泛应用于云计算环境下处理海量数据的一种并行计算框架。然而该框架下的面向数据密集型计算,集群节点间的数据传输依赖性较强,造成节点间的消息处理负载过重。提出基于消息机制的MapReduce改进模型,优化数据流。经实验数据表明,基于消息机制的MapReduce框架能提高数据密集型应用上的负载均衡。

注：因版权方要求，不能公开全文，如需全文，请咨询杂志社