HI,欢迎来到学术之家,发表咨询:400-888-7501  订阅咨询:400-888-7502  股权代码  102064
0

基于负载估计的Hadoop资源感知调度器

作者:荆建梅; 高文; 于铄航hadoop异构性作业调度资源感知负载均衡

摘要:目前,大多数基于云的应用都需要大规模的数据处理能力,而待处理数据的增长速度远远超过可用计算能力的增长速度,Hadoop被用来通过商用硬件实现大型集群的分布式处理。在大型集群中,工作负载一般是异构性的,这主要是指在大型集群上同时运行I/O密集型,CPU密集型或网络密集型的作业,而这些作业又有不同类型的资源需求。Hadoop的默认作业调度算法是基于FIFO实现的,而它并没有考虑到不同类型作业的并行化调度问题。

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

科技尚品

《科技尚品》(CN:11-5573/Z)是一本有较高学术价值的月刊,自创刊以来,选题新奇而不失报道广度,服务大众而不失理论高度。颇受业界和广大读者的关注和好评。 《科技尚品》办刊宗旨:聚焦中外科技前沿动态,促进科技传播与发展;营造促进科技创新、加强科技交流的学术环境。

杂志详情