期刊文献+

探究基于节点能力的Hadoop集群任务自适应调度方法

在线阅读 下载PDF
导出
摘要 Hadoop特有的集群任务,在真正运行之中,常会凸显不均衡态势下的负载情况。本文辨识了集群节点表现出来的执行特性、节点执行能力。建构在节点能力根基之上的多重任务,含有自适应调度这一配置方式。这类调度路径,按照节点特有的历程、现存负载状态、节点特性及关联的失效率,调整着各时段的运行总量。测验出来的数值表明,集群任务耗费的完成时段被显著缩减,节点荷载的总负荷均衡,资源调配适当。
作者 孙峰
出处 《科技风》 2015年第9期102-102,共1页
  • 相关文献

参考文献4

二级参考文献39

  • 1张桂刚,李超,张勇,邢春晓.一种基于海量信息处理的云存储模型研究[J].计算机研究与发展,2012,49(S1):32-36. 被引量:23
  • 2Apache Hadoop. What Is Apache Hadoop [EB/OL]. [2012- 03-07]. http://hadoop, apache, org/.
  • 3L~immel R. Google's MapReduce programming model-- Revisited [J]. Science of Computer Programming, 2008, 70 (1) : 1-30.
  • 4Apache Hadoop. Fair Scheduler Guide [EB/OL]. [2012-04- 25]. http://aechive, clouder, com/cdh/3/hadoop/{air_seheduler. html.
  • 5Apache Hadoop. Capacity Scheduler Guide [EB/OL]. [2012- 04-25]. http://aechive, clouder, com/cdh/3/hadoop/apacity_ scheduler, html.
  • 6Tian C, Zhou H, He Y, et al. A dynamic Mapreduce scheduler for heterogeneous workloads [C] //Proc of the 8th Int Conf on Grid and Cooperative Computing (GCC'09). Piscataway, NJ: IEEE, 2009:218-224.
  • 7夏袢.Hadoop平台下的作业调度算法研究与改进[D].广州:华南理工大学,2010.
  • 8Sastry G. FlowScheduler: Towards efficient task assignment for Hadoop [EB/OL]. [ 2012-02-26 ]. http://www. girishsastry, com.
  • 9Fischer M J, Su X, Yin Y. Assigning tasks for efficiency in Hadoop [C] //Proc of the 22nd ACM Syrup on Parallelism in Algorithms and Architectures. New York: ACM, 2010: 30- 39.
  • 10Boutaba R, Cheng L, Zhang Q. On cloud computational models and the heterogeneity challenge [J]. Journal of lnternet Services and Applications, 2012, 3(1): 77-86.

共引文献54

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部