胡丹
作品数: 3被引量:23H指数:2
  • 所属机构:新疆大学信息科学与工程学院
  • 所在地区:新疆 乌鲁木齐市
  • 研究方向:自动化与计算机技术
  • 发文基金:新疆维吾尔自治区自然科学基金

相关作者

英昌甜
作品数:35被引量:180H指数:8
供职机构:新疆大学信息科学与工程学院
研究主题:内存 SPARK 节能计算 推荐系统 云计算
于炯
作品数:240被引量:979H指数:15
供职机构:新疆大学软件学院
研究主题:任务调度 大数据 内存 云计算 网格
邹伟明
作品数:3被引量:28H指数:3
供职机构:新疆大学信息科学与工程学院
研究主题:MAPREDUCE HADOOP LATE HADOOP平台 调度算法
基于负载均衡的Hadoop平台下作业调度算法研究
随着信息技术的不断发展,各个企业的IT系统中存储着越来越多与企业运营息息相关的数据,可以说这些数据是企业发展的核心。所有IT系统的发展都依赖于数据。各行各业每天都会产生海量的数据,并且数据量的增长成爆炸式。2010年底,...
胡丹
关键词:MAPREDUCEHADOOPLATE
文献传递
Hadoop平台下改进的LATE调度算法被引量:15
2014年
对Hadoop平台下的MapReduce现有的调度器进行分析研究。针对LATE调度算法在分配节点执行落后任务的备份任务时的不足,结合Hadoop集群的异构性和工作负载的特殊性,在LATE调度算法的基础上提出了一种改进的LATE调度算法。对该算法进行实验和性能分析,表明该算法在完成时间和负载均衡方面有很大改进。
胡丹于炯英昌甜邹伟明
关键词:HADOOPMAPREDUCELATE
基于动态等待时间阈值的延迟调度算法被引量:8
2012年
针对已有的延迟调度算法存在的两个问题,即建立在节点会很快空闲的理论假设下有一定限制,当节点不会很快空闲时算法性能严重下降和基于静态的等待时间阈值不能适应云计算数据中心动态的负载变化及不同用户作业的需求,提出了一种基于动态等待时间阈值的延迟调度算法(dynamic waiting time delay scheduling,DWTDS)。该算法通过给无本地数据节点设置节点最大等待时间,以适应节点不会很快空闲的情况;通过分析数据中心各动态参数,根据概率模型调整作业的等待时间阈值。实验验证该算法在响应时间及负载均衡性方面优于已有的延迟调度算法。
邹伟明于炯英昌甜胡丹
关键词:云计算HADOOPMAPREDUCE