《计算机应用杂志》发表论文赏析

云环境下影响数据分布并行应用执行效率的因素分析

来源:计算机应用杂志2017年第7期北京时间:

作者:马生俊, 陈旺虎, 俞茂义, 李金溶, 郏文博

单位:西北师范大学 计算机科学与工程学院, 兰州 730070

摘要:云环境下,类似MapReduce的数据分布并行应用被广泛运用。针对此类应用执行效率低、成本高的问题,以Hadoop为例,首先,分析该类应用的执行方式,发现数据量、节点数和任务数是影响其效率的主要因素;其次,探讨以上因素对应用效率的影响;最后,通过实验得出在数据量一定的情况下,增加节点数不会明显提高应用的执行效率,反而极大地增加执行成本;当任务数接近节点数时,应用的执行效率较高、成本较低。该结论为云环境中类似MapReduce的数据分布并行应用的效率优化提供借鉴,并为用户租用云资源提供参考。

关键词:云环境,数据分布并行应用,MapReduce,效率,成本

基金资助:国家自然科学基金资助项目(61462076)。

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!