基于任务分配和数据集副本的科学工作流数据布局
来源：计算机工程杂志2020年第5期北京时间：
作者：尚蕾, 刘茜萍
单位：南京邮电大学 计算机学院 江苏省大数据安全与智能处理重点实验室, 南京 210023
摘要：云环境下科学工作流的数据布局成为当前工作流研究中的一个热点问题，对科学工作流中任务和数据之间多对多关系进行分析，可以发现不同数据布局方案在数据传输上的费用各不相同，在很大程度上影响工作流的运行成本。为降低科学工作流数据集传输费用，提出一种基于任务分配和数据集副本的科学工作流数据布局方法。该方法从任务分配开始，在定量计算任务依赖度的基础上进行任务分配，根据分配结果给出一个基于数据集副本的两阶段数据布局方法，以实现科学工作流运行中传输费用的优化。实例结果表明，与工作流层方法相比，该方法可以有效降低科学工作流的运行成本。
关键词：云环境,科学工作流,任务分配,数据集副本,数据布局,传输费用
基金资助：国家自然科学基金（61602260）。
