跨多个编程系统的基于集群的任务调度方法

陆,Hongliang，曹,Jiannong，乔,Shailey，韩宇奇王，Lv, Saohe,王,小(2016)跨多个编程系统的基于集群的任务调度方法。见:第十五届并行与分布式计算国际研讨会论文集。222 - 229页。来自:ISPDC 2016:第十五届并行与分布式计算国际研讨会，2016年7月8-10日，福州，中国。

PDF(公开版本) -已出版版本 仅限仓库工作人员使用

摘要

随着数据处理需求的不断增长，不同类型的数据处理系统正在开发。新的编程系统具有不同的特点，如数据处理的类型、处理技术和性能。然而，多个新系统给非专业用户带来了困难，如选择正确的系统和新系统的使用方法。为了减轻普通用户执行数据处理任务的负担，并充分利用系统的相关功能，我们打算整合目前流行的编程系统，提供更高效的数据处理服务。在本文中，我们提出解决集成多个编程系统的任务调度问题。我们设计了一种基于集群的方法，用于跨多个编程系统的任务调度。这种方法有助于最小化工作流的最大完成时间和资源消耗。仿真结果表明，该方法可以显著降低工作流的资源消耗，同时大幅度降低工作流的最大完成时间。

项ID:	56217
项目类型:	会议项目(研究- E1)
国际标准图书编号:	978-1-5090-4152-7
关键词:	大数据，任务调度，数据处理系统，基于集群，遗传算法
把日期:	2018年12月13日02:10
代码:	46信息与计算科学> 4606分布式计算和系统软件> 460605分布式系统和算法@ 100%
搜索引擎优化代码:	89信息和通信服务> 8998环境可持续的信息和通信服务> 899899其他地方未分类的环境可持续的信息和通信服务@ 100%
下载:	总:3
	更多的统计数据