服务器 频道

Win2008 HPC群集作业管理之了解作业和任务

  【IT168 专稿】在"作业管理"中,可以监视、管理和提交群集作业。所有作业都必须有关联的作业模板。HPC 群集管理器提供了几个图表和报告,用于跟踪群集的作业统计信息。

  了解作业和任务

  Windows HPC Server 2008 作业是提交到 HPC 作业计划程序服务的资源请求,其中包含一个或多个任务。作业会请求"在 Z 时间量内使用 X 数量的 Y 资源"。例如,作业可能会请求使用"有大量内存"组中的八个节点两个小时。将作业提交到 HPC 作业计划程序服务后,作业将被放入队列中,它将在队列中等待,直到运行其任务所需的资源可用为止。

  在 Windows HPC Server 2008 中,任务是作业运行的不连续命令。任务可以直接运行应用程序,也可以由执行多个活动的批处理文件或脚本组成。任务属性定义了任务所需的运行方式。任务可以包括属性,例如要使用的输入、输出和错误文件。在需要的节点、需要的处理器数量、运行时间限制和节点独占性方面,您也可以指定类似于作业属性的任务属性。

  1、了解作业类型

  可以在 Windows HPC Server 2008 中运行的最常见并行计算作业类型有:"MPI 作业"、"参数清除作业"和"任务流作业"。以下几部分将介绍这三种作业类型:

  MPI 作业

  参数清除作业

  任务流作业

  注意

  这三种作业类型并不是互斥的。一项作业可以包含多项任务,其中一些是参数任务、一些是序列任务,另外一些是并行任务。例如,可以创建一项由 MPI 任务和参数任务组成的任务流作业。

  A、MPI 作业

  MS-MPI 是为 Windows 开发的消息传递接口 (MPI) 的 Microsoft 实施,它允许 MPI 应用程序在 HPC 群集上作为任务运行。对于运行 MPI 应用程序的任务,mpiexec 必须在任务命令之前。

  MPI 任务本质上是并行的。并行任务可以有多种形式,具体决于支持它的应用程序和软件。对于 MPI 应用程序,并行任务通常由在多个内核上同时运行的单个可执行文件组成,各个进程之间存在通信。

  下图展示了一项并行任务:(图1)

 

  B、参数清除作业

  参数清除作业由同时运行的同一应用程序(通常是序列应用程序)的多个实例组成,其输入由输入文件提供,输出定向到输出文件。输入和输出通常是一组索引文件(例如,input1、input2、input3...,output1、output2、output3...),这些文件驻留在一个公共文件夹或若干个独立的公共文件夹中。这些任务之间不存在通信或相关性。这些任务可以并行运行,也可以不并行运行,具体取决于作业运行时群集上可用的资源。

  下图展示了一项参数清除作业:(图2)

 

  C、任务流作业

  在任务流作业中,通常由于一项任务依赖于另一项任务的结果,会按指定顺序运行一组不同的任务。可以通过定义任务之间的相关性来建立任务的运行顺序。

  下图展示了一项任务流作业:(图3)

 

  任务 1 首先运行。请注意,由于任务 2 和 3 不相互依赖,所以只有这两者可以并行运行。任务 4 在任务 2 和 3 全部完成后才运行。

 

0
相关文章