使用 condor web 服务管理网格资源

《使用 condor web 服务管理网格资源》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、http://www.ibm.com/developerworks/cn/grid/gr-condorg1/在Globus中使用Condor作业提交组件Condor是用来管理对计算敏感的作业的批处理队列系统和作业调度器，它是由Madison的UniversityofWisconsin开发的。它充分利用了这两种技术的优势，在可能会涉及很多管理域的异构计算环境中为作业提交、监视和控制提供一个易用的接口。GlobusToolkit已经成为网格基础设施的事实标准。然而，GlobusToolkit中并没有包

2、括调度组件。调度器的作用就是要制订有关何时何地运行作业的智能决策，从而使作业的吞吐量和对资源的利用率最大化。调度器可以根据作业的需要和资源信息（例如属性、可用性和状态）为作业标识适当的资源。调度器确定何时何地运行作业，然后与Globus进行协调，从而在所选定的资源上运行作业并指定相关的任务，例如身份验证、文件分段传输、监视和控制。使用GlobusToolkit的作业所涉及的典型步骤包括：1.创建作业描述文件2.初始化凭证3.提交作业4.监视作业Condor是一个用来管理计算敏感作业的批处理队列系统

3、。它提供了上面所介绍的特性，而且能够访问分布式资源来获得更多的计算能力。Condor通过诸如classAds和matchmaking之类的创新技术提供了调度功能。与其他批处理队列系统一样，提交给Condor的作业应该作为无人参与的后台任务运行。Condor中有很多运行环境可以用来支持不同类型的作业。运行环境被称为Condor环境。当Condor的作业管理部分与Globus进行协调时，它就会与GlobusToolkit的GRAM（GridResourceAlocationandManagement）

4、组件进行交互。http://www.ibm.com/developerworks/cn/grid/gr-condorg2/有关使用CondorclassAds和matchmaking的过程调度器可以确定在何时何地运行某个作业，然后与Globus进行协调，从而执行相关的认证、文件划分、监视以及对远程执行环境的控制等任务。Condor可以使用classAds和matchmaking技术来提供这种调度能力。有些用户在熟悉网格环境并且了解了有关资源及其可用性和使用情况之后，可能会希望将作业提交到某个特定的

5、资源上。作业可能需要访问只在某个特定资源上可以使用的数据或软件。然而，很多用户都会希望自己只需要简单地运行作业，并让调度器来确定在何时何地真正执行作业，同时允许网格中间件来处理与调度和执行管理有关的有效分布式计算问题所带来的复杂性。在这种情况中，我们可以使用Condormatchmaking，从而允许matchmaker选择适当的资源来执行这个作业，然后使用Globus与远程资源进行协调。网格中的matchmaking是什么？Matchmaking就是使用classAds将作业匹配到资源上。cla

6、ssAd允许机器广播“自己所有的资源可以使用了”这种消息，作业可以广播它们需要的资源。Condor利用这些作业和资源classAds，将最适合运行作业的资源与作业的资源需求进行匹配。classAds资源classAds会广播机器的属性和条件。作业classAd指定了作业所需要的机器的类型，以及运行这个作业可以接受的属性的最大值和最小值。广播在一个Condor池中，资源可以周期性地发送一个资源classAd给中央管理器（centralmanager）。中央管理器包括了一个进程，用于搜集池中所有资源的

7、资源classAds。当提交作业时，另外一个中央管理器进程会查询资源classAds集来确定哪个资源可以匹配作业的需求。在使用Condor-G时，一旦在作业与资源之间确定一个匹配之后，就通过Globus把作业从Condor提交到远程资源上。远程资源正在运行的都是Globus，而不是Condor软件。由于Condor并没有在远程资源上运行，因此它就没有通过一个资源classAd将远程资源属性广播到Condor中央管理器上。为了matchmaker能够了解有关远程Globus资源的信息，并可以调度作业

8、在这些资源上运行，我们必须通过生成并发送一个代表资源classAd而手动将该资源广播到Condor上。如果我们构建了classAd结构并搜集了填充classAd的资源信息，那就可以使用condor_advertise命令将这些信息发送给Condor，这样就可以把这个作业匹配到这个资源上了。使用CondorWeb服务管理网格资源Condor是一个批处理队列系统，负责管理计算密集型的作业和为获得其他计算能力而对分布式资源进行的访问。开发一个Web服务客户机来提交作业，并对Condor池