1、集群作業管理系統簡介報告人：羅正平 導 師：肖炳甲研究員1報告主要內容1、集群簡介2、作業管理系統PBS簡介3、作業腳本示例21 集群簡介 集群是一組獨立的計算機（節點）的集合體，節點間通過高性能的互連網絡連接；各節點除了可以作為一個單一的計算資源供交互式用戶使用外，還可以協同工作并表現為一個單一的、集中的計算資源供并行計算任務使用。 機群的各節點都是一個完整的系統：工作站，PC機或SMP機器；互連網絡通常使用商品化網絡，如以太網、FDDI、ATM等；網絡接口與節點的I/O總線松耦合相連；各節點通常有一個本地磁盤；各節點有自己的完整的操作系統。各節點除了可以作為一個單一的計算資源供交互式用戶使

2、用外，還可以 協同工作并表現為一個單一的、集中的計算資源供并行計算任務使用。特征：3Internet1 集群簡介Ctrldata Cluster（.8）管理節點配置：CPU：Intel(R) Xeon(R) 1.6G內存：4G（41.0G）系統：Linux AS4.0計算節點配置：CPU： Intel(R) Xeon(R) 3.0G內存： 4G（41.0G）系統：Linux AS4.042 作業管理系統-PBS最初由NASA在20世紀90年代早期開發面向集群系統提供有效的作業管理服務目前有兩個版本：OpenPBS（開源）和PBSPro（商業）CHESS集群管理系統集成了PBS系列管理軟件TOR

3、QUE。PBS： Portable Batch SystemTORQUE：Tera-scale Open-source Resource and QUEue manager52 作業管理系統-PBS特點易用性：PBS為所有資源提供統一的借口，易于配置，作業調度靈活移植性：用于shell和批處理等各種環境適配性：適配與各種管理策略，提供可擴展的認證和安全模型靈活性：支持交互、批處理、串行及并行作業擴展性：標準PBS支持約300個節點，滿足集群需要TORQUE：基于PBS項目的開源軟件，可以認為是開源的OpenPBS的改進版。其優點有：擴展性強：TORQUE可以支持超過1500個節點容錯性好：修正

4、了大量的bug，提供更多故障支持62 作業管理系統-PBS結構PBS Server：運行于集群的管理節點。創建并接受作業、修改作業、激活調度器（PBS Scheduler）以及通知PBS執行器（PBS Moms）執行作業PBS Scheduler：根據資源管理器獲知各個節點的資源狀況和系統的作業信息生成相應的作業優先級列表PBS Moms：每個節點均有一個后臺進程，該進程真正啟動和停止提交到該節點的作業72 作業管理系統-PBS作業會話實現clientserverscheduler1723456mommommommommommommommommomqsub82 作業管理系統-PBS常用命令作業

5、提交命令-qsub命令格式： qsub my_script返回信息： 作業ID號92 作業管理系統-PBS常用命令作業狀態檢查命令qstat命令格式：qstat -f102 作業管理系統-PBS常用命令作業掛起命令-qhold命令格式： qsub job_id作業刪除命令-qdel命令格式： dsel job_id 詳細信息請查詢PBS使用指南113 作業腳本示例runefit.pbs#PBS -S /bin/bash#PBS -o out_runefit#PBS -e err_runefit#PBS -l nodes=4:ppn=2echo -echo -n Job is running o

6、n node ; cat $PBS_NODEFILEecho -echo PBS: qsub is running on $PBS_O_HOSTecho PBS: originating queue is $PBS_O_QUEUEecho PBS: executing queue is $PBS_QUEUEecho PBS: working directory is $PBS_O_WORKDIRecho PBS: execution mode is $PBS_ENVIRONMENTecho PBS: job identifier is $PBS_JOBIDecho PBS: job name

7、is $PBS_JOBNAMEecho PBS: node $PBS_NODEFILEecho PBS: current home directory is $PBS_O_HOMEecho -cd $PBS_O_WORKDIR./efitd129d不必要部分12-Job is running on node chess_004.localdomainchess_004.localdomainchess_003.localdomainchess_003.localdomainchess_002.localdomainchess_002.localdomainchess_005.localdomainchess_005.localdomain-PBS: qsub is running on chess_001.localdomainPBS: originating queue is defaultPBS: executing queue is verysmallPBS: working directory is /home/lzp/efit/efitht7uPBS: execution mode is PBS_BATCHPBS: job identifier is 270.chess_001.localdomainPBS: job name is ru