1、xxxx 系統系統 運維操作手冊運維操作手冊 xxxx 公司 二零零九年十月 版本控制版本控制 版本號版本號日期日期參與人員參與人員更新說明更新說明 1.02011-06-06創建 分發控制分發控制 編號編號讀者讀者文檔權限文檔權限與文檔的主要關系與文檔的主要關系 1創建、修改、讀取負責編制、修改、審核 2批準負責本文檔的批準程序 3標準化審核作為本項目的標準化負責人，負 責對本文檔進行標準化審核 4讀取 5讀取 1概述概述.5 2 2主機系統主機系統.6 2.1檢查文件系統利用率.6 2.2查看系統硬件軟件告警日志.6 2.3檢查僵死或運行時間過長的進程.7 2.4檢查系統 CPU 利用率.

2、8 2.5檢查系統內存利用率.8 2.6檢查系統 IO 利用率.9 2.7檢查系統交換量.10 2.8檢查系統高可用性（HA）的使用狀態.10 2.9清理過時的系統臨時文件.11 2.10檢查磁帶庫和磁帶使用情況.11 2.11修改用戶口令.12 2.12清洗磁帶機.12 2.13檢索操作系統日志.13 3系統啟動與關閉系統啟動與關閉.14 3.1系統的運行架構.14 3.2系統的啟動.15 3.3系統的關閉.18 4系統部署系統部署.24 4.1生成部署包.24 4.2程序部署.28 5重要的系統參數配置重要的系統參數配置.41 5.1CONFIG.PROPERTIES.41 5.2SPRI

3、NG-MISTASK.XML.41 6日志查看日志查看.43 6.1WAS 日志.43 6.2DB2 日志.43 7查系統是否正確運行查系統是否正確運行.45 8系統管理員維護人員信息日志系統管理員維護人員信息日志.47 9查看表空間及附件硬盤的使用情況查看表空間及附件硬盤的使用情況.48 9.1DB2 表空間查看 .48 9.2115 服務器附件文件占用情況.48 10服務停啟順序服務停啟順序.50 1 概述概述 本手冊給出了湖南省移動公司的報賬平臺系統及報賬平臺外圍 系統的運維操作細則。手冊從主機系統、應用系統以及數據庫系統 三個方面對任務項進行組織，對應章節包括第 Error! Refe

4、rence source not found.章報賬平臺主機系統，第 Error! Reference source not found.章報賬平臺應用軟件系統以及第 Error! Reference source not found.章報賬平臺數據庫系統。每個任務項中可能涉及的表格將 在第 5 章表單模板中統一給出。 2 2 主機系統主機系統 2.1 檢查文件系統利用率檢查文件系統利用率 編 號名 稱檢查文件系統利用率 描 述此任務檢查文件系統利用率不低于 85%或有大于 0.5G 以上的空閑空間 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1. 系統的正常運行應保證

5、有足夠的磁盤空間，文件系統被寫滿會導致 系統服務的中斷，可以使用 df k 進行檢查是否有文件系統利用率 高于 85%并且可用空間小于 500M，對于保存數據庫數據文件所在的 磁盤空間和保存歸檔日志的應有更高的空閑空間。 2. 但也不可以盲目的擴展文件系統，因為目前 31 省所使用的文件系統 均不可以縮小，如果要回收空間只能刪除重建 表單填寫參見表單模板中的巡檢單表格 2.2 查看系統硬件軟件告警日志查看系統硬件軟件告警日志 編 號名 稱查看系統硬件軟件告警日志 描 述此任務查看系統硬件軟件告警日志 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 以 root 運行 tai

6、l /var/adm/messages 查看，如果系統寫滿了一個 message 文件會自動備份為 message.0， message.1 等。 表單填寫參見表單模板中的巡檢單表格 2.3 檢查僵死或運行時間過長的進程檢查僵死或運行時間過長的進程 編 號名 稱檢查僵死或運行時間過長的進程 描 述此任務查看檢查僵死或運行時間過長的進程 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1. 使用 ps ef|grep applprd 和 ps ef |grep oraprd 進行檢查 （運行時間超過 12 小時的絕大部分是需要注意的進程） 。 2. 而程序名為 defunct

7、 的均為孤兒或僵死進程。 3. 由于，夜晚為非工作時間，因此運行超過 12 個小時的應用服務例如， form 服務的客戶端進程（AIX 平臺為 f60runm，SUN 平臺為 f60webmx） ，很可能是運行出錯的進程，應可以 kill 掉，對于數據 庫進程一般不采用在 UNIX 命令中 kill 的方法而是登陸到數據庫使用 alter system kill session ,的方法中止 該數據庫進程。 表單填寫參見表單模板中的巡檢單表格 2.4 檢查系統檢查系統 CPU 利用率利用率 編 號名 稱檢查系統 CPU 利用率 描 述此任務檢查系統 CPU 利用率 操作角色 主機系統 管理員

8、所屬管控類別巡檢執行頻度每日 操作說明 1.prstat a solaris 2. psrinfo -v (CPU 狀態) 表單填寫參見表單模板中的巡檢單表格 2.5 檢查系統內存利用率檢查系統內存利用率 編 號名 稱檢查系統內存利用率 描 述此任務檢查內存利用率 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1.solaris vmstat 查看 free 值 2.prtdiag -v 表單填寫參見表單模板中的巡檢單表格 2.6 檢查系統檢查系統 IO 利用率利用率 編 號名 稱檢查系統 IO 利用率 描 述此任務檢查 IO 利用率 操作角色 主機系統 管理員 所屬管控

9、類別巡檢執行頻度每日 操作說明 1.solaris iostat 表單填寫參見表單模板中的巡檢單表格 2.7 檢查系統交換量檢查系統交換量 編 號名 稱檢查系統交換量 描 述此任務檢查系統交換量 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1. 手動運行的方法如下： topas 2.swap l & swap s solaris 表單填寫參見表單模板中的巡檢單表格 2.8 檢查系統高可用性（檢查系統高可用性（HA）的使用狀態）的使用狀態 編 號名 稱檢查系統高可用性（HA）的使用狀態 描 述此任務檢查系統高可用性（HA）的使用狀態 操作角色 主機系統 管理員 所屬管控類

10、別巡檢執行頻度每日 操作說明 1.webview 狀 態 # /etc/opt/FJSVwvbs/etc/bin/wvstat 2.CF 和心跳狀 態 # cftool - 和 cftool -r 3.SF 狀態 # sdtool -s 4.CIP 狀態# ciptool -a 和 # ciptool -n 5.CRM 狀態 # /etc/opt/FJSVcluster/bin/clgettree 6.RMS 狀態 # hvdisp -a 1. 表單填寫參見表單模板中的巡檢單表格 2.9 清理過時的系統臨時文件清理過時的系統臨時文件 編 號名 稱清理過時的系統臨時文件 描 述此任務清理過時的系

11、統臨時文件 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每周 操作說明 1. f60*dump*。 2. $ORACLE_HOME/reports60/server/cache/*（最好關閉服務 清理） 。 3. $APPLTMP/*（只有關閉服務后可以進行） 。 表單填寫參見表單模板中的巡檢單表格 2.10 檢查磁帶庫和磁帶使用情況檢查磁帶庫和磁帶使用情況 編 號名 稱檢查磁帶庫和磁帶使用情況 描 述此任務檢查磁帶庫和磁帶使用情況 操作角色 主機系統 管理員 所屬管控類別巡檢執行頻度每周 操作說明 1. 檢查是否有足夠的空間保存備份。 2. 磁帶庫運行中是否有錯誤出現。 表單填寫參見

12、表單模板中的巡檢單表格 2.11 修改用戶口令修改用戶口令 編 號名 稱修改 UNIX 用戶口令 描 述此項目修改用戶口令 操作角色 主機系統 管理員 所屬管控類別 用戶帳號及 密碼管理 執行頻度每月 操作說明 1. 修改 UNIX 密碼步驟如下： letterboxusername1: passwd Enter login password: 您的舊密碼 New password: 您的新密碼 Re-enter new password: 您的新密碼 passwd (SYSTEM): passwd successfully changed for username letterboxuser

13、name2: 2.密碼修改之后，必須及時通知系統管理員。 修改過 UNIX 口令之后，需要通知需要知道口令的人員。 表單填寫參見表單模板中的用戶帳號管理情況登記表 2.12 清洗磁帶機清洗磁帶機 編 號名 稱清洗磁帶機 描 述此任務將清洗磁帶機清洗干凈 操作角色 主機系統 管理員 所屬管控類別備份管理執行頻度每月 操作說明 用清洗帶清洗磁帶機。 表單填寫參見表單模板中的巡檢單表格 2.13 檢索操作系統日志檢索操作系統日志 編 號名 稱檢索 AIX 操作系統日志 描 述此任務檢索操作系統日志 操作角色 主機系統 管理員 所屬管控類別日志管理執行頻度每周 操作說明 1查看用戶登陸日志： 在命令行

14、輸入命令：last 2查看用戶失敗登陸日志： 在命令行輸入命令，進入日志所在目錄：cd /etc/security 查看日志內容： vi failedlogin 3查看 su 命令執行日志內容： 在命令行輸入命令，進入日志所在目錄：cd /var/adm 查看日志內容：vi sulog 4查看 Auditor 文件操作日志 首先需要在系統中開啟 audit 功能，會在系統中自動生成 /etc/security/audit/bin*文件。此處的 bin*指所有以 bin 開頭的文件 進入日志所在目錄：cd /etc/security/audit/ 查看日志： vi bin* 表單填寫參見表單模板

15、中日志檢索申請表及日志檢索記錄表 根據情況可能需要備份介質訪問登記表 3 系統啟動與關閉系統啟動與關閉 3.1 系統的運行架構系統的運行架構 3.2 系統的啟動系統的啟動 編 號名 稱檢查系統啟動 描 述此任務查看系統登錄以了解應用系統此時此刻的運行狀況 操作角色 應用系統 管理員 所屬管控類別巡檢執行頻度系統更改 操作說明 第一步： 第二步：掛接 NFS： 第三步：啟動其他軟件， 表單填寫參見表單模板中的巡檢單表格 輸入用戶名 root 和 root 的密碼，點擊 OK。 選擇 Global Cluster Service； 選擇 Cluster Admin，選擇其中的任意一個節點，如 db

16、svr； 選擇 rms 標簽頁，在 Tools 菜單中選擇啟動； 啟動后的狀態如下圖所示： 3.3 系統的關閉系統的關閉 編 號名 稱系統關閉 描 述此任務查看系統關閉 操作角色 應用系統 管理員 所屬管控類別巡檢執行頻度系統更改 操作說明 表單填寫參見表單模板中的巡檢單表格 輸入用戶名 root 和 root 的密碼，點擊 OK。 選擇 Global Cluster Service； 第一步： 第二步：關閉其他軟件 這樣，應用就關閉完成了。 選擇 Cluster Admin，選擇其中的任意一個節點，如 dbsvr； 選擇 rms 標簽頁，在 Tools 菜單中選擇關閉； 根據需要，選擇 st

17、op all Apps。 關閉完成后，如下圖所示： 4 系統部署系統部署 4.1 生成部署包生成部署包 首先，需要更新 SVN 上的版本，在版本管理機器 F:ProductSpecialSrc1128src 下， 選定下面的文件，按右鍵，選擇 update： F:ProductSpecialSrc1128WebRoot 下，選定下面的文件，按右鍵，選擇 update： 進入 Eclipse： 查看項目屬性，確實為 F:ProductSpecialSrc1128 的項目： 在項目上按右鍵，選擇 Refresh。 在 Project 菜單，選擇 Clean： 待 Clean 完成后，在 File

18、菜單選擇 Export， 選擇 War file： 導出到一個文件夾： 這樣，部署包就生成了。 4.2 程序部署程序部署 登錄到：15:9060/ibm/console/ 輸入用戶名，可輸入 root： 選擇應用程序企業應用程序，選定 eFinance.war，點擊停止： 待停止完成后，選擇 eFinance.war，點擊刪除： 點擊確定： 點擊保存： 點擊安裝： 點擊瀏覽，選定部署包： 輸入上下文根： eFinance ，點擊下一步： 點擊下一步： 選定所有集群和服務器，選定 ent_bpms，點擊應用； 選定 ent_bpms，點擊下一步： 點擊完成：

19、點擊保存： 部署包已經部署完成，如下圖所示： 下一步的任務是啟動應用程序。 點擊集群： 選擇 Cluster，點擊停止： 待選擇 Cluster，點擊啟動： 啟動完成后，如下圖所示： 啟動完成后，進行驗證：16/eFinance 5 重要的系統參數配置重要的系統參數配置 6 日志查看日志查看 6.1 WAS 日志日志 編 號名 稱檢查 WAS 日志 描 述此任務查看WAS 日志狀況 操作角色 應用系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1Wassvr 日志存放于： /opt/IBM/WebSphere/AppServer/profiles/Ap

20、pSrv01/logs/wassvr 2dbsvr 日志存放于 /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/logs/dbsvr 表單填寫參見表單模板中的巡檢單表格 6.2 DB2 日志日志 編 號名 稱檢查 DB2 日志 描 述此任務查看DB2 日志狀況 操作角色 應用系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1Db2 日志存放與 dbsvr 服務器的： /ef/appinst/sqllib/db2dump 表單填寫參見表單模板中的巡檢單表格 7 查系統是否正確運行查系統是否正確運行 編 號名 稱檢查系統登錄 描 述此任務查看系統登錄以了解應用系統此時此刻的運行狀況 操作角色 應用系統 管理員 所屬管控類別巡檢執行頻度每日 操作說明 1. 如果頁面能正常顯示，說明 115 服務器或 11