1、Netapp 存儲(chǔ)日常維護(hù)手冊(cè)GTI PROFESSIONAL SERVICESNETAPP 存儲(chǔ)日常維護(hù)手冊(cè)TT用戶名稱(chēng):TT目 錄1.0目標(biāo)_32.0設(shè)備硬件說(shuō)明_43.0 指示燈說(shuō)明_ 64.0 設(shè)備管理_115.0 巡檢及巡檢方法_176.0 設(shè)備故障應(yīng)急預(yù)案 _181.0 目標(biāo)NetApp 解決方案能夠助客戶有效地簡(jiǎn)化運(yùn)作，同時(shí)最大限度地降低風(fēng)險(xiǎn)，為那些不斷經(jīng)歷變化的企業(yè)提供更高的性能和可擴(kuò)展性。借助于產(chǎn)品、技術(shù)和合作伙伴的良好組合，NetApp 解決方案有助于解決最為迫切的 IT 和業(yè)務(wù)問(wèn)題，同時(shí)最大限度地提高投資回報(bào)率。 本指南是為使用NetApp存儲(chǔ)系統(tǒng)的維護(hù)人員編寫(xiě)的基本管理

2、知識(shí)，目標(biāo)是指導(dǎo)維護(hù)人員如何進(jìn)行每天的健康檢查。詳細(xì)的存儲(chǔ)系統(tǒng)和命令管理參見(jiàn)隨機(jī)手冊(cè)。 在線幫助2.0 設(shè)備硬件說(shuō)明2.1 FAS3140硬件視圖前視圖 控制器控制器電源電源后視圖2.2 disk shelf DS14mk4視圖前視圖后視圖ESH4模塊AESH4模塊B電源電源3.0 指示燈說(shuō)明3.1 controller 指示燈指示燈說(shuō)明(Power) (fault) (controller A) (controller B) Fault LED故障燈無(wú)故出現(xiàn)為橘色時(shí)請(qǐng)查看系統(tǒng)日志信息,聯(lián)系服務(wù)技術(shù)支持GTI3.2 DISK SHELF指示燈說(shuō)明3.3 ESH4模塊指示燈說(shuō)明3.4 電源指示燈

3、說(shuō)明(指示描述信息見(jiàn)ESH4模塊卡片)3.5 disk 指示燈說(shuō)明4.0 設(shè)備管理 4.1 Filerview 圖形管理接口 Filerview是 NetApp提供的圖形管理接口，可以方便地實(shí)現(xiàn)對(duì) NetApp的存儲(chǔ)設(shè)備的管理。啟動(dòng)瀏覽器訪問(wèn) IP地址na_admin。 你需要: 使用 Microsoft IE或 Netscape Navigator (version 4以上) URL: http:/filername/na_admin 如果有錯(cuò)誤,可能和你的DNS有關(guān),你可以用:http:/ip_address_of filer/na_admin,然后點(diǎn)擊Filerview進(jìn)入管理界面,通過(guò)

4、filerview你可以完成幾乎所有的管理任務(wù)點(diǎn)擊 FILER VIEW圖標(biāo)進(jìn)入 FILER VIEW管理界面，輸入用戶名和密碼可以完成存儲(chǔ)設(shè)備、卷、設(shè)備、網(wǎng)絡(luò)、安全、LUN、NDMP、SNMP、SnapMirror等配置。以下為常用菜單功能說(shuō)明：分類(lèi)操作實(shí)施路徑備注基本管理顯示序列號(hào)和版本信息Filer->Show Status檢查軟件許可Filer->Manage Licence系統(tǒng)狀態(tài)報(bào)告Filer->Report檢查日志信息Filer->Syslog Messages命令行接口Filer->Use Command Line配置自動(dòng)郵件通知：發(fā)件人、郵件服務(wù)

5、器等Filer->Configure Autosupport設(shè)置日期和時(shí)間Filer->Set Data/Time設(shè)置時(shí)區(qū)Filer->Set Timezone關(guān)機(jī)和重啟動(dòng)Filer->Shut Down and Reboot系統(tǒng)實(shí)時(shí)狀態(tài)Filer->Show System Status磁盤(pán)和空間管理磁盤(pán)管理Storage->Disks-> Manage適配器信息Storage->Adapters->Report建立 AggrAggregate->Add管理 AggrAggregate->Manage建立 VolVolume-&

6、gt;Add在aggr建立后管理 VolVolume->Manage增加限額管理Volume->Quota->Add快照管理Volume->snapshot>Add Volume->snapshot>configure開(kāi)啟和關(guān)閉塊訪問(wèn)協(xié)議LUNs->Enable/Disable建立 LUNLUNs->Wizard增加主機(jī) WWNLUNs->initiator group->AddiSCSI安全模式LUNs-> iSCSI-> initiatorsecurityiSNS服務(wù)LUNs-> iSCSI-> iS

7、NS網(wǎng)絡(luò)管理管理網(wǎng)絡(luò)端口Network-> Manage Interface網(wǎng)絡(luò)基本參數(shù)Network-> Configure增加虛端口：可以為Multi或 SingleNetwork-> Add virtual Interface管理 host文件Network->Manage Host Files管理網(wǎng)絡(luò)組Network->Manage Net Groups配置 DNS和 NIS服務(wù)Network->Manage DNS &NIS Name Service協(xié)議訪問(wèn)配置 NFS輸出向?qū)FS->Add ExportNFS基本配置NFS->

8、; ConfigureCIFS配置向?qū)IFS-> Configure-> Setup WizardCIFS配置參數(shù)CIFS-> Configure-> Setup Wizard個(gè)人主目錄CIFS-> Configure->Homedir增加共享目錄CIFS->Shares-> Add管理共享目錄CIFS->Shares-> manage開(kāi)啟和關(guān)閉 CIFS服務(wù)CIFS->Shares->Enable/Disable測(cè)試域控制器連接正常CIFS-> Test Domain Controller審計(jì)配置CIFS->

9、; Auditing -> ConfigureCIFS連接的進(jìn)程CIFS-> Session Report安全管理安全屬性配置Security-> Configure修改用戶口令Network-> C行 Password管理 Rsh遠(yuǎn)程訪問(wèn)授權(quán)Security-> Manage Rsh Access4.2 命令行(CLI) 你可以用 CONSOLE口 (將 PC機(jī)的串口與 NetApp隨機(jī)帶的 console線連在 filer的CONSOLE口, 打開(kāi) windows里的 hyperterminal或其它仿真終端，波特率設(shè)置為default: 9600波特率, 8

10、位,無(wú)校驗(yàn),1位停止位)和 telnet 登入 filer的命令行窗口.輸入?或者 help可以看到全部命令? halt nfs snapvault aggr help nfsstat snmp arp hostname nis softwareackup httpstat options source cf ifconfig orouted stats cifs ifstat partner storage config igroup passwd sysconfig.命令的詳細(xì)使用方法可以通過(guò) help得到，例如：> help vol display or change charac

11、teristics of volumes The following commands are available; for more information type "help vol <command>" add destroy online size clone lang options split container media_scrub rename status copy mirror restrict verify create offline scrub5.0 巡檢及巡檢方法 5.1 目測(cè) 現(xiàn)場(chǎng)首先進(jìn)行指示燈和 LCD 面板檢查，判斷是否有異

12、常情況發(fā)生。5.2 硬件狀態(tài)檢查>sysconfig r 檢查磁盤(pán)情況正常情況： 發(fā)現(xiàn)所有磁盤(pán)，每個(gè)機(jī)頭都有一個(gè)或多個(gè) spare disk。非正常情況： 任何一個(gè)機(jī)頭沒(méi)有一個(gè) spare disk，或有failed disk>sysconfig v 檢查所有硬件 以上顯示結(jié)果應(yīng)該沒(méi)有failed,error,warning等字樣.5.3 檢查網(wǎng)絡(luò)是否正常使用 ping 存儲(chǔ)設(shè)備 IP 地址，輸入：>ping FILERNAMEIP正常情況： 有相應(yīng)，無(wú)丟包。 非正常情況： ping不通或者丟包嚴(yán)重。>ifconfig a 主要網(wǎng)口狀態(tài)應(yīng)為up>vif statu

13、s VIF所有端口是否正常5.4 檢查 Cluster 狀態(tài)是否正常>cf status正常情況： 2個(gè)節(jié)點(diǎn)狀態(tài)應(yīng)該為enable非正常情況： 任何一個(gè)機(jī)頭顯示非如上所示，就屬于非正常情況5.5 檢查卷容量是否正常使用 df檢查空間使用狀況。正常情況： capacity 低于或等于 90%。非正常情況： capacity 高于 90%。5.6 性能檢查> sysstat x 1 CPU利用率應(yīng)該在80%以下5.7 日志文件檢查>rdfile /etc/messages仔細(xì)檢查是否有failed,error,warning等字樣. 如有,則記錄下來(lái)5.8 收集 autosupp

14、ort 信息Options autosupport.doit 觸發(fā)最新autosupport信息5.9如獲得更多可信息請(qǐng)?jiān)L問(wèn) 6.0附件:存儲(chǔ)設(shè)備緊急情況應(yīng)急預(yù)案6.1 存儲(chǔ)問(wèn)題定位于排查 6.1.1物理檢測(cè) (Power) (fault) (controller A) (controller B) Fault LED故障燈無(wú)故出現(xiàn)為橘色時(shí)請(qǐng)查看系統(tǒng)日志信息,聯(lián)系服務(wù)技術(shù)支持GTI 6.1.2 FilerVIew檢測(cè) 打開(kāi)IE窗口輸入http:/ip_address_of filer/na_admin,然后點(diǎn)擊Filerview進(jìn)入管理界面其中： Filer 顯示設(shè)備名 Model 顯示設(shè)備型

15、號(hào) SystemID 設(shè)備的ID號(hào)碼（不是SN） Version 顯示設(shè)備使用系統(tǒng)的版本 Volumes 顯示設(shè)備的卷信息，如有問(wèn)題會(huì)有報(bào)錯(cuò) Aggregates 顯示設(shè)備AGGR信息，如有問(wèn)題會(huì)有報(bào)錯(cuò) Disks 顯示設(shè)備磁盤(pán)使用情況，如有磁盤(pán)損壞，會(huì)有報(bào)錯(cuò) Status 綠色代表正常 橙色代表有錯(cuò)誤發(fā)生紅色系統(tǒng)有緊急事件，或可導(dǎo)致緊急事件的隱患，并能顯示相應(yīng)的報(bào)錯(cuò)部件的信息 6.2錯(cuò)誤定位步驟 首先通過(guò)設(shè)備的物理狀態(tài)，和網(wǎng)頁(yè)顯示情況可以初步診斷是否是由硬件問(wèn)題引起 例如：若磁盤(pán)隨壞會(huì)有如下癥狀 1：存儲(chǔ)系統(tǒng)的面板上會(huì)有橙色的燈亮起 2：仔細(xì)查看磁盤(pán)的擴(kuò)展柜能發(fā)現(xiàn)損壞的磁盤(pán)上會(huì)有橙色的燈亮起

16、 3：從WEB的管理界面上看見(jiàn)橙色的燈亮起，并在DISK的后面顯示是具體那塊磁盤(pán)出現(xiàn)問(wèn)題6.3 信息收集6.3.1通過(guò)WEB界面來(lái)抓取messages 進(jìn)入WEB管理界面，選擇Filer 點(diǎn)擊syslog messages 即可看見(jiàn)系統(tǒng)的log信息，有助于我們錯(cuò)誤的排查和診斷6.3.2在系統(tǒng)命令行中執(zhí)行:>rdfile /etc/messages 查看messages信息例如: raid.config.filesystem.disk.failed:error: File system Disk /aggr0/plex0/rg2/2a.28 Shelf 1 Bay 12 NETAPP X2

17、74_S10K7146F10 NA01 S/N 3KS08XSN000075290G9C failed. >aggr status r 查看raid組信息,會(huì)看到failed的disk例如:Broken disksRAID DiskDeviceHA SHELF BAY CHAN Pool Type RPM Used (MB/blks) Phys (MB/blks)- - - - - - -failed 2a.28 2a 1 12 FC:A - FCAL 10000 136000/278528000 137104/2807901846.3.3收集autosupport信息Options a

18、utosupport.doit 觸發(fā)最新autosupport信息或使用命令 rdfile /etc/log/autosupport/201001020437.0并使用log記錄的功能手動(dòng)記錄設(shè)備的全部信息。6.4 信息提交6.4.1 autosupport設(shè)置通過(guò)對(duì)autosupport的功能進(jìn)行設(shè)置能對(duì)系統(tǒng)的安全進(jìn)行全面的保護(hù) 需要設(shè)置 mailhost 和 發(fā)郵件報(bào)告發(fā)送和接收人以及發(fā)送方式1：每周會(huì)產(chǎn)生設(shè)備的周報(bào)（weekly report），統(tǒng)計(jì)設(shè)備運(yùn)行狀態(tài)2：在設(shè)備運(yùn)行情況發(fā)生問(wèn)題是，例如硬件損壞，或軟件告警等消息時(shí)會(huì)及時(shí)出發(fā)autosupport給收件人3：若有備件損壞時(shí)，會(huì)第一

19、時(shí)間發(fā)送給收件人和netapp技術(shù)中心，會(huì)自動(dòng)生成備件，并主動(dòng)與用戶聯(lián)系，第一時(shí)間發(fā)送出備件。6.4.2 GTI技術(shù)支持我們建議在設(shè)備的autosupport的接受人里面添加GTI的存儲(chǔ)技術(shù)團(tuán)隊(duì)郵件，當(dāng)問(wèn)題發(fā)生時(shí)，我們會(huì)第一時(shí)間得到消息，會(huì)主動(dòng)與您聯(lián)系，第一時(shí)間為您排查和解決問(wèn)題6.4.3 NETAPP800技術(shù)支持中心NETAPP的全球技術(shù)支持中心電話請(qǐng)010-10-8007131160，語(yǔ)言選擇請(qǐng)按1#中文服務(wù)，選擇3#新CASE建立，填寫(xiě)SN號(hào)#進(jìn)入語(yǔ)音服務(wù)每天早8點(diǎn)至晚8點(diǎn)，由大連的中文技術(shù)支持，其余時(shí)間由國(guó)外技術(shù)支持，24*7小時(shí)保障您的安全。 示例 磁盤(pán)更換步驟1、關(guān)于磁盤(pán)所有權(quán)的

20、概念介紹Ø 磁盤(pán)所有權(quán)：在存儲(chǔ)系統(tǒng)中每個(gè)磁盤(pán)必須被分派到一個(gè)控制器系統(tǒng)中，每個(gè)磁盤(pán)也要分派到一個(gè)池中（讓單機(jī)或集群中一個(gè)機(jī)頭所識(shí)別到磁盤(pán)）Ø 基于硬件的所有權(quán)：磁盤(pán)所有權(quán)是機(jī)頭HBA卡和shelfHBA卡的連接位置決定的，插入新盤(pán)時(shí)系統(tǒng)會(huì)自動(dòng)識(shí)別磁盤(pán)，使其成為一個(gè)熱備盤(pán)加入到POOL0中（在SYNCMIRROR沒(méi)有開(kāi)啟時(shí)候）。Ø 基于軟件的所有權(quán)：磁盤(pán)所有權(quán)是管理員決定的（可以利用命令管理），HBA卡插槽位置將不影響磁盤(pán)所有權(quán)。當(dāng)添加磁盤(pán)時(shí)候需要分派所有權(quán)，否則系統(tǒng)不能馬上識(shí)別新盤(pán)Netapp filer系列對(duì)磁盤(pán)所有權(quán)的支持如下：存儲(chǔ)系列 硬所有權(quán)軟所有權(quán)FAS

21、2050支持FAS3020 FAS3050支持支持FAS3140 支持FAS3070支持FAS6000支持Shelf ID 可以在后面改變2、磁盤(pán)ID，BAY，shelf ID概念Drive bay 013以DSMK2 ATFC /-FCX為例子：Shelf ID 為1的shelf 第一個(gè)BAY（0）的磁盤(pán)ID為16，如果連接到控制器的0a口，則磁盤(pán)ID為0a.16.其他磁盤(pán)以此類(lèi)推定位計(jì)算公式shelf ID × 16 + BAY =磁盤(pán)ID 一、 更換原因：磁盤(pán)更換原因會(huì)有很多種可能，以下列出了一些常見(jiàn)的問(wèn)題和錯(cuò)誤的messages:1. 磁盤(pán)failed，被放進(jìn)Broken p

22、ool 中 > aggr status fBroken disksRAID Disk Device HA SHELF BAY CHAN Pool Type RPM Used (MB/blks) Phys (MB/blks)- - - - - - - - -failed 5a.50 5a 3 2 FC:B - ATA 7200 635555/1301618176 635858/1302238304>rdfile /etc/messages> raid.disk.inserted:info: Disk 5a.50 Shelf 3 Bay 2 NETAPP X268_SGLXY75

23、0SSX AQJZ S/N 5QD290M8 has been inserted into the system2.disk bypass 錯(cuò)誤，messages中沒(méi)有錯(cuò)誤信息>sysconfig a Shelf 1: ESH2 Firmware rev. ESH A: 14 ESH B: 14Disk 4b.21 in Shelf: 1 Bay 5 is bypassed物理上，failed磁盤(pán)前面的LED2指示燈為常亮橘燈狀態(tài) 三、更換造作之前確定磁盤(pán)的位置的方法1. 首先在系統(tǒng)中確認(rèn)，利用命令>sysconfig r 或者 aggr status r （查看raid組中所有磁盤(pán)的狀態(tài)，其中會(huì)包括failed磁盤(pán)的磁盤(pán)ID）以此來(lái)定位磁盤(pán)的位置如：RAID DiskDeviceHA SHELF BAY CHAN Pool Type RPM Used (MB/blks) Phys (MB/blks) - - - - - - - fialed 0a.170a 2 8 FC:A - FCAL 10000 272000/557056000 274845/5628842962.物