藍光光盤庫存儲系統技術白皮書V1.2_第1頁
藍光光盤庫存儲系統技術白皮書V1.2_第2頁
藍光光盤庫存儲系統技術白皮書V1.2_第3頁
藍光光盤庫存儲系統技術白皮書V1.2_第4頁
藍光光盤庫存儲系統技術白皮書V1.2_第5頁
已閱讀5頁,還剩26頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

1、福州新華時代信息技術有限公司藍光光盤庫存儲系統技術白皮書福州新華時代信息技術有限公司目錄一、電子數據歸檔介紹31.1電子數據歸檔概述31.2電子數據歸檔的意義31.3電子數據存檔常用介質41.4常用歸檔方案51.4.1 磁盤陣列+磁帶庫51.4.2磁盤陣列+光盤庫61.5 經濟性測算8二、光盤庫產品介紹102.1產品概述102.2藍光近線存儲系列112.3光離線存儲系列132.4 近線+離線”存儲142.5藍光光盤15三、光盤庫建設架構153.1光盤庫數據歸檔管理系統163.2光盤庫管理軟件與檔案管理系統的接口設計173.3光盤庫管理軟件173.5鏡像管理233.6光盤匣更換管理243.7 存

2、儲能力24四、應用案例以及解決方案254.1部分行業應用場景254.1.1檢察院/法院254.1.2金融行業(銀行/證券/保險)274.1.3 病案歸檔/PACS影像歸檔284.1.4 檔案歸檔行業294.1.5 國土資源部門294.1.6 高校檔案歸檔304.1.7 軍隊涉密存儲31一、電子數據歸檔介紹1.1電子數據歸檔概述 將經過鑒定且具有保存和利用價值的歸檔的電子文件集中存放在可脫機保存的載體上,其歸檔的目的是實現歷史數據和信息被系統、科學、長期的保存,以確保決策管理、上級或第三方機構監管,同時可以保證業務的連續性,或者當業務受到損壞中斷時能夠以最短的時間得到恢復。1.2電子數據歸檔的意

3、義 數據存儲量爆炸性地增長 數據總量在持續增長,僅2015年比2011年的存儲容量擴大16倍,IDC預測至2020年數據存儲總量將會達到40ZB。因此,海量數據的低成本和超長期的保存將會成為目前互聯網信息產業領域的重大需求。 數據管理的成本與風險近年來,信息安全越來越得以重視,政府和社會對數據資料的保存也提出了更為嚴苛的要求。現如今,存儲數據中有75%90%是非結構化的數據,如文檔、郵件、報表、網頁、XML、聲音、圖像、視頻、掃描文件、工程圖以及演示文稿等,這些數據大量產生于社會行業的生產和活動中,對存儲容量與存儲安全性也提出了更高的要求,在線存儲投資成本將會越來越高,而進行數據歸檔是有效管理

4、應用數據資料、降低成本的重要手段。 法規的遵從性國家檔案法規定,對于具有重要價值的電子文件,必須保存在耐久性好、脫機、一次擦寫的載體中,并且一式3套,一套封存保管,一套供查閱使用,一套異地保存。電子文件歸檔與電子檔案管理細則第三條中第5點“物理歸檔”,是指把電子文件集中下載到可脫機保存的載體上,向檔案部門移交的過程。脫機保存載體按優先順序依次為:一次寫光盤、磁帶、可擦寫光盤、硬磁盤。推薦使用檔案級可記錄光盤。 數據安全存儲的“3-2-1”策略企業檔案工作規范DA/T 42-2009中指出“電子檔案應存儲到脫機載體上”。其存儲載體DA/T32的附錄C,保管要求見GB/T 18894的9.4明確提

5、到“3-2-1策略”:對于需要長期存儲的電子數據檔案應一式三套,一套封存保管,一套異地保管,一套提供使用。它們需被存放在2種不同的物理介質上,其中1份必須是可移動的、離線的永久拷貝。1.3電子數據存檔常用介質(1)磁盤/磁盤陣列:具有讀寫速度上的優勢,不過安全系數低、使用壽命短,適用于數據的在線存儲與查詢。(2)磁帶/磁帶庫:與磁盤具有同樣可讀寫的功能,數據可修改。容量成本比高,使用壽命優于磁盤,但長期保存安全系數低,查詢速度慢,適用于數據的中短期存儲(10年內)。(3)光盤/光盤庫:單盤容量小,但存檔安全系數高、使用壽命長,符合法規遵從性,更適用于數據的長期存儲。不同存儲介質的詳細比較表比較

6、項目磁盤陣列磁帶/磁帶庫光盤/光盤庫數據安全性低(可修改或刪除)低(可修改或刪除)高(不可修改刪除)數據保存安全性Google 公司最新發表數據:在大量數據應用環境下,磁盤陣列的硬盤損壞率相當高, 6 塊硬盤同時工作 2 年存活率為 54%、 3 年存活率為 30%; 12 塊硬盤同時工作 5 年存活率率只有 1%。易脫磁、受潮,接觸性讀取,讀寫186次后有斷帶的危險,劃傷后無法修復耐高低溫、不怕受潮,抗摔、抗振、抗壓、防塵。不接觸式讀寫對藍光光盤不會造成磨損。信息保存期短(5-10年)短(10年內)長(大于50年)總體擁有成本高高低數據查詢速度快(隨機讀取)慢(順序讀取)中等(隨機讀取)保存

7、環境要求高(恒溫、恒濕、防磁、防水、防震)高(恒溫、恒濕、防塵、防水、防磁等)低(正常室溫)強磁影響大大無兼容性差(磁盤接口跨代不兼容)差(磁帶規格跨代不兼容)好(光驅支持向下兼容)數據遷移成本高(需定期進行數據遷移)高(需定期進行數據遷移)低(無需進行數據遷移)介質的交換性差好好歸檔法規遵從性否否是能 耗很高低低1.4常用歸檔方案目前常用歸檔方案主要有磁盤陣列+磁帶庫和磁盤陣列+光盤庫兩種。這兩種方案的主要原理是通過磁盤陣列為在線業務提供較高的讀寫查詢性能,保證業務系統的高速運行,再將長期閑置并需保存的業務數據從磁盤陣列中轉移至磁帶庫或光盤庫中進行近線和離線歸檔,實現了一種分級存儲管理模式,

8、既保證了磁盤空間的高效利用,又大大降低了總體存儲成本和管理成本。1.4.1 磁盤陣列+磁帶庫這種組合方式在目前市場中最為常見,主要原因在于早期磁帶技術目更為成熟,且磁帶具有較高的容量價格比。但磁帶庫有著以下問題: 數據可篡改與磁盤一樣磁帶數據可篡改(可刪除、可修改),無法滿足歸檔數據法規遵從性要求;磁帶上的數據信號會隨時間推移變弱,需要定期檢查和刷新,每隔2-3年倒帶或重新復錄,一般每翻錄一次都會使數字、圖像信號受損或失真。 使用壽命短多年的實踐證明,磁帶數據的安全存儲時間遠遠達不到宣稱的存儲年限,主要原因一是磁帶需要高標準的存放環境,要求恒溫恒濕、防磁、防塵,達不到標準的環境嚴重影響磁帶數據

9、的壽命,而高標準的環境,需要較高的成本;二是磁帶易受電磁輻射而損壞;三是磁帶是接觸式讀寫,磁帶與磁頭高速摩擦引起磁粉脫落,磁帶磨損,使使用壽命縮短。 較高的總體擁有成本磁帶庫/磁帶的一次性采購成本并不高,但如果用作數據歸檔 ,其使用磁帶庫/磁帶的環境建設成本、環境運行成本及維護成本,還有每隔2-3年倒帶或重新復錄的成本將非常高,使利用磁帶庫/磁帶做數據歸檔的總體擁有成本較高。 設備換代風險由于磁帶機/磁帶庫不兼容,每個使用過的磁帶機/磁帶庫都需要完好無損,才能夠保證磁帶數據有效、完整的讀出,我們能否確保磁帶機連續運行十年以上,雖然理論上是可行的,而實際上能否做到?磁帶機廠家能否對一個型號的磁帶

10、機提供十年、十五年、二十年的技術支持和服務,存在很大的風險。同時,磁帶的數據無法直接讀取,必須恢復到磁盤中才可使用。近年使用磁帶備份數據出現大量丟失的實際案例非常之多,典型的是2014年國內一家大型銀行在銀監會例行檢查中就發現磁帶母帶和備份帶因保存管理及其他原因同時損壞,使得大量的客戶數據丟失,不但受到了銀監部門的處罰,也使自己的公眾信譽、服務工作遭到了極大損失。因此,信息化建設的飛速發展導致數據信息在急劇增長,且大部分數據根據重要程度的不同,需要進行不同年限的歸檔,使用磁盤、磁帶的保存方式,在增加使用成本的同時,并沒有從根本上解決數據的長期安全存儲問題,磁盤、磁帶不適用于數據歸檔(長期存儲)

11、,磁盤只適合數據的在線短期存儲,磁帶只適合數據短期備份(短期存儲)。1.4.2磁盤陣列+光盤庫隨著光盤技術和生產工藝的不斷發展,單盤容量 100GB的藍光光盤技術已經成熟并普及,藍光光盤具有以下特點: 數據安全性高常用的WORM光盤,數據一次性寫入,不可篡改,不可刪除,滿足法規要求。特別是藍光光盤,由于采用了超硬涂層,可以有效保護由潮濕、刮碰、指印、灰塵引起的損傷。光盤防電磁干擾,可有效保護數據安全。光盤數據可方便移動、運輸,實現離線數據的異地存儲,保證數據的安全。由于藍光光盤的生命周期長,光盤數據可實現免維護,避免因數據遷移帶來的安全隱患。 數據安全存儲時間長 在三種存儲介質中,光盤的有效生

12、命周期最長,企業歸檔級藍光光盤在一定的環境下安全存放時間可以超過五十年。加上妥善的保管,將光盤放在光盤庫或離線庫中,可以避免光照射與機械損傷。 長期的通用性光盤產生至今幾十年的時間里,從CD、DVD發展到藍光光盤、企業歸檔級藍光光盤,存儲容量也從小到大,發展到50GB、100GB、,但光盤的物理尺寸未發生變化,一直保持12CM的尺寸,重要的是光盤驅動器一直保持向下兼容,藍光驅動器可以讀取CD、DVD的數據,使得光盤數據在存儲數十年后仍然可以順利讀取。 企業歸檔級藍光光盤可檢測使用壽命高端的專業光驅具有獨特的對企業歸檔級藍光光盤使用壽命進行檢測的功能。企業歸檔級藍光光盤經過長時間存放歸檔數據后,

13、可以利用高端的專業光驅對企業歸檔級藍光光盤進行檢測,確定企業歸檔級藍光光盤的剩余壽命,對于接近完成使命的企業歸檔級藍光光盤,及時進行復制,確保歸檔數據的安全性、可靠性。 總體擁有成本(TCO)低首先,光盤庫對運行環境的要求不高,不需要高標準的機房環境就可以滿足要求,光盤也不需要高標準的環境存放,節省了建設成本,同時也節省了高標準機房的運行成本。其次,光盤庫的能耗比較低,放在離線庫中的光盤基本沒有能耗。第三,企業歸檔級藍光光盤妥善地存放和管理,可以使長期存儲數據存放時間超過五十年,滿足大部分長期存儲數據存放的年限要求,在長期存儲數據生命周期內,不需要更換介質,即不需要倒盤,節省了介質倒換帶來的成

14、本,也避免了介質倒換帶來的風險。第四,光盤庫升級換代的周期比較長,離線庫基本不需要升級換代,更新換代的成本較低。總之,與磁盤陣列、磁帶/磁帶庫相比,由于光盤/光盤庫后期使用成本(維護成本、使用成本、升級成本)較低,因此,光盤庫的總體擁有成本低。 通過以上的分析對比,磁盤陣列適用于在線數據的快速存取,即經常調用和編輯的數據;磁帶適用于數據的短期存儲;光盤/光盤庫在數據長期存儲(數據歸檔)領域,面對數據安全性、法規遵從性、經濟性的要求,占有明顯優勢,特別是在法規遵從性方面,磁盤陣列、磁帶無法滿足要求,只有光盤/光盤庫滿足法規遵從性要求,因此,光盤/光盤庫是數據長期存儲(數據歸檔)領域唯一理想的載體

15、,特別是企業歸檔級藍光光盤、專業光驅的出現,為解決數據歸檔領域的難題,即存儲介質的選擇,帶來了解決方案。清華大學光盤國家工程研究中心依據研究指出:離線的永久的拷貝,采用高品質標準化的光盤進行數據存儲,才是解決現代化社會信息存儲安全的最佳解決方案。1.5 經濟性測算對于系統長期運營,消耗的費用包括采購成本、維護費用、運營費用、遷移費用等。總體運營成本具體包括有:1、 采購、建設成本:包括初期建設及后續系統升級的費用。由于設備普遍采用五年的折舊周期,因此,該費用以五年為一個周期進行分攤。2、 維護費用:設備損壞維修的服務費用,每年的維護費用一般以設備總采購價格的百分之十五計算。3、 運營費用:即系

16、統運行過程中所實際消耗的其它費用,包括設備運行耗電(含空調耗電)、機房環境的損耗等。目前,設備耗電加上空調等耗電為主要消耗,空調具備能耗比參數,以設備耗電的百分之三十計算比較合理。4、 數據轉儲費用:由于系統的兼容性、機房搬遷等非設備本身的原因而需采取的數據轉儲的活動所消耗的費用。對于磁帶庫來說,由于設備更新換代而不兼容必將導致數據轉儲,至少十年就必然要實施一次數據轉儲。數據轉儲必需把在/近線及離線的所有數據都迚行兼容性轉換,消耗巨大。5、 介質保管費用: 磁帶介質需防磁的安全保管,相比于光盤介質需要更多的介質保管費。系統長期運營消耗的年總費用的計算公式如下:年費用 = 建設成本年折舊 + 年

17、維護費用 + 年運營費用+ 遷移費用年分攤 + 介質保管費用介質部分保持在線/近線的設備中,部分保持在離線獨立保存狀態;因此,又可分為在線/近線設備使用、離線介質兩大塊費用:Ø 在線/近線的設備使用費用在線/近線的設備使用費用包括有建設成本年折舊、 年維護費用、 年運營費用、數據轉儲費用的年分攤等全部內容; 在線及近線的存儲需要保持設備健壯穩定的運行狀態,消耗自然不小。n 數據保留在磁盤陣列存儲的在線狀態,每年每 TB 的分攤費用在6420 元左右(以 EMC CX4-240 / 1 T*15 為例,五年使用期)。n 數據保留在磁帶庫的近線狀態,則每年每 TB 的分攤費用在 4060

18、元左右(以 HP MSL2024 為例,五年使用期)。n 數據保留在光盤庫的近線狀態,則每年每 TB 的分攤費用在 5200元左右(以 Netzon HMS 3560 為例,五年使用期)。Ø 離線介質的費用離線介質費用包括轉儲費用及介質的保管等各種費用,磁帶介質的保管等各種費用比光盤要大很多。計算離線費用對于每 TB 的消耗:Ø 如果數據長期保留在磁帶中,每十年就需轉儲一次,雖具體遷移的方式可能不同,但轉儲的實際費用不小。 加上保管等費用后,每年每 TB 的消耗費用約在500元左右。Ø 數據保留在光盤的離線狀態, 光盤兼容性強,無數據兼容性的換代而需遷移,可長期保

19、存,且保管無特別的環境要求。計每年每 TB 的消耗費用近于 20 元左右(包括盤匣等耗材的損耗)可計算對于 10PB(1PB=1000TB)總數據量(包括在線/近線、離線數據量)的年消耗費用。根據離線比率, 計算在線/近線設備使用、離線介質費用。 每 TB 平均消耗的理論結果為:數據歷史 項目 磁盤陣列 (應用) 存儲 磁帶庫 (備份) 磁帶庫 (歸檔) 光盤庫 (歸檔)5 年數據 離線率 0.00% 80.00% 94.12% 94.12%年費用 6,420 萬 812 萬 739 萬 326 萬10 年數據 離線率 0.00% 80.00% 97.30% 97.30%年費用 6,420 萬

20、 812 萬 610 萬 160 萬15 年數據 離線率 0.00% 80.00% 98.25% 98.25%年費用 6,420 萬 812 萬 571 萬 111 萬20 年數據 離線率 0.00% 80.00% 98.70% 98.70%年費用 6,420 萬 812 萬 553 萬 88 萬30 年數據 離線率 0.00% 80.00% 99.15% 99.15%年費用 6,420 萬 812 萬 535 萬 64 萬50 年數據 離線率 0.00% 80.00% 99.49% 99.49%年費用 6,420 萬 812 萬 521 萬 47 萬由于高離線率帶來了低消耗,采用歸檔后,數據

21、存儲所發生的費用隨歷史跨度而大幅度地下降。十年以上的數據存儲于光盤庫中進行歸檔,相對于 磁盤陣列存儲的在線存儲,年消費僅為其百分之二;相對于磁帶庫的備份,年消費僅為其百分之二(五十年歸檔)到百分之十一(十年歸檔)。二、光盤庫產品介紹2.1產品概述 產品主要是基于藍光光盤的相關產品,海量數據存儲產品包括兩個系列:藍光近線存儲系列、藍光離線存儲系列,每個產品系列都包含很多不同規格和參數的機型2.2藍光近線存儲系列 光盤庫是一種以光盤作為存儲載體的具有高可靠性的海量近線存儲設備,其主要有機械手、光驅和光盤匣三部分組成,經實踐檢驗,產品穩定可靠,主要用于數據的近線存儲、歸檔及光盤自動刻錄。目前,光盤庫

22、主要型號包括:HMS1035、HMS2105、HMS3350、HMS3560。>>> HMS 1035 參數1 個可替換的標準光盤匣可容納 35 張光盤存儲容量:3.5TB (100GB BD 光盤)可配置 2 光驅 (CD/DVD/BD)可選配服務器級主板經實踐檢驗的高可靠性機械臂、光盤匣的自動校準高速數據交互中的高可靠性機械手用于聯機模式中更換光盤的彈出屜>>> HMS 2105 參數3 個可替換的標準光盤匣可容納 105 張光盤存儲容量:10.5TB (100GB BD 光盤)可配置 4 光驅 (CD/DVD/BD)可選配服務器級主板可選配冗余電源經實

23、踐檢驗的高可靠性機械臂、光盤匣的自動校準高速數據交互中的高可靠性機械手用于聯機模式中更換光盤的彈出屜>>> HMS 3350 參數10 個可替換的標準光盤匣可容納 350 張光盤存儲容量:35TB (100GB BD 光盤)可配置 6 光驅 (CD/DVD/BD)光盤匣具有唯一的 RFID 標識可選配服務器級主板可選配冗余電源可選配盤片打印機經實踐檢驗的高可靠性機械臂、光盤匣的自動校準高速數據交互中的高可靠性機械手用于聯機模式中更換光盤的彈出屜>>> HMS 3560 參數特點:16 個可替換的標準光盤匣可容納 560 張光盤存儲容量:56TB (100GB

24、 BD 光盤)可配置 8 光驅 (CD/DVD/BD)光盤匣具有唯一的 RFID 標識可選配服務器級主板可選配冗余電源可選配盤片打印機經實踐檢驗的高可靠性機械臂、光盤匣的自動校準高速數據交互中的高可靠性機械手用于聯機模式中更換光盤的彈出屜2.3光離線存儲系列NENZON HMS 8-off 是世界上的第一臺智能離線庫,屬于離線存儲設備,用于管理 NETZON 標準的光盤匣,實現了離線光盤的全方位查詢管理。與 NETZON 光盤庫配合使用,可以靈活搭建成“近線+離線”的海量存儲系統。將那些不經常訪問又需要長久保存的數據,轉存到離線存儲設備中,能夠大大緩解用戶近線存儲的需求,不僅可以減少總體存儲成

25、本和提高系統性能,而且可以很容易的在異地保存一份拷貝數據。離線庫主要包括:HMS 8off-10,HMS 8off-12,HMS Offline CUBE;HMS 8off-10 參數特性:標配一:10 個抽屜存儲方式:離線片匣容量:80 個光盤容量:2800 張存儲容量:140TB/280TB (50GB/100GB BD 光盤)整機耗電: <30 瓦標配二:2 臺 HMS1035 + 6 個抽屜存儲方式:近線+離線片匣容量:50 個(2 個近線+48 個離線)光盤容量:1750 張存儲容量:87.5TB/175TB (50GB/100GB BD 光盤)整機耗電: <400 瓦標

26、配三: 2 臺 HMS2105 + 5 個抽屜存儲方式:近線+離線片匣容量:46 個(6 個近線+40 個離線)光盤容量:1610 張存儲容量:80.5TB/161TB (50GB/100GB BD 光盤)整機耗電: <400 瓦2.4 “近線+離線”存儲光盤匣是 NETZON 光盤存儲的最基本單元,是連接近線和離線存儲的橋梁,完全兼容 NETZON 的光盤庫、離線庫。具有以下特點:每個光盤匣可容納 35 片光盤包含多項自主專利技術雙重鎖定,確保光盤安全雙重 RFID 保證光盤匣唯一的 ID近線存儲設備(光盤庫),通過內部高精度、高可靠性的機械手,可以自動的將光盤移動到光盤匣、光驅、彈出

27、屜、打印機等位置。光盤庫會自動完成一系列操作,無需人工干預,操作簡單。當用戶存儲數據時,機械手會自動將光盤匣中的空白光盤放入光驅,并完成光盤的刻錄過程。當用戶讀取數據時,機械手根據數據庫中的信息自動將需要的數據光盤放到光驅中,將需要的數據提供給用戶。當光盤庫中的數據存滿以后,可以將不需要經常訪問的數據轉移到離線存儲設備(離線庫)中,將數據離線存儲。近線到離線的操作十分簡單,只需要將相應的光盤匣放到離線庫中,離線柜就可以自動完成光盤匣信息的登錄。當用戶需要查找的數據存放在離線庫中,管理軟件會提示用戶將光盤匣回遷到光盤庫中,離線庫的顯示屏、指示燈也會有相應的提示,用戶只需要將相應的光盤匣放回光盤庫

28、就可以讀出離線存儲的數據。2.5藍光光盤數據能否長期安全存儲并且在需要時被方便使用,這與數據存儲載體有直接關系。現今最好的數據信息長期存儲載體非光盤莫屬,并且光盤具有只讀性,能滿足數據信息長期存儲的法規要求。如今單張容量100GB的藍光光盤技術已經成熟并開始大量投入應用,并且隨著藍光光盤技術研究深入,預計2017年底,單張300GB的藍光光盤也將正式上市,未來藍光光盤的存儲容量也將逐漸增加,其成本低、體積小的優點愈發明顯。更重要的是藍光光盤存儲技術消除了紅光光盤存儲的容量瓶頸和安全隱患,藍光光盤數據層采用無機材料制造,并且具有超硬涂層,不受環境與劃痕影響,所以藍光光盤擁有極長的保存壽命,用戶幾

29、乎不必擔心數據的丟失,在數據存儲的安全性上超越了磁盤與磁帶存儲介質,經過國際權威機構的TUV認證,檔案級藍光光盤可將其存儲的數據信息保存時間可以達到50以上。三、光盤庫建設架構遵循系統建設的原則,根據數據歸檔的需求,數據歸檔解決方案的系統結構如下圖所示: 系統結構分為兩個區域:一部分是檔案管理系統;第二部分是光盤庫數據歸檔管理系統,是對檔案管理系統的補充和完善,其核心功能是對歸檔數據的存儲和管理。兩部分通過局域網實現連接,通過接口軟件實現業務處理及數據交換。3.1光盤庫數據歸檔管理系統光盤庫數據歸檔管理系統區域內由三層設備組成,第一層是局域網交換機,負責與檔案管理系統的網絡連接;第二層是光盤庫

30、管理服務器,為光盤庫管理軟件提供運行環境;第三層是光盤庫,用于歸檔數據的存儲。光盤庫數據歸檔管理系統將實現以下功能:1、將歸檔數據按照有關策略分類刻錄保存,按照有關要求,實現一份或多分刻錄。刻錄完成時對數據進行檢測,以確保數據的完整性。可查詢檢索所需要的歸檔數據,提供多關鍵字的分類查詢方式。文書類數據可通過檔案管理系統中如文件名、時間、責任人、年度、期限、分類號、部門、檔案號等條件進行檢索,直接從光盤庫中查詢;戶籍類數據可通過檔案號、姓名、行業、身份證號等條件進行檢索查詢。在光盤庫內直接提取已存在光盤庫數據歸檔管理系統中的所需要的數據資料。發現數據資料不在光盤庫中,將提示有關管理人員從離線庫或

31、其他位置交換光盤匣(每匣含片藍光光盤)到光盤庫,進而可提取所需要的數據資料,并記錄交換后的位置。實現對設備、光盤介質、使用者的統一管理,記錄使用狀況,跟蹤介質存放位置,保障系統的穩定運行。3.2光盤庫管理軟件與檔案管理系統的接口設計作為檔案管理系統的補充,光盤庫管理軟件提供采用光盤庫進行長期數據保存及管理的功能。為實現歸檔數據最終能靈活安全地保存到光盤庫的藍光介質中,檔案管理系統與光盤庫管理軟件需實現整合,形成一體化的檔案管理系統。為實現兩個系統的整合,需對兩個系統進行詳細的分析,并對接口部分進行仔細的研究和設計。該設計方案將盡可能的對原系統作最少的改動,如果可能,甚至可對原系統不做軟件方面的

32、改動。然后,在此設計的基礎上改造軟件的相關部分,最終實現兩個系統的整合。基本的開發路線是:先按照檔案管理系統的功能設計光盤庫管理軟件所需要提供的對應接口。然后,將光盤庫管理軟件的接口做一定的定制開發,提供對應的API。最后,檔案管理系統也作一定的修改以適應新的功能(如果原系統的架構設計先進,需改動的部分將很少,甚至可能僅需作配置上的修正)。從而使檔案管理系統能連接使用光盤庫管理軟件,實現光盤庫的歸檔功能。通過以上分析、設計、開發等過程,檔案管理系統與光盤庫管理軟件將實現整合,形成一體化的檔案管理系統。3.3光盤庫管理軟件數據歸檔存儲到光盤庫系統需要完善的管理軟件,該軟件需滿足數據歸檔的需要,方

33、便地實現歸檔刻錄及日常管理的任務。以下簡述了該軟件必需的技術結構和功能:3.3.1歸檔應用結構為滿足數據長期存儲的需要,確保數據長期存儲的安全、可靠、完整,本系統需采用硬件+底層驅動軟件+管理平臺的體系結構。(1)WEB層-管理平臺該平臺的核心是光盤庫管理軟件,具有數據歸檔功能。該軟件首先必需是一個應用平臺,對應用數據提供了方便接入、容錯保護、安全訪問等多方面的能力。從而使客戶的資料及海量數據的歸檔具有更長遠的價值。該軟件可按照用戶的需求進行二次開發,滿足客戶的個性化需求。(2)服務層-光盤庫底層驅動軟件 ocean Archiver 光盤庫底層管理軟件負責在網絡環境中查詢、訪問媒體盤標;對B

34、D/DVD-ROM、BD-R、BD DL和BD XL等介質進行歸檔管理;無需人工干預的BD/DVD盤片復制;通過類似硬盤的光盤庫文件系統建立近線離線存儲系統。3.4光盤庫管理軟件功能3.4.1用戶信息及登陸實現用戶信息記錄及登陸安全的管理。3.4.2組織機構及權限管理實現機構及部門信息的管理和對用戶及機構的操作權限管理。如:3.4.3日志及通知管理:實現對用戶操作信息及任務執行信息的記錄,當任務執行狀態發生變化通知用戶。通知方式可為郵件及短信、站內信等。如:3.4.4光盤庫信息配置:配置系統管理光盤庫信息(型號,配置等),盤庫所屬盤匣及光盤信息登記。如:3.4.5視頻數據歸檔配置配置視頻數據歸

35、檔任務信息(訪問數據庫信息,歸檔周期,歸檔要求等)。如:3.4.6非視頻歸檔配置配置非視頻數據的歸檔任務信息(訪問協議及數據路徑,數據目錄規則,歸檔周期,其他歸檔要求)如:3.4.7任務調度管理為本軟件的核心,負責根據歸檔任務的配置信息進行任務調度定時連接需要進行歸檔的數據進行抽取數據,存入刻錄數據服務器(使用批處理根據配置存儲文件大小限定進行存儲,形成不超過藍光容量的存儲文件且該文件可單獨恢復)定時向服務層發布單盤刻錄任務,查詢空閑光驅,多光驅并行進行刻錄任務,刻錄歸檔數據根據非視頻數據讀取信息及規則,讀取數據至刻錄服務器(例如通過訪問固定的FTP服務器路徑,根據目錄下是否有復合規則的文件夾

36、如以當前日期2012-6-14命名的文件夾,讀入刻錄服務器)進行非視頻數據刻錄,要求單文件大小不超過單盤,如超過單盤進行文件拆分。對刻錄光盤進行驗證及根據規則進行鏡像任務處理。記錄反饋任務信息。發布讀取任務,返回讀取數據的路徑。3.4.8視頻數據處理根據任務調度管理發布的任務,讀取配置信息,進行數據歸檔。3.4.9歸檔檔案信息與服務層進行同步信息,記錄刻錄任務執行完畢形成的任務執行信息及歸檔數據信息。如3.4.10文件簽出用戶通過此模塊查看歸檔信息,用戶需要查看光盤內容是,提交給調度管理,調度管理查詢該數據是否近線,如在光盤庫中,從光驅讀入,返回給客戶。如離線,通過短信或郵件通知光盤庫管理人員

37、加入盤匣,最終讀取數據。 3.4.11對文件的刻錄與訪問在文件刻錄及訪問過程中,光盤庫管理軟件平臺實現透明訪問的刻錄和讀取,下圖描述了實現透明訪問的過程:3.4.12光盤庫實現透明訪問的刻錄過程說明:(1)源數據準備將源數據存放到指定目錄,該目錄在數據管理平臺的服務器中,數據源在策略控制下決定何時開始刻錄過程,或手動刻錄。(2)復制到緩存光盤庫管理軟件根據源數據的定義,復制源數據到指定的緩存內。(3)刻錄光盤庫管理軟件操作光盤庫硬件系統刻錄緩存目錄內的數據。緩存的數據實現刻錄保存。(4)刻錄完成/檢查結果刻錄完成后,光盤庫管理軟件檢查刻錄結果,比較數據源與刻錄完成的文件數據。(5)準備鏈接、建

38、立鏈接建立虛鏈接,使應用可以在原位置讀取原文件,而不需要應用對光盤庫進行任何操作,實現應用的透明訪問。應用對該數據文件或目錄的訪問從虛鏈接進入,而各個虛鏈接分別映射到光盤內的實際數據目錄或文件。采用虛鏈接的主要作用在于:客戶系統訪問歸檔文件不需要額外的軟件以及相關的操作。相比于在客戶端軟件(或WEB+游覽器)操作方式,其具體優勢在于:具備文件訪問的透明性:基本文件操作可基于文件系統的操作,在底層直接把應用或用戶需要創建或讀取的文件進行緩存、刻錄、讀取等操作。除對光盤庫的管理性操作外,不需要客戶端軟件,或使用游覽器。同時,減少了掌握操作的學習過程。(注:WORM介質可實現一次性寫入,但不能改寫文

39、件,因此虛鏈接方式不容許修改刻錄好的文件)不需要單獨的API:基于文件操作的應用可無縫的應用到光盤庫中來,已有的某些應用可直接在新的存儲介質上創建和讀取文件。提高文件訪問的性能:減少上層應用的參與,也就減少了層次。層次越少,層次越處于底層,性能就越高。3.5鏡像管理為了增強數據的安全性,軟件提供自動和透明的媒介(即光盤)鏡像功能。鏡像是基于動態映像刻錄技術,即文件寫入到動態映像被同步到兩個同樣的媒介。原媒介和鏡像媒介可以位于相同的光盤庫中,也可位于兩個光盤庫中,第二臺光盤庫可用于鏡像復制。當鏡像任務開始執行時,軟件首先為這個媒介建立一個動態映像,然后它自動地定位一張空白光盤作為鏡像光盤。當定位

40、鏡像光盤時,軟件自動尋找指定范圍內的空盤。當向格式化成鏡像的媒介寫數據時,數據首先被寫入相應的動態映像。 軟件然后將動態映像與原盤和鏡像盤相同步。當媒介還沒有被終結之前,軟件對“原盤”和“鏡像盤”作區分。媒介類型“鏡像”也被顯示在管理工具的片槽列表中。在媒介被終結后并且原盤和鏡像盤已經同步了,動態映像將被刪除,鏡像媒介被標為“拷貝”。 這表明兩個媒介之間已經沒有自動的關系了。事實上拷貝與原盤完全相同。 只有原媒介才能在文件系統中可見,而鏡像盤只是一個原盤的相同拷貝,它沒有被激活也沒有相應系統的請求。如果原盤壞了,則與鏡像盤相互交換。根據需要及軟件設置,可在刻錄過程中,同時進行光盤的鏡像復制,即

41、同時拷貝一份相同數據作為存儲。當更換光盤匣的時候,在一定的人工干預下,可實現整匣的復制。3.6光盤匣更換管理在光盤不足的情況下,系統將自動報警,以提示更換盤匣。如果需提前更換盤匣(如希望每季度使用一個盤匣),則可手動完成以上操作,但需操作取出多余空盤,以免浪費。光盤匣的更換主要有以下兩種情況:1、當光盤匣中的數據量接近支持的最大容量時,軟件會自動報警進行提示,由管理員按照操作規程更換光盤匣或更新部分光盤。更換光盤匣需對光盤匣進行標識、保管,納入離線管理,并更換新的光盤匣投入使用。2、按照一定時間如每季度,或用戶特定需求,需要對光盤匣進行離線時,由管理員對光盤匣進行離線操作,并更換新的光盤匣投入

42、使用。光盤匣離線前首先要確認是否有未完成的刻錄或查詢任務,確認后即可對光盤匣進行離線。管理軟件不僅允許對光盤庫里當前的媒介進行操作,還允許管理光盤庫中存儲的所有的媒介名稱和目錄結構,甚至管理光盤庫中已經刪除了的媒介。這樣再次輸入某個媒介時,就沒必要對它重新設置了。有了這個功能就可以在非當前媒介,光盤匣中搜索文件。離線媒介存放在用戶界面的一個特殊的離線文件夾里,離線包也可以存放在這個文件夾里。 光盤匣的ID是唯一的,那么當光盤匣從光盤庫里移出時,軟件將把它完整地保存在離線文件夾里。當它再次被調入時,管理軟件不需要再次掃描,就可以識別并顯示它里面的媒介。如果您想把離線光盤匣從數據庫里刪除,與離線媒

43、介的操作一樣,在關聯菜單里選擇相應的命令即可。使用這種方法刪除后,軟件會在數據庫里刪除光盤匣的相關數據,并把原來光盤匣里的媒介存儲到離線文件夾。 3.7 存儲能力為了能夠更加直觀的體現出光盤庫和離線柜的存儲能力,此處選擇目前主流的 100GB 藍光光盤作為數據存儲介質,進行如下一系列換算:一個 A4 紙掃描文·件=100KB(以黑白和彩色平均值計算)一個文件夾(8cm)=500 頁 A4 紙一個標準文件柜(80cm×5 層)=50 個文件夾一張藍光光盤(100GB)=2000 個文件夾=40 個標準文件柜一臺 DAM003 型光盤庫可以存放 105 張光盤,其存儲容量是:1

44、00GB X 105 張 = 10.5TB=4,200 個標準文件柜一臺 DAS096 型離線柜可以存放 3360 張光盤,其存儲容量是:100GB X 3360 張 = 336TB=134,400 個標準文件柜通過上述換算,可以較為清晰的體現出光盤庫和離線柜所具有的海量數據存儲能力。四、應用案例以及解決方案目前光盤庫數據歸檔系列產品主要應用領域有:l 銀行、保險、證券公司票據和文檔管理l 政府部門(工商、稅務局等)檔案管理l 公安、檢察院、法院等司法部門卷宗管理l 設計院、工廠、科研機構圖紙檔案管理l 醫學影像(PACS)及電子病歷檔案管理l 電臺、電規臺、報社、出版社的媒體資料管理l 視頻

45、監控數據管理不規頻點播(VOD)l 考試閱卷系統、多媒體教學、電子課件的存儲管理l 數字圖書館、檔案館癿電子圖書、文獻檔案管理l 石油、地質、氣象數據管理4.1部分行業應用場景4.1.1檢察院/法院省院機關建立集中管理平臺,可統一管理和調度全省的同步錄音錄像系統,具備對系統運行狀況等信息的實時遠程監控和錄像遠程調閱功能,必要時可開展遠程偵查指揮和辦案協同。 市縣兩級院添置循環刻錄及同步備份系統,達到50年歸檔光盤級別,具備自動換盤刻錄、高速刻錄和盤面打印等功能,系統接入上級院集中管理平臺,運行狀況自動反饋給上級院,并提供上級院遠程聯網隨機自動調取的功能。市級院和縣級院循環刻錄及同步備份系統容量

46、應分別不小于100片和50片DVD/BD光盤,同時市院系統應具備RFID離線管理功能,以便光盤規范存檔、在線備查和后期擴展離線管理裝置。在使用24小時循環刻錄備份系統以前形成的光盤,也可以使用24小時循環刻錄備份系統管理起來。對于已刻錄的歷史數據光盤,可批量放入光盤匣中,分批插入24小時循環刻錄備份系統。可對所有光盤進行全面檢索,檢索的同時管理軟件自動生成卷標。根據卷標在光盤匣上做好對應的標簽,實現在線或離線管理。系統建設方案系統架構圖系統拓撲圖4.1.2金融行業(銀行/證券/保險) 電子影像歸檔應用電子影像平臺是金融行業重要的支撐平臺,負責金融行業在業務辦理過程產生的非結構數據,例如憑證影像

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論