1、1. 邏輯架構2. 方案簡述某客戶為了保證業務的連續性，需要部署雙活數據中心，傳統的數據中心解決方案，正常情況下只有主數據中心投入運行，備數據中心處于待命狀態。發生災難時，災備數據中心可以短時間內恢復業務并投入運行，減輕災難帶來的損失。這種模式只能解決業務連續性的需求，但用戶無法就近快速接入。災備中心建設的投資巨大且運維成本高昂，正常情況下災備中心不對外服務，資源利用率偏低，造成了巨大的浪費。兩個數據中心（同城/異地）的應用都處于活動狀態，都有業務對外提供服務且互為備份。但出于技術成熟度、成本等因素考慮，數據庫采用主備方式部署，數據庫讀寫操作都在主中心進行，災備中心進行數據同步。發生災難時，數

2、據中心間的數據庫可以快速切換，避免業務中斷。雙活數據中心可充分盤活閑置資源，保證業務的連續性，幫助用戶接入最優節點，提高用戶訪問體驗。3. 實施方案詳述真正的雙活，要在數據中心的從上到下各個層面，都要實現雙活。網絡、應用、數據庫、存儲，各層面都要有雙活的設計，這樣才能真正意義上實現數據中心層面的雙活。從某種程度上說，雙活數據中心可以看做是一個云數據中心，因為它具有云計算所需的高可靠性、靈活性、高可用性和極高的業務連續性水平。不僅能夠滿足應用對性能、可用性的需求，而且還可以靈活動態擴展。3.1 網絡子系統3.1.1 簡述從網絡上來看，雙活數據中心需要將同一個網絡擴展到多個數據中心，在數據中心間需

3、要大二層網絡連接并且實現服務器和應用的虛擬化數據中心互聯技術。大二層的網絡技術有IRF、TRILL、SPB、EVI等。IRF是將多臺網絡設備（成員設備）虛擬化為一臺網絡設備（虛擬設備），并將這些設備作為單一設備管理和使用。IRF把多臺設備合并，簡化了管理提高了性能，但IRF構建二層網絡時，匯聚交換機最多是可達4臺，在二層無阻塞的前提下可接入13824臺雙網卡的千兆服務器，如果客戶期望其服務器資源池可以有效擴充到2萬臺甚至更大，就需要其他技術提供更大的網絡容量。TRILL的全稱就是Transparent Interconnection of Lots of Links，顧名思義，其本質就是將很多

4、條鏈路透明地組織在一起，以致于上層IP應用感覺這只是一條鏈路。它本質上是一個2.5層的技術，使用最短路徑、多路徑等三層路由技術來講多條鏈路組織成為一個大二層網絡，并支持VLAN、自配置、多播等二層功能。TRILL目前最大可以支持10核心組網，其最大能力可以無阻塞的接入27648臺雙網卡千兆服務器，但TRILL技術目前在芯片實現上存在客觀缺陷，核心層不能支持三層終結，也就是說TRILL的核心層不能做網關設備。必須要在核心層上再增加一層設備來做網關，這導致網絡結構變得復雜，管理難度增加，網絡建設、運維成本都會增加。SPB的組網方案和TRILL基本相同(同樣可支持接入27648臺)，其優勢在于能夠方

5、便的支持VLAN擴展功能，但同樣存在網關與SPB核心必須分離的芯片缺陷，導致網絡層次增加，管理、運維成本增加。EVI可以通過匯聚層和核心層之間的IP網絡實現二層互通，所以通過EVI擴展多個二層域的時候不需要更改布線或是設備，僅僅需要在匯聚設備上啟用EVI特性即可，這樣可以平滑的擴展二層網絡的規模。其技術成熟、架構穩定，能夠支持大規模二層網絡，運維也簡單方便。在數據中心之間建設一張虛擬的大二層網絡是實現網絡雙活的基礎。通過大二層網絡，可以實現跨數據中心的集群、資源共享和故障探測，它是保證故障發生后到故障切換中間過程不丟包的重要手段。另外通過負載均衡技術，可以實現流量在不同數據中心間的調度以及在單

6、數據中心內多服務器的負載分擔；同時，負載均衡設備也是探測業務故障實現自動切換的關鍵實現點。3.1.2 設計實現3.1.2.1 外網接入該部分內容只是根據其他用戶的經驗提供一些建議，具體設計與實施需要專業的網絡系統廠商或集成商提供。建議兩個生產分別租用兩條互聯網出口線路，一條聯通線路，一條電信線路（每數據中心一條鏈路也可）。在每條線路出口處，分別透明部署一臺負載均衡設備，用來實現多廣域網線路選路和冗余備份，使用戶可以通過最快線路訪問某客戶的業務系統，加快了數據中心訪問速度。同時，當任何一條線路故障，用戶依然可以通過另一條廣域網線路訪問數據中心服務器，提高了數據中心的可靠性。負載均衡設備會通過多種

7、方式檢測兩條鏈路的健康狀況，一旦發現其中一條鏈路故障，會立即將所有用戶流量定向至其它可用鏈路，從而實現網絡連接的高可用性。主要的方法有：為了確保ISP鏈路的暢通，鏈路負載均衡設備將采用Ping的方法，不僅僅檢查和其相連的路由器的端口是否可達，還可以檢查該鏈路后續路由節點的連通性（10跳），已確保整個路徑的暢通。針對所有的網絡環境，鏈路負載均衡設備提供了豐富的47層檢查方式，并可以通過多種檢查結果的“與”和“或”運算結果，最終準確判斷鏈路的健康狀況。通過負載均衡設備的智能DNS功能，實現兩數據中心的災備功能。當數據中心A的服務器故障或受到攻擊而不能提供服務時，負載均衡設備會引導用戶（自動或人工）

8、去數據中心B訪問業務。 在用戶的權威DNS服務器上添加NS記錄，使服務器域名的解析權交給主備兩個站點的全局負載均衡設備。當負載均衡設備（無論A或B中心）收到用戶DNS請求后，首先會檢測服務器狀態，確認應用是否健康，能否正常提供服務，廣域網線路是否正常等等。如果主站點服務器能提供正常服務，再根據DNS請求包源地址，將域名解析為主站點的聯通或電信地址（根據動態探測結果），使用戶訪問主站點服務器。如果主站點服務器不能提供正常服務，則將域名解析為備站點的地址，使用戶訪問備站點服務器。當兩個數據中心的任何一個互聯網線路故障或負載均衡設備同時故障，備份中心的負載均衡設備探測到對端數據中心故障，并接管全部D

9、NS解析功能，引導用戶訪問第二個數據中心互聯網入口。3.1.2.2 核心區網絡該部分內容具體設計與實施需要專業的網絡系統廠商或集成商提供。3.1.2.3 SAN網絡數據中心A和數據中心B各部署臺光纖交換機，光纖交換機之間互為冗余，應用服務器和數據庫服務器通過HBA卡與兩臺冗余的交換機進行連接，交換機再與本地的存儲的控制器連接，以數據中心A為例，SAN區域網絡具體連接如下圖：3.2 應用子系統3.2.1 簡述數據中心雙活在應用處理層面上實現了完全冗余，通過負載均衡自動路由到不同數據中心的應用服務器，所有的業務系統同時在同城的兩個數據中心運行，同時為辦公人員提供服務。當某個數據中心的應用系統出現問

10、題時，有另一個數據中心的應用來持續的提供服務。好處是服務能力是雙倍的，業務連續性和穩定性得到了大大的提高且對用戶來說服務體驗更好，故障無需感知。3.2.2 設計實現在數據中心內部：為了滿足高性能和高可靠性的服務需求，將多臺服務器通過網絡設備相連組成一個服務器集群，每臺服務器都提供相同或相似的網絡服務。服務器集群前端部署一臺radware設備，負責根據已配置的均衡策略將用戶請求在服務器集群中分發，為用戶提供服務，并對服務器可用性進行維護。負載均衡設備對數據流量優化時，采用旁掛方式部署，在此模式下只有客戶端的請求報文通過負載均衡設備，服務器的響應報文不經過負載均衡設備，從而減輕負載，有效的避免了其

11、成為網絡瓶頸。客戶端請求報文的目的地址為虛服務地址(VSIP)，此地址由負載均衡設備對外呈現。負載均衡設備分發服務請求時，不改變目的IP地址，而將報文的目的MAC替換為實服務的MAC后直接把報文轉發給實服務。數據中心間：原數據中心應用服務器可按照上文所述的方式做集群實現負載均衡又或者保持原樣，在新建的數據中心B采用傳統的X86機架式服務器搭建與數據中心A完全一致的應用服務器系統，建設時要考慮原有性能與新建應用系統差距不能太大。3.3 數據庫子系統3.3.1 簡述數據庫雙活則是指兩個數據庫系統可以在相隔比較遠的情況下同時運行、支持相同的應用負載，并且在一方出現故障時能夠迅速切換到另一方（分鐘級）

12、，保證業務高可用性。比如ORACLE擴展的RAC和DB2的purescale技術。但數據庫的雙活前提必須是網絡和存儲雙活。以ORACLE擴展的11G RAC為例，其ASM卷則需要在兩邊存儲做鏡像綁定，以保證讀寫一致。在雙活數據中心模式下，Oracle RAC數據庫可以實現跨站點部署。兩個Oracle RAC節點分別部署在兩個數據中心（Oracle RAC 1部署在數據中心A，Oracle RAC 2部署在數據中心B），即使數據中心A發生故障，也不會影響到運行在數據中心B里的Oracle RAC 2應用。同時建議oracleRAC結合VMware HA技術，結合VMware HA可以保證數據中心

13、B自動重啟原來運行在數據中心A的Oracle RAC 1應用。相比運行在物理架構上RAC，則運行在VMware虛擬化平臺之上的Oracle RAC不僅可以實現更高級別的業務連續性，而且可以在線進行維護和擴容。借助VMware vMotion技術，還可以在線遷移Oracle RAC節點，從而避免了硬件維護時的應用部分中斷。此外，通過VMware Hot-Add技術，我們還可以在線增加RAC節點虛擬機的CPU數量以及內存容量，從而避免了硬件擴容時的應用中斷。3.3.2 設計實現原理圖各數據中心，數據庫服務器單獨建設一個局域網，并通過高帶寬光纖將數據中心A與數據中心B連接，并部署成OracleRAC，同時在數據中心A中或者其它區域位置部署一臺仲裁服務器。3.4 存儲子系統3.4.1 簡述存儲雙活使信息能在數據中心內部以及數據中心之間共享、存取或移動，從而將各種不同的存儲系統聯合成為單一資源。它允許地理上分離的兩個數據中心間的存儲系統同時進行數據存取，對客戶