分布式數據庫技術架構演變與發展方向CSDN數據庫核心技術與應用實戰峰會目錄/ContentsPartone分布式數據庫技術架構分類ParttwoPartthreePartfour企業為何需要分布式數據庫企業典型業務場景分布式數據庫的技術架構演變Partfive分布式數據庫技術架構的未來方向Partsix數據庫行業十三五預測分布式數據庫技術架構分類分布式數據庫技術架構分類OralceRACMySQLClusterVerticaGreenPlumHBaseMongoDB分布式數據庫技術架構分類MySQLProxyTDDLAtlasD-RDSOceanBaseHotDBFabricCDBCobar2005年

---2015年企業為何需要分布式數據庫企業為何需要分布式數據庫易擴展海量用戶海量數據高可靠高性能高并發業務要求企業為何需要分布式數據庫私有云數據創造價值分布式開源產品硬件平民化自主研發自動化企業信息化發展的趨勢企業為何需要分布式數據庫企業典型業務場景企業典型業務場景目標說明指標分解海量數據系統運行一年之后數據總量：120T每年數據增量：小于等于20%，也即第一年數據最大增量：24T單應用數據20T以上單表有20億條記錄(大省的在1億+條記錄)系統正常運行后，不做任何數據存儲調整或二次拆分的情況下，支撐業務數據持續增長年限：3年高可用數據庫可用性達到99.99%，即每年僅允許有累計53分鐘的不可用時間；定期維護（包括部署）除外要求可在線數據備份，時間少于11小時（22：00～08：00）失敗切換時間小于10s故障恢復時間小于30分鐘數據復制延遲時間（本地：1s，異地：1分鐘）本地同步時，數據丟失量小于1筆交易高性能要求支撐5+個應用的全國訪問支持的并發量大于2萬數據庫交易量大于10萬/s響應時間<1s

最大響應時間<10sQPS大于30萬可擴展當數據量或系統負載超過我們3年規劃之后，大部分業務系統可通過增加物理服務器節點的方式，達到支持業務的持續發展或性能線性提高要求性能可擴展要求容量可擴展數據遷移時可通過規劃和技術手段，能做到不影響數據庫提供數據服務的質量增加物理服務器節點，對應用模塊透明，不需要修改任何代碼要求可在線擴展，擴展時間/對業務的影響時間（如性能下降時間）小于10小時擴展的線性度應該大于70%多中心要求兩地三中心數據容災及數據服務要求在線，且數據中心的每個節點都可以提供服務數據同步延遲最長時間小于1分鐘數據服務切換最大時間小于3分鐘業務服務切換最大時間小于10分鐘數據丟失量小于100筆交易不同機房的業務數據庫組之間，能做到數據異步互相復制；同一份數據，同一時刻只有一個數據中心應用模塊能對其進行修改，但是全網的數據中心都可同時對其進行只讀操作電信行業某集團總部去IOE項目目標說明指標分解高并發2013年單量：平時N00萬，高峰NE00萬

2013年操作平臺TPS須大于270002014年單量：平時M000萬，高峰M000萬

2014年操作平臺TPS須大于400002015年單量：平時DF00萬，高峰D000萬2015年操作平臺TPS須大于60000網點數量：12000+

PDA終端：10W+

子系統PC終端：4個+/網點

接入平臺集群應用服務數量：YX0個+

數據庫連接數2100/實例（操作平臺占130個）

2014年峰值單量M000W，全國12000個網點。

操作平臺N00W單量，優化前：數據寫入：INSERTKL億次/天數據刪除：DELETEKX億次/天操作平臺N00W單量，優化后：數據寫入：INSERTX億次/天數據刪除：DELETEY億次/天高可用數據庫可用性達到99.99%數據服務或應用服務的任意一個節點宕機，

不影響業務系統服務應用展開服務達到99.99%數據庫中間件達到99.99%應用對列服務達到99.99%故障切換時間小于10秒業務系統整體每年僅允許有累計53分鐘的

不可用時間，定期維護（包括部署）除外故障恢復時間小于5分鐘數據庫的數據復制延遲時間小于1秒伸縮性應用服務任意增減

支持對操作平臺中的展開應用服務節點和數據庫實例進行動態擴展；對數據庫與應用服務解耦后，調整數據節點或應用節點，互相不影響

業務系統的正常服務。數據庫節點任意增減負載均衡應用服務支持集群化部署應用集群中的節點可任意增減數據服務支持集群化部署數據服務集群中的數據庫節點可任意增減快遞物流行業去IOE項目企業典型業務場景8對X86服務器組成的MySQL數據庫存儲層HotDBHotDBExpress_appExpress_appExpress_appxxx_app_1xxx_app_2mmm_app_1mmm_app_2nnn_app_1nnn_app_2快遞物流行業去IOE項目某某速遞的運單數據公共服務的業務數據指標，如下：平均每天1000萬以上運單數據產生；平均每天8000萬次以上INSERT操作；平均每天1.2億次以上SELECT操作；平均每天1000萬以上UPDATE操作；數據保存生命周期

年，每月產生業務數據GB以上，總數據容量TB以上；125002企業典型業務場景分布式數據庫的技術架構演變分布式數據庫的技術架構演變SSSS分布式數據庫的技術架構演變MySQL_Server_1MySQL_Server_2MySQL_ClientJavaMySQL_Cluster_NDB_Management_ServerNDBManagementClientndb_mgm負載均衡設備MySQL_Cluster_SQL_NodeMySQL_Cluster_Data_Nodendbd_1ndbd_2ndbd_3ndbd_4節點宕機，集群內配對節點接管SQL節點宕機，負載均衡設備控制不向其發送數據操作請求MySQL_Server_1增加處理節點ndbd_5ndbd_6增加數據節點分布式數據庫的技術架構演變OracleDiamond

配置中心IbatisSpingJDBCTemplatetddlmatrixds(TDataSource)tddlgroupdstddlatomds(withjbossds)JDBCDriverHibernate業務邏輯OracleMySQLMySQLIbatisSpingJDBCTemplatetddlmatrixds(TDataSource)tddlgroupdstddlatomds(withjbossds)JDBCDriverHibernate業務邏輯分布式數據庫的技術架構演變ClientClientClientClientClient數據庫中間件在線雙主在線雙主在線雙主SMSMSM分布式數據庫技術架構的未來方向分布式數據庫技術架構的未來方向應用連接池數據庫連接池MySQLProtocol通信層（NIO/AIO/BIO）事務協調組件數據同步組件數據遷移組件資源管理組件HA檢測組件SQL優化組件SQL路由組件SQL解析組件MySQLProtocol通信層（NIO/AIO）ApplicationApplication集群管理組件

Manager會話管理心跳管理內存管理線程管理………..監控&管理存儲層MySQLMySQLMySQLMySQLMySQLMySQLMySQLMySQLGROUPBY聚合組件結果集合并組件ORDERBY排序組件SQL執行組件現在分布式數據庫技術架構的未來方向企業生產在線交易系統，即OLTP業務場景經過企業級驗證，成熟穩定主流開源數據庫產品MySQL海量數據存儲海量用戶訪問業務場景數據分片垂直拆分水平拆分智能分片算法應用透明單一的數據訪問服務屏蔽數據拆分的復雜邏輯應用服務透明服務質量高可用高并發高性能業務需求節點管理實例管理數據庫管理統一訪問管理設備管理備份管理日志管理系統管理業務流程租戶管理策略管理自動化管理監控管理性能管理告警管理安全管理統一訪問入口數據庫標準協議多租戶隔離一鍵開通服務能力透明化服務消費可度量數據服務透明服務可擴展服務需求分布式數據庫技術架構的未來方向二地三中心多活HotDB_server_1aHotDB_server_1bHotDB_Cluster_內蒙HotDB_server_1aHotDB_server_1bHotDB_Cluster_廊坊HotDB_server_1aHotDB_server_1bHotDB_Cluster_北京內蒙->北京ReplicateData北京->內蒙ReplicateData廊坊->內蒙ReplicateData內蒙->廊坊ReplicateData北京->廊坊ReplicateData廊坊->北京ReplicateDatadb1adb1bDatabase_Server_Cluster內蒙db2adb2bdbnadbnbdb1adb1bDatabase_Server_Cluster廊坊

db2adb2bdbnadbnbdb1adb1bDatabase_Server_Cluster北

京

db2adb2bdbnadbnb分布式數據庫技術架構的未來方向數據庫行業十三五預測數據庫行業十三五預測國產數據庫進入死亡期分布式數據庫技術像虛擬化一樣普及自主研發與開源數據庫融合獨霸天下實力派中型和大型企業數據庫私有云化分析型數據庫NotonlySQL中小企業數據庫公有云化未來現在公司名稱：上海熱璞網絡科技有限公司公司地址：上海市閔行區先