1、快速搭建云上高可用方案指南技術(shù)創(chuàng)新，變革未來(lái)公司頭號(hào)活動(dòng)要開始了！根據(jù)產(chǎn)品拍腦子的數(shù)據(jù)和開發(fā)拍胸脯的保障，我準(zhǔn)備了環(huán)境和預(yù)案。活動(dòng)上線前活動(dòng)過(guò)程中ing活動(dòng)結(jié)束后活動(dòng)過(guò)程中，故障報(bào)警一波 又一波：重啟關(guān)了絕對(duì)起不來(lái) 擴(kuò)容擴(kuò)幾臺(tái)崩幾臺(tái)查故障來(lái)不及，活動(dòng)結(jié)束了服務(wù)器宕機(jī)了大佬們（故障）活動(dòng)結(jié)束后，成為眾矢之的反省、故障回顧報(bào)告：神馬，說(shuō)不清楚哪里的問(wèn)題？環(huán)境的問(wèn)題！我真錯(cuò)了背鍋工具人的故事我Day1Day1 方案是什么？Day 1 工具在哪里？壓測(cè)數(shù)據(jù)壓測(cè)場(chǎng)景壓測(cè)執(zhí)行數(shù)據(jù)調(diào)度任務(wù)調(diào)度引擎調(diào)度關(guān)鍵指標(biāo)監(jiān) 控告警示服務(wù)調(diào)用跟 蹤故障根因定 位客戶系統(tǒng)壓測(cè)工具 PTS故障演練依賴降級(jí)限流熔斷服務(wù)冗余數(shù)據(jù)

2、恢復(fù)讀寫隔離架構(gòu)可視化限流降級(jí)故障演練高可用工具 AHAS報(bào)監(jiān)控工具ARMS 業(yè)務(wù)大屏展阿里云統(tǒng)一控制臺(tái)庫(kù)存系統(tǒng)訂單系統(tǒng)交易系統(tǒng)用戶管理營(yíng)銷系統(tǒng)容量評(píng)估結(jié)果性能優(yōu)化建議數(shù)據(jù)上報(bào)壓測(cè)什么環(huán)境：線上我們的架構(gòu)：SLB微服務(wù)網(wǎng)關(guān)具體服務(wù)數(shù)據(jù)庫(kù)活動(dòng)預(yù)期：5w并發(fā)Day1 壓測(cè)-前期確認(rèn)Day1 壓測(cè)第一次壓測(cè)失敗率高達(dá)70%，明顯與預(yù)期差距過(guò)大，需要對(duì)系統(tǒng)進(jìn)行 調(diào)優(yōu)。Day1 壓測(cè)調(diào)優(yōu)思路總綱：層層監(jiān)控，分層排查，瓶頸突破。Day1 壓測(cè)第一次壓測(cè)的結(jié)論2. 比較成功請(qǐng)求，下一次壓測(cè)建議流 量 1w RPS.1. 比較SLB監(jiān)控和pts監(jiān)控報(bào) 告，發(fā)現(xiàn)接受流量和壓測(cè)流量差 距較大，升級(jí)SLB規(guī)格。Da

3、y2Day2 壓測(cè)第二次壓測(cè)成功率率在預(yù)期之內(nèi)，但是響應(yīng)時(shí)間不符合預(yù)期。Day2 壓測(cè)繼續(xù)調(diào)優(yōu)總綱：層層監(jiān)控，分層排查，瓶頸突破。1. 查看SLB監(jiān)控和ARMS監(jiān)控，發(fā)現(xiàn)延時(shí)基本在應(yīng)用側(cè)。2. 查看ARMS分析出關(guān)鍵慢請(qǐng)求。3. 使用arms分析這些慢請(qǐng)求的調(diào)用情況，重復(fù)上一步，響應(yīng)時(shí)間和成功率到可接受的范圍Day2 壓測(cè)第N次壓測(cè)按照同比例進(jìn)行擴(kuò)容，看是否可以水平擴(kuò)容且性能影響不大根據(jù)最終壓測(cè)結(jié)果，配置單機(jī)限流并通過(guò)壓測(cè)驗(yàn)證。Day2 限流降級(jí)配置實(shí)際由于流程壓測(cè)流程沒(méi)有考慮到位，主流程相關(guān)用戶訪問(wèn)，幾分鐘后rt 迅速升高，并且大量拋出超時(shí)異常。Day2 大促護(hù)航1.通過(guò)ARMS快速定位最慢請(qǐng)求Day2 大促護(hù)航2.通過(guò)ahas實(shí)時(shí)配置限流降級(jí)3.活動(dòng)恢復(fù)希望你能記住的：云上壓測(cè)的一般