1、金融大數據分析平臺介紹技術創新 變革未來公司簡介基礎設施云端化基于aws 的金融數據增值服務 挑戰與思考目錄路透金融的歷史湯森路透 金融信息服務業務的歷史1851年10月， 路透的創始人 Paul Julius Reuter 開始利 用海底電報電纜， 將倫敦股票交易所的行情數據發送到法 國巴黎1984年 路透集團在倫敦股票交易所和紐約NASDAQ交易所上 市2008年4月路透集團被湯森集團以176億美元兼并，并更名ThomsonReuters/wiki/Reuters_Group湯森路透 金融信息服務系統1973年 路透開始利用計算機終端為用戶提供外匯1981年 路透開始利用自己的全球計算機網

2、絡，為進而為全球用戶提供電子交易系統和撮合服務1984年 路透的 RIC (Reuters Identification C絡 IDN (Integrated Data Network) 開始運行2010年 基于 TCP/IP 組播網的 Elektron 網絡開圖片引自：/archives/technology/reuters-technical-developme行情數據用戶傳遞交易信息，ode) 發布， 核心網 始商務運行nt-chronology-1980-1984桌面客戶端的界面遍布全球的自建數據中心Eagan (EAG)E-CIB P2

3、PPEFareham (UK1)EVAIE-CIBORG, TartanSingapore (SG1)VAPAsia WebGrabberEVAIHazelwood (HDC)iSuiteDAMONEVAI (VAH, TDH)Docklands (DTC)EVAIIDN CIBORG, LOGRTACPDSDAMONE-CIBORG, TartanHong Kong (HK1)VAPAsia WebGrabberGreen Location of PR site Blue Location of DR site Amber Test Environments Underlined - IDN

4、 ApplicationNo underline - Elektron ApplicationSt Louis (STL)EVAI Sandpit/SITNutley (NTC)EVAI (VAH, TDH)Geneva (GVA)IDN CIBORG, LOGRTACPDSHartland (US1)iSuiteiSuite PPEEVAdmin PPEHauppauge (HTC)Amers WebGrabber遍布全球的自建數據中心紐約 長島Hauppauge (1982)Inc. or its affiliates. All rights 倫敦 Dockland (1987)reser

5、ved.基礎設施云端化進行中為什么要基礎設施云端化信息技術的更新換代分工提高效率解耦并重建關鍵的信息系統自上而下的組織重構公司范圍的項目公司范圍的項目我們團隊開發的項目項目的Amazon ECRService Source GitService AppValidation GitPipeline FactoryS3Code PipelineECSCloudFormationDeveloperCommit CodeCommit CodeJenkinsJenkinsiac codeASM204830result.jsonService registerJar files Config files

6、Iac codeLambdasIAM rolesKMSCloudWatch Log Groups.Docker imageNon-Prod account204476 Prod accountGet_Pipeline_ArtifactsAppValidationFargateCI - Continuous Integration 持續集成全代碼控制自動化代碼構建自動化測試CD - Continuous Delivery 持續交付自動發布測試 (App Validation, Integration Testing, Performance/Stress etc.)ArtifactoryCD -

7、 Continuous Deployment 持續部署人工審批我們團隊正在開發的項目Simple Pricing Enhancer (for) Elektron DataSPEED我們團隊正在開發的項目核心技術Eikon Excel 編譯成為可以被C+調用的動態庫支持80多個常用的Excel函數，6個Eikon Excel定制函數，和 356個公司專有的金融量化分析函數Sheet1!A2 = BID Sheet1!A3 = ASK Sheet1!B1 = EUR= Sheet1!B2 = RtGet(“E,B1,A2)Sheet1!B3 = RtGet(“E,B1,A3)Sheet1!D2 =

8、 MID Sheet1!E1 = EUR= Sheet1!E2 = AVERAGE(B2:B3)Sheet1!E3 = EEI_Output(D1:E2)DLLnc. or its affiliates. All rights erved.Rule DesignRule DesignStaging TestLive Deploy的主要問題編譯器x1和 計算進程xN分別部署受到硬件資源的限制：無法實現計算的有效隔離Logging 無法有效監控計算過程計算進程dll ndll 1dll 2*dll ndll 1dll 2*線程 1*線程12LLVM+libsxlsxdll服務器 01A/B服務器

9、04A/B編譯服務器01A/B計算進程線程 1dll ndll 1dll 2*線程12dll ndll 1dll 2*部署 dll全容器化CI: Git / GitLab-CI GitLab Runner on EC2 ECRCD: CloudFormation IAC CodePipeline ECS挑戰與思考作為團隊的管理者 或 架構師公司價值和團隊的技術棧提高正常場景下的系統效率上aws云之后，多次重構利用aws的服務作為團隊的管理者 或 架構師方向指北用統計數據指引方向 用戶使用統計， 性能指標 Metrics快速部署 CI/CD 和 CloudFormation了解各種性能限制最后的救命稻草10 Lessons