1、對公數據集市介紹對公數據集市介紹對公數據集市項目組對公數據集市項目組2014年年1月月2目錄目錄030406050701023目錄目錄03040605070102數據倉庫是一個面向主題的、集成的、非易失的且隨時間變化的數據集合，用來支持管理人員的決策。數據倉庫的四個特點：數據倉庫的四個特點： 1）面向主題）面向主題 2）集成）集成 3）非易失）非易失 4）隨時間變化）隨時間變化數據倉庫概述數據倉庫概述操作系統是面向事務處理的。事務處理關注的是整個事務操作流程，即操作系統是圍繞事務操作流程來組織數據的。數據倉庫是面向主題的。主題是管理人員分析問題的重點。面向主題就是所有的數據都是根據主題來組織的

2、。即數據倉庫的數據都是圍繞分析的重點來進行組織數據的。面向主題面向主題面向主題面向主題操作系統數據倉庫票據信用證貸款客戶協議產品集成是數據倉庫最重要的特性。集成并不是簡單的把數據聚合在一起，還要消除數據的不一致性。由于數據倉庫是面向主題的，一個主題下可以包含多個源系統的數據，只有統一各個源系統不同的編碼，才能在同一個主題下匯總、分析數據，從而消除不同系統間的信息孤島問題。集成集成客戶 A：A1性別 男：M機構 O：O1客戶 A：A2性別 男：0機構 O：O2客戶 A：A3性別 男：1機構 O：O3客戶 A：A性別 男：M機構 O：O操作系統數據倉庫核心信貸國結MAPPING操作系統是實時、事務

3、級的更新和小數據明細的查詢。數據倉庫是定期、批量更新和大數據匯總查詢的。由于數據倉庫一般并不會更新歷史數據，所以數據倉庫是非易失的。非易失非易失操作系統數據倉庫載入訪問修改增加刪除查詢操作系統一般只會保留數據的最新記錄。數據倉庫需要保留各個歷史時點的數據，已便于對數據在時間維度上進行分析、挖掘。隨時間變化隨時間變化操作系統數據倉庫時間期限：近三個月記錄更新日期戳可有可無時間期限：510年復雜的快照數據時間維度自頂向下：先建設數據倉庫，再建設數據集市自底向上：先獨立建設數據集市，在統一維度總線的基礎上合成數據倉庫數據倉庫的兩種建設方式數據倉庫的兩種建設方式核心信貸國結數據倉庫對公集市零售集市風險

4、集市核心信貸國結數據倉庫對公集市零售集市風險集市自頂向下自底向上統一維統一維度總線度總線一般銀行業數據平臺架構一般銀行業數據平臺架構數據架構中的關注點（五個維度）數據架構中的關注點（五個維度）目標服務數據加載；直接提供基于源系統結構的簡單原貌訪問；長期的，細節的，整合的數據存儲；為BI環境中的各類業務需求提供支持相對通用，具業務意義的初加工數據；作為上層應用數據加工的基礎，或供業務人員直接訪問；服務特定應用原則簡單處理，不考慮整合；關注保留策略；面向全局，數據整合中性設計，靈活擴展提供規范和共享提煉應用需求共性多種數據粒度易于理解和使用面向具體應用按需設計形式偏源系統模型； 少量數據保留短暫歷

5、史；部分數據保留全量面向主題設計；偏范式化；長期保留歷史；初步數據加工；分層設計；形式各異，依具體應用不同；重點理解源結構主題定義框架設計整合策略實施方法應用篩選應用提煉整體性一致性用途業務原貌查詢即時報表數據質量檢查靈活查詢整合規則檢查常規報表靈活查詢業務規則檢查特定應用 緩沖層 基礎層 匯總層 應用集市層數據架構之數據架構之EDW12數據平臺數據平臺上報數據報表數據指標數據查詢數據參數數據挖掘數據.信用卡信用卡網銀網銀基金代銷基金代銷核心核心信貸信貸國結國結EDW數據緩沖層（FDM）核心信貸國結信用卡網銀基金代銷LDM匯總數據賬戶匯總交易匯總產品匯總渠道匯總客戶匯總整合數據層（LDM）協議

6、團體事件賬務產品渠道供統一的業務口徑避免集市的重復加工隨著應用建設逐步完善業務統計口徑變化，ETL會隨之變化視情況保留較長歷史 為ETL方便設計的專用層，可加載增量或全量數據 在此層完成數據同構化 數據原樣加載，保持與源結構一致 一般按照業務系統進行命名識別 可保留部分最近數據以供重新加載 面向整合 主題設計 標準化數據 3NF設計 保留較長歷史 面向應用，按需定制 可分為內部集市和外部集市 可通過反范式提高響應性能 可為匯總層提供擴充依據 視情況保留較長歷史從前面一般銀行數據倉庫的架構可以看出，數據集市是數據倉庫的一個子集，是為特定的分析應用而建設的。數據集市根據所處位置的不同分以下幾類：數

7、據集市數據集市數據倉庫數據倉庫源系統.信用卡信用卡網銀網銀基金代銷基金代銷核心核心信貸信貸國結國結數據緩沖層倉內倉內物理物理集市集市倉外倉外物理物理集市集市倉內倉內邏輯邏輯集市集市整合數據層共性匯總層14目錄目錄03040605070102資產業務（客戶立場）：資產業務（客戶立場）：活期：單位活期存款是指，不規定存款期限，客戶可以隨時存取，并按活期存款利率按季計取利息的存款。定期：單位定期存款是客戶與我行事先約定存款期限，到期后支取本息的存款。保證金：保證金是指客戶或第三方為擔保客戶履行與我行簽定的相關合同義務，出于設置擔保目的而存入我行的，歸客戶或第三方所有但由我行占有的特定化的資金。負債業

8、務（客戶立場）：負債業務（客戶立場）：一般貸款：負債業務主要是銀行對單位客戶提供資金融通的表內業務。一般貸款是指一般的資金融通業務，不包含保理和貼現。保理：保理是一項綜合性金融服務。在保理業務中，賣方將其現在或將來的基于其與買方訂立的貨物銷售/服務合同所產生的應收帳款轉讓給銀行，由銀行提供貿易融資、賬戶管理、應收賬款催收、風險控制等服務。貼現：貼現是商業匯票的持票人將未到期的商業匯票轉讓給銀行，銀行按票面金額扣除貼現利息后，將貼現金額付給持票人的一種融資行為。銀行對公業務銀行對公業務表外業務：表外業務：所謂表外業務，即不計入資產負債表的業務，國家對這部分業務的限制較少，也不影響銀行資產負債表，

9、是目前銀行大力發展的業務。保函：又稱保證書，是指銀行、保險公司、擔保公司或個人應申請人的請求，向第三方開立的一種書面信用擔保憑證。保證在申請人未能按雙方協議履行起責任或義務時，由擔保人代其履行一定金額、一定期限范圍內的某種支付責任或經濟賠償責任。銀行保函包括履約保函、預付款保函、投標保函、維修保函、預留金保函、稅款保付反擔保函、海關風險保證金保函等。信用證：信用證系指，銀行依照申請人的申請向受益人開出的，憑符合信用證條款規定的單據支付一定金額的付款承諾。信用證是國際結算的一種重要工具。銀行承兌匯票：銀行承兌匯票是指，由承兌申請人簽發并向開戶銀行申請，經銀行審查同意承兌的商業匯票。其中，商業匯票

10、是出票人簽發的，委托付款人在指定日期無條件支付確定的金額給收款人或者持票人的票據；承兌是指匯票付款人承諾在匯票到期日支付匯票金額的票據行為。銀行對公業務銀行對公業務17目錄目錄03040605070102 為更好的貫徹最佳銀行戰略，做好公司業務客戶管理和營銷工作，進一步鞏固和發揮平安銀行業務優勢實現公司銀行的戰略目標。 為適應平安銀行對公業務管理需要，為支持最新的對公業務管理工作方針，為配合、推進平安集團綜合金融的戰略要求；必須實現銀行對公客戶信息整合，形成對公數據集市,通過整合客戶的數據信息，進一步挖掘客戶的價值信息，更好的支持公司業務客戶營銷、管理分析工作的開展。挖掘客戶的潛在需求，為我行

11、制定個人業務發展戰略、產品創新、客戶服務的準確定位提供了良好的、科學的分析依據。同時，為戰略客戶的營銷和管理提供依據，通過客戶信息的整合，客戶經理及各層級管理領導、各分支行機構能全方位的360度的了解公司客戶過去及現狀的全貌，能第一時間了解客戶的營銷意向，能清晰的知道客戶給我行帶來的價值，以日常工作平臺為高效的溝通管理工具，對重點項目、銷售機會和營銷活動等營銷服務管理的資源共享和工作協同，實現銀行E化營銷銷售流程管理，并帶來新的客戶服務體系、科學的市場營銷策略、更低的營銷和服務成本、更高的客戶保留率、優化的銀行市場價值鏈條、以及增加銀行業務量、提高商業銀行核心競爭能力，實現公司銀行的戰略目標。

12、項目背景項目背景項目目標項目目標功能范圍功能范圍簡述簡述銀行對公客戶信息整合包括客戶基本信息、客戶產品信息、客戶銷售信息、客戶價值信息等，建立統一完整的客戶360視圖建立對公營銷產品目錄樹配合對公條線各部門基于產品營銷的需求，建設一套以產品歸口管理部門劃分的產品目錄樹統一對公系統群數據源各個業務單元和對公管理系統使用數據源統一由對公數據集市提供（本期為精準營銷平臺，對公報表提供數據支持）實現對公條線各部門各事業部功能及報表數據需求完善對公業務分析統計模型，使之能夠全面的支撐各業務單元的功能及報表統計需求 支持事業部、分行等機構考核配合各部門基于產品核算的需求，協助事業部及分行等機構的考核、調整

13、。20目錄目錄03040605070102集市總體架構集市總體架構對公數據集市（Oracle（11G）明細區明細區匯總區匯總區數據采集平臺應用系統應用系統ODS數據平臺E T L （落地文件）歷史歸檔歷史歸檔數據標準數據標準管理管理數據質量數據質量管理管理業務應用數業務應用數據據實時數據服務數據服務區批量數據服務直連應用數據整合與輸出源系統源系統核心信貸 網銀票據國結第三方補錄對公CRM對公績效對公客戶升級對公報表精準營銷平臺SAS指標區指標區交易系統點對點文件傳輸應用數據整合與輸出報表數據報表數據挖掘區挖掘區部門特色需部門特色需求求收益、補錄收益、補錄數據數據PDM（明細層 GreenPlu

14、m）集市數據架構集市數據架構應用系統數據標準管理數據質量管理源源系系統統ODS平平臺臺匯總區匯總區指標區指標區數據服務區數據服務區報表數據部門特色需求數據差異統計臨時統計其他需求專題分析挖掘區業務應用數據SAS直連固定報表多維報表管理駕駛倉對公CRM對公績效對公客戶升級精準營銷平臺余額匯總貢獻度匯總產品匯總其他匯總交易匯總客戶扁平化客戶標志對公CRM對公績效對公客戶升級對公報表精準營銷平臺SAS賬戶數指標客戶數指標交易量指標資產類指標負債類指標收支類指標明細區明細區利率類指標客戶主題匯總區匯總區部門快報其他指標指標區指標區精準營銷平臺數據服務區數據服務區客戶基本信息客戶映射關系客戶聯系信息帳號

15、主題賬戶基本信息賬戶擴展信息賬戶客戶關系產品主題產品基本信息產品賬戶映射客戶權益客戶收益信息客戶風險信息客戶分層標準交易 主題交易整合信息交易對手信息銀行組織財務主題附屬信息各系統賬務信息銀行機構信息銀行員工信息公共信息公共維度信息其他附加信息明細數據區明細數據區集市物理架構集市物理架構對公數據集市環境配置：生產環境：2臺 IBM P720 8C 32G 1T 存儲 IP： 24、25 集市數據加工流程集市數據加工流程25目錄目錄0304060507010226對公數據大集中（集成對公數據大集中（集成21個對公系統數據）個對公系統數據）序號序號系統系統業務數

16、據業務數據1統一客戶信息系統（BECIF系統）客戶基本信息（客戶號統一，先行統一客戶升級及對公CRM）2核心系統客戶基本信息、賬戶信息、國內保函信息、現金管理信息、存款信息、貸款信息、傳票信息、機構信息、科目信息、（還款利息）、欠息等3信貸系統客戶基本信息、授信業務品種信息、授信審批信息、授信合同信息、授信借據信息、抵押物信息、擔保物信息、其他重要信息等4票據系統客戶基本信息、承兌匯票信息、票據貼現信息、開票申請信息等5國際結算系統客戶基本信息、國內信用證信息、進口信用證信息、進口保函信息、匯入匯出信息、托收（跟單、光票）信息、外匯買賣信息、傳票數據等6基金與理財系統客戶基本信息、客戶簽約信息

17、、基金交易信息、理財交易信息、基金余額信息、理財余額信息7保理系統客戶基本信息、保理產品信息、保理交易信息、保理余額信息、發票信息8黃金系統客戶基本信息、簽約信息、黃金產品信息、現貨交易信息、延期交易信息、庫存信息。93方存管系統客戶基本信息、簽約信息、產品信息、交易信息、余額信息、券商信息10國債系統客戶基本信息、簽約信息、國債產品信息、國債交易信息、國債余額信息11網銀系統客戶基本信息、簽約信息、交易信息12銀企直聯系統客戶基本信息、簽約信息、交易信息13供應鏈系統客戶基本信息（包含核心企業信息、監管方信息）、簽約信息、供應鏈信息、抵押物信息、供應鏈產品信息、交易信息14中間業務平臺客戶信

18、息、代發、代付賬戶信息、交易信息15會計核算系統(SAP)客戶收益信息（ftp與利息）、產品目錄樹及相關信息、中間業務交易信息16風險資產管理系統（RWA）RWA風險資產信息（風險金額）17績效系統客戶、賬戶分配信息、客戶主辦客戶經理信息18CRM系統客戶主辦客戶經理信息、客戶合并信息、產品目錄及配置信息19人力資源管理系統（NHR）客戶經理人員基本信息（編號、職位、機構等）20LDM基礎模型余額積數、交易明細、機構基本信息等21OF總賬系統總賬信息、科目信息對公數據源統一對公數據源統一各個業務單元和對公管理系統使用數據源統一由對公數據集市提供。其中包括：數據來源一致、統計口徑一致兩方面的內容

19、。數據來源一致數據來源一致數據源統一除了構建統一標準的對公數據集市之外，更為重要的是： 統一共識，業務數據必須由對公數據集市提供。 數據需求可向數據集市提出，數據集市必須快速響應。 數據集市必須有足夠的前瞻性和總結性，可以容納范圍更廣的業務數據。統計口徑一致統計口徑一致統計口徑一致，需要收集和約定一份能達成統一認識的統計口徑說明。如：資產負債以總賬為標準其它信息以公司銀行部為標準。對公數據集市模型對公數據集市模型主題主題表前綴表前綴功能概述功能概述客戶主題F_CUST歸集以及統一來自各個源系統的客戶信息，來源系統包括核心、信貸、銀行客戶信息管理系統、國結等賬戶主題F_ACCT歸集以及統一賬戶信

20、息，包括存貸款、理財、表外等賬戶信息產品主題F_PROD歸集以及統一產品信息，構建對公統一產品目錄數樹銀行組織F_ORG歸集以及統一銀行組織，包括機構、人員、團隊等銀行內部組織信息客戶權益F_RIGH存放客戶權益信息，包括客戶收益、分層等信息財務主題F_FIN存放各個系統的科目、科目余額等信息交易主題F_TRAD存放對公交易信息，來源主要為LDM交易整合表公共主題F_COM存放公共維度信息附屬信息F_ATT存放上述主題外的附屬信息 歸集對公條線所有數據，按主題劃分，通過不同主題分類歸集并統一銀行對公數據，邏輯模型采用雪花模型進行建模，形成客戶、產品、客戶經理分析為支撐的大數據分析模型。對公集市

21、模型對公集市模型-客戶主題客戶主題對公集市模型對公集市模型-賬戶主題賬戶主題對公集市模型對公集市模型-賬戶主題續賬戶主題續對公集市模型對公集市模型-銀行組織銀行組織對公集市模型對公集市模型-產品主題產品主題對公集市模型對公集市模型-交易、客戶權益與財務主題交易、客戶權益與財務主題主題主題中文表名中文表名英文表名英文表名交易主題結售匯及外匯買賣明細表F_TRAD_EXCH_FLOW_B交易對手信息表F_TRAD_OPPO_INFO_B賬戶交易流水表F_TRAD_ACCT_FLOW_B賬戶交易整合表F_TRAD_ACCT_INTEG_B賬戶交易流水附加表F_TRAD_ACCT_FLOW_ADD_B

22、網絡金融部電子替代率表F_TRAD_WFIN_REPL_B理財買入交易流水表F_TRAD_CLC_BUG_FLOW_B回款交易流水表F_TRAD_REC_FLOW_B中間業務平臺交易批次信息表F_TRAD_BIB_BATCH_STAT_B中間業務平臺資金交易日志表F_TRAD_BIB_FUND_INFO_B客戶權益客戶分層標準定義表F_RIGH_CUST_LVL_RULE_B加權風險資產總額表F_RIGH_RMA_RISK_B存款賬戶收益信息表F_RIGH_DEPO_INC_B貸款賬戶收益信息表F_RIGH_LOAN_INC_B中間業務客戶收益信息表F_RIGH_MID_INC_B財務主題科目

23、信息表F_FIN_SUBJ_INFO_B總賬科目信息表F_FIN_GL_SUBJ_INFO_BFBS總賬余額表F_FIN_FBS_GL_BAL_B總賬余額表F_FIN_GL_BAL_B對公集市模型對公集市模型-附屬信息附屬信息主題主題中文表名中文表名英文表名英文表名附屬信息擔保合同F_ATT_GUAR_CON_B抵押物信息F_ATT_GUAR_INFO_B貸款申請信息表F_ATT_BUS_APPL_B貸款批復信息表F_ATT_BUS_APPR_B貸款合同信息表F_ATT_BUS_CON_B貸款借據信息表F_ATT_BUS_DUE_B貸款借據信息簡表F_ATT_BUS_DUE_SPF_B對公賬號

24、分配規則主表F_ATT_ACCT_RULE_MAIN_B對公賬號分配規則從表F_ATT_ACCT_RULE_DETA_B對公客戶權益比例分配規則主表F_ATT_CUST_RULE_MAIN_B對公客戶權益比例分配規則從表F_ATT_CUST_RULE_DETA_B子賬號分配規則主表F_ATT_SACCT_RULE_MAIN_B子賬號分配規則從表F_ATT_SACCT_RULE_DETA_B對公貼現流水分配主表F_ATT_DISC_RULE_MAIN_B對公貼現流水分配從表F_ATT_DISC_RULE_DETA_B對公中間業務流水分配主表F_ATT_MID_RULE_MAIN_B對公中間業務流

25、水分配從表F_ATT_MID_RULE_DETA_B對公表外業務分配表F_ATT_BW_RULE_B對公虛擬用戶信息表F_ATT_VAL_USR_B對公票據貼現及中間業務流水掛戶表F_ATT_MID_HANG_B單位代碼與客戶號映射配置表F_ATT_DF_CUST_MAP_B360度客戶視圖數據加工度客戶視圖數據加工建立客戶立體化信息視圖，匯聚各類客戶信息，提供跨越客戶生命周期的全方位客戶信息，支撐以客戶為中心的營銷、銷售、服務一體化。 匯聚各系統客戶信息，建立統一的客戶信息模型； 按照6大分類，匯總客戶數據； 對各類應用提供客戶信息支持。 整合客戶信息、產品信息、交易信息等數據，結合精準營銷

26、平臺、績效考核等應用口徑，建立客戶統一視圖，提供標準的客戶基礎信息、統一客戶識別信息。客戶權益關系 客戶行為信息客戶持有產品信息客戶信用與風險客戶基本信息360度客戶視圖客戶簽約信息 客戶客戶360度視圖信息度視圖信息 客戶信息360度視圖是全方位了解銀行公司業務客戶的重要方式，對公數據集市以BECIF號為銀客戶的唯一標識，通過整合客戶的數據信息，進一步挖掘客戶的價值信息，更好的支持我行公司業務客戶營銷、管理分析工作的開展。 通過客戶信息的整合，客戶經理及各層級管理領導、各分支行機構能全方位的了解公司客戶過去及現狀的全貌，能清晰的知道客戶給我行帶來的價值，能第一時間了解客戶的營銷意向等，進而可

27、以滿足我行日常營銷、分析決策以及業務發展需要。潛在客戶收集潛在客戶收集建設對公營銷產品目錄樹建設對公營銷產品目錄樹建立全行統一的對公營銷產品目錄樹實現產品核算統計客戶持有產品對各產品進行定義，并使用一致的方法進行組織產品維度結構，描述各產品分類及定義；整合公司條線所有產品，形成統一的滿足營銷需要的“平安銀行對公產品目錄”（以下簡稱產品目錄）。產品目錄將與SAP產品核算建立配對關系，在SAP中實現各產品、賬戶的核算。包括營業收入、營業支出、凈利潤等。依托對公數據集市及SAP產品、賬戶核算，統計客戶持有產品情況，包括持有各類產品余額及匯總、戶均持有產品數等。對公營銷產品目錄樹配置映射對公營銷產品目

28、錄樹配置映射(19大類）大類）產品條線產品大類產品映射規則基礎產品線基礎授信產品通過SAP產品目錄映射基礎負債產品基礎表外產品網絡金融產品線電子商務金融產品通過補錄平臺實現電子政務金融產品現金管理業務通過SAP產品目錄映射公司理財業務線上供應鏈金融業務通過供應鏈產品類型配置公司電子渠道業務通過源系統標識映射國內貿易融資產品線預付類通過SAP產品目錄+ 對公賬戶輔助維度實現存貨類應收類其他國內融資類國際貿易融資產品線進口融資類通過SAP產品目錄+對公賬戶輔助維度實現出口融資類國際結算通過科目映射取中收離岸業務產品線離岸授信類通過SAP產品目錄+對公賬戶輔助維度實現離岸存款類離岸結算及資金通過源系

29、統表來映射持有產品分析持有產品分析產品的客戶占有率產品利潤率產品的客戶占有率統計，按產品的十九大類，統計持有產品的客戶占有率。分析和統計產品的收入、支出、成本等，統計產品的利潤率等。產品貢獻度通過分析產品的收益、成本、支出，統計產品對分行、事業部的貢獻度。通過我行現有產品的貢獻度進行排名，找到貢獻度最高的前幾個產品，作為明星試點產品產品相關性根據持有產品的客戶特征，持有產品特征的相關性，找出交叉產品，產品間的關聯關系。團隊持有產品分析按團隊持有十九大類產品，分析持有產品的客戶數、時點余額、產品余額月日均、產品余額年日均、產品支出金額、產品收入金額、產品創利。邏輯表名邏輯表名代碼映射表物理表名物

30、理表名F_ATT_CODE_MAP_B邏輯主鍵邏輯主鍵字段名字段名字段英文名字段英文名字段含義字段含義字段數據類型字段數據類型Y批次日期ETL_DATEDATE批次來源ETL_SRCVARCHAR(100)批次腳本ETL_JOBVARCHAR(100)Y代碼類型Code_TypeVARCHAR(100)代碼類型描述Code_Type_DescVARCHAR(100)Y來源系統SOURCE_CDVARCHAR(10)Y源表名Src_TableVARCHAR(100)Y源字段Src_ColumnVARCHAR(100)Y源值Src_ValueVARCHAR(100)映射值Map_ValueVARC

31、HAR(100)值說明Map_DescVARCHAR(200)手動標志Manu_FlagVARCHAR(1)備用字段1Remark1VARCHAR(100)備用字段2Remark2VARCHAR(100)備用字段3Remark3VARCHAR(100)系統模型介紹系統模型介紹-碼值整理碼值整理通過該表，可以把來源于不同系統的不同代碼與碼值關系，統一到對公集市統一的代碼與碼值的映射關系。系統模型介紹系統模型介紹-碼值整理碼值整理邏輯表邏輯表名名代碼字段映射關系表代碼字段映射關系表邏輯表邏輯表名名代碼表代碼表物理表物理表名名F_ATT_CODE_FIELD_MAP_B物理表物理表名名F_ATT_C

32、ODE_INFO_B邏輯主邏輯主鍵鍵字段名字段名字段英文名字段英文名字段字段含義含義字段數據類型字段數據類型邏輯主邏輯主鍵鍵字段名字段名字段英文名字段英文名字段含義字段含義字段數據類型字段數據類型批次日期批次日期ETL_DATEDATE批次日期批次日期ETL_DATEDATE批次來源批次來源ETL_SRCVARCHAR(100)批次來源批次來源ETL_SRCVARCHAR(100)批次腳本批次腳本ETL_JOBVARCHAR(100)批次腳本批次腳本ETL_JOBVARCHAR(100)中文表名中文表名Ch_Tbl_NameVARCHAR(100)Y代碼類型代碼類型Code_TypeVARCH

33、AR(100)Y英文表名英文表名En_Tbl_NameVARCHAR(100)代碼類型描代碼類型描述述Code_Type_DescVARCHAR(100)中文字段名中文字段名Ch_Field_NameVARCHAR(100)Y代碼代碼CodeVARCHAR(100)Y英文字段名英文字段名En_Field_NameVARCHAR(100)代碼名稱代碼名稱NameVARCHAR(200)對應碼值簡碼對應碼值簡碼 Code_TypeVARCHAR(100)手動標志手動標志Manu_Flag1 手動手動 0 自動自動VARCHAR(1)描述描述RemarkVARCHAR(1000)備用字段備用字段1R

34、emark1VARCHAR(100)備用字段備用字段2Remark2VARCHAR(100)備用字段備用字段3Remark3VARCHAR(100)通過這兩個表，可以查看對公集市每個表每個碼值字段對應的相應代碼。注意：目前對公集市的碼值還需要不斷的增加和完善。數據生命周期管理數據生命周期管理邏輯表名邏輯表名數據生命周期管理物理表名物理表名S_DATA_LIFT_MAN_B邏輯主鍵邏輯主鍵字段名字段名字段英文名字段英文名字段含義字段含義Y模式名Mode_NameY表名Tbl_Name周期類型Cycle_ClasscY 年；M 月；D 日周期Cycle是否日期分區表Whth_Or_Not_Dt_P

35、arttn_TblY 是；N 否。日期分區表刪除分區，非日期分區表刪除數據分區模式Parttn_Mode帶日期格式，如 P_YYYYMMDD ，SDB_YYYYMM等數據日期字段 Data_Dt_Field附加策略Addtnl_TacticsY 年；Q 季；M 月；N 沒有附加策略，保留月季年末數據策略周期Tactics_Cycle保留月季年末數據的期限，單位為月，如保留3年則填36錄入員Input_Mb最近運行日期 Rently_Move_Dt每一次運行結束后更新是否生效ActiveY 生效；N 失效數據生命周期管理數據生命周期管理-舉例舉例模式名模式名表名表名周期周期類型類型周期周期是否分

36、是否分區表區表分區模式分區模式數據日期數據日期字段字段附加附加策略策略策略周策略周期期是否生是否生效效CODMDATA F_ACCT_3F_INFO_BD7YP_YYYYMMDD ETL_DATEM36YCODMDATA F_ACCT_ACCT_DIM_BY3YP_YYYYMMDD ETL_DATENYCODMDATA F_ACCT_ACCT_INFO_BM3YP_YYYYMMDD ETL_DATEM36YCODMDATA F_ACCT_CREMIT_INFO_BD7YP_YYYYMMDD ETL_DATEM36NCODMDATA F_ORG_ORG_DIM_BD7NETL_DATEM36Y分

37、區表，一般策略為保留7天歷史數據，附加策略為保留3年月末數據分區表，一般策略為保留3年歷史數據，沒有附加策略分區表，一般策略為保留3個月歷史數據，附加策略為保留3年月末數據分區表，因為狀態為失效，所以數據生命周期管理策略不生效非分區表，一般策略為保留7天歷史數據，附加策略為保留3年月末數據調度批次介紹調度批次介紹任務名稱任務名稱任務描述任務描述開發用戶開發用戶任務內容任務內容task_pdm_codm_detail 對公數據集市明細層調度對公數據集市明細層調度(日日)dev_pdm日批，對明細層數據加工，在日批，對明細層數據加工，在GP完成完成task_pdm_codm_detail_mont

38、h 對公數據集市明細層調度對公數據集市明細層調度(月月)dev_pdm月批，對明細層數據加工，在月批，對明細層數據加工，在GP完成完成task_app_codm 對公數據集市模型調度對公數據集市模型調度(日日)dev_codm日批，對明細、匯總層數據加工，在日批，對明細、匯總層數據加工，在Oracle完成完成task_app_codm_month 對公數據集市模型調度對公數據集市模型調度(月月)dev_codm月批，對明細、匯總層數據加工，在月批，對明細、匯總層數據加工，在Oracle完成完成task_app_codm_int 對公數據集市接口層調度對公數據集市接口層調度(日日)dev_cod

39、m日批，對精準營銷平臺接口供數，在日批，對精準營銷平臺接口供數，在Oracle完成完成task_app_codm_int_month 對公數據集市接口層調度對公數據集市接口層調度(月月)dev_codm月批，對精準營銷平臺接口供數，在月批，對精準營銷平臺接口供數，在Oracle完成完成task_app_codm_life_cycle 對公數據集市生命周期管理對公數據集市生命周期管理(日日)dev_codm日批，數據生命周期管理以及數據庫統日批，數據生命周期管理以及數據庫統計信息收集，在計信息收集，在Oracle完成完成明細層與匯總層的作業結束都加了trig標志，作業名為表名加“_trig”調度

40、批次介紹調度批次介紹-依賴關系依賴關系task_pdm_codm_detail task_app_codm task_app_codm_int task_pdm_codm_detail _month task_app_codm _month task_app_codm_int _month task_app_codm_life_cycle日批月批49目錄目錄0304060507010250系統補錄數據系統補錄數據序號序號補錄表名補錄表名補錄表英文名補錄表英文名1貿融結售匯業務數據INPUT_DGJS_MRJJHYWSJ 2離岸銀團貸款賬號清單INPUT_DGJS_LAYTDKZHQD 3托管賬

41、戶清單INPUT_DGJS_TGZH_M_ALL4貿融客戶清單INPUT_DGJS_MRKHQD_M_ALL5托管分行托管費收入INPUT_DGJS_TGFSR_M_ALL6網金-POS收款賬戶清單INPUT_DGJS_WJPOSSKZH_M_ALL7網金-票據收益權賬戶清單INPUT_DGJS_WJPJSYZH_M_ALL8網金-電子商務政務賬戶清單INPUT_DGJS_WJDZSWZWZH_M_ALL9投行客戶清單INPUT_DGJS_THKHQD_M_ALL10離岸代付賬戶清單INPUT_DGJS_LADFZH_M_IN11貿融-黃金租賃手續費INPUT_DGJS_MRHJZLSXF_M

42、_ALL12網金-定期存款收益權賬戶清單INPUT_DGJS_WJDQCKSYZH_M13離岸-背對背信用證清單INPUT_LA_BDBXYZQD51產品目錄樹、報表重跑產品目錄樹、報表重跑1、產品模塊重跑：產品模塊重跑： 原則上要求上月末的補錄在1號完成，實際上業務補錄會延遲，每月補錄的數據日期為上月最后一天，所以每次重跑，都需要重跑產品目錄樹的所有腳本，跑數日期為上月最后一天至數據補錄完成前一天的批次數據，例：在20131208完成數據補錄，20131208當天跑的是20131207批次數據，那么就需要重跑20131130-20131206的批次數據。2、報表模塊重跑：報表模塊重跑： 調度

43、MOIA報表任務（報表重跑前提是產品目錄月末數據重跑完）在生產MOIA中重新調度報表的任務，任務名稱：task_app_codm_rpt_month將任務重置，參數為YYYYMMDD(月末最后一天，例如：20131231 )52目錄目錄0304060507010253系統下游介紹系統下游介紹-主要下游系統主要下游系統精準營銷平臺第一批接口（精準營銷平臺第一批接口（54個）個）接口表名接口表名英文表名英文表名接口表名接口表名英文表名英文表名分行及網點業務概況 B_ORG_OVERVIEW貸款賬戶信息 B_ACCT_LOAN_INFO客戶經理及團隊業務概況 B_MGR_OVERVIEW貼現業務信息

44、 B_ACCT_DISCOUNT_INFO客戶歸屬客戶經理信息 B_CUST_BELONG_MGR_INFO保理預支價金業務信息 B_ACCT_FACTORING_INFO客戶歸屬機構信息 B_CUST_BELONG_ORG_INFO保函業務信息 B_ACCT_GUARANTEE_INFO客戶基本信息 B_CUST_BASE_INFO銀承業務信息 B_ACCT_ACCEPTANCE_BILL客戶開通業務信息 B_CUST_SIGN_INFO信用證業務信息 B_ACCT_CREDIT_INFO客戶簽約明細 B_CUST_SIGN_DETAIL其他業務信息 B_ACCT_OTHER_BIZ_INF

45、O聯系人信息 B_CUST_LINKMEN賬戶交易明細信息 B_ACCT_TRAN_INFO客戶關聯關系 B_CUST_RELATIONSHIP客戶交易信息 B_CUST_TRAN_INFO客戶額度信息 B_CUST_CREDIT_INFO客戶分行貢獻度 B_CUST_BRANCH_PROFIT股票發行信息 B_CUST_STOCK_ISSUE客戶網點貢獻度 B_CUST_ORG_PROFIT股東信息 B_CUST_SHAREHOLDER賬戶收益明細信息 B_ACCT_PROFIT債券發行信息 B_CUST_BOND_ISSUE客戶風險資產明細 B_CUST_RISK_ASSET_LIST客戶

46、擔保信息 B_CUST_GUARANTOR_INFO客戶風險資產統計 B_CUST_RISK_ASSET_COUNT客戶抵押與質押信息 B_CUST_GUARANTY_INFO客戶持有產品明細信息 B_CUST_HOLD_PRO_INFO財務信息 B_CUST_FINANCE_INFO機構科目余額總分對賬表 B_ORG_SUBJECT_BAL_CHECK客戶訴訟信息 B_CUST_LITIGATION_INFO公共代碼信息表 B_SYS_CODE_INFO客戶項目信息 B_CUST_PROJECT_INFO科目信息表 B_SYS_SUBJECT客戶交易對手信息 B_CUST_COUNTER_I

47、NFO國際業務客戶概覽 B_CUST_INTER_BIZ_OVERVIEW客戶分行業務統計 B_CUST_BRANCH_BAL_INFO客戶持有理財產品概覽 B_CUST_HOLD_FIN_PRO_OVERVIEW客戶網點業務統計 B_CUST_ORG_BAL_INFO員工基礎信息表 PD_USER_BASE賬戶歸屬客戶經理信息 B_ACCT_BELONG_MGR_INFO員工信息擴展表 PD_USER_EXTEND客戶賬戶余額明細表 B_ACCT_BAL_INFO虛擬用戶信息基礎表 PD_USER_VIRTUAL活期存款賬戶信息 B_ACCT_CURRENT_INFO機構信息基礎表 PD_O

48、RG_BASE定期存款賬戶信息 B_ACCT_FIXED_INFO團隊表 PD_TEAM保證金存款賬戶信息 B_ACCT_BAIL_INFO團隊成員表 PD_TEAM_MEMBER匯率維表 M_RATE_DT人力資源信息表 PD_CTMS_HR_PERSONALDATA精準營銷平臺第二批接口（精準營銷平臺第二批接口（46個）個）接口表名接口表名英文表名英文表名接口表名接口表名英文表名英文表名客戶業務渠道分析B_CUST_CHANNEL_ALY信貸業務代碼對照表FS_CM_CODE_LIBRARY潛在客戶清單信息B_CUST_POTENTIAL保證金分賬戶存單FS_ZH_GMFISMSD代發工資

49、客戶明細B_CUST_DFGZ_DETAIL公司客戶基本信息PD_PMS_C_SD_COMPINFO代發工資業務明細B_CUST_DFGZ_BIZ_DETAIL公司客戶擴展信息PD_PMS_C_SD_COMP_OTHERINFO集團客戶信息B_GROUP_CUST_INFO客戶綜合信息扁平化表PD_PMS_C_AD_KHJG_KHZH_BPH_TBL集團客戶成員信息B_GROUP_CUST_MEMBER客戶所有產品信息表(報表)DMCCRM_OTR_CUST_PROD_ALL客戶持有產品收益明細B_CUST_HOLD_PRO_PROFIT代發工資的單位客戶匯總表S_DFGZ_CORP_SALARY_AGG客戶持有產品交易統計B_CUST_HOLD_PRO_TRAN單位代碼與客戶號映射配置表S_DFGZ_DFDWCODE_MAP_BF指標表