1、目錄 TOC o 1-5 h z HYPERLINK l bookmark257 o Current Document 一、綜述5二、技術規范書點對點應答6技術規格偏離表應答6 HYPERLINK l bookmark288 o Current Document 總那么6 HYPERLINK l bookmark290 o Current Document 1規范定義6 HYPERLINK l bookmark312 o Current Document 2投標方所提供的所有系統設備（包括軟、硬件）應滿足以下技術標準要求7 HYPERLINK l bookmark337 o Current D

2、ocument 3對投標方的建議書要求8 HYPERLINK l bookmark0 o Current Document 4配置原那么10 HYPERLINK l bookmark2 o Current Document 5報價要求10 HYPERLINK l bookmark25 o Current Document 6其他要求11 HYPERLINK l bookmark69 o Current Document 3工程概述12 HYPERLINK l bookmark71 o Current Document 1工程背景12 HYPERLINK l bookmark73 o Curre

3、nt Document 3.2工程目標12 HYPERLINK l bookmark101 o Current Document 4總體技術要求13 HYPERLINK l bookmark103 o Current Document 1總體要求132系統要求144.2 基本要求14 HYPERLINK l bookmark159 o Current Document 2.1. 1功能性要求15 HYPERLINK l bookmark161 o Current Document 2.1. 2系統應具備高可靠性16 HYPERLINK l bookmark163 o Current Docum

4、ent 2.1.3系統應具備平安性17 HYPERLINK l bookmark165 o Current Document 開放性要求18 HYPERLINK l bookmark167 o Current Document 2.1. 5系統應易于使用18 HYPERLINK l bookmark169 o Current Document 2.1. 6系統可維護性要求19 HYPERLINK l bookmark171 o Current Document 27. 7系統完備性要求20 HYPERLINK l bookmark173 o Current Document 2.1, 8系統可

5、測試性要求20 HYPERLINK l bookmark175 o Current Document 2.1. 9系統易安裝性要求21 HYPERLINK l bookmark177 o Current Document 2.1. 10設備其他要求21 HYPERLINK l bookmark179 o Current Document 2.1. 11網管要求21 HYPERLINK l bookmark181 o Current Document 設備平安性要求22 HYPERLINK l bookmark183 o Current Document 2.1. 13設備供 也及運行環境23

6、HYPERLINK l bookmark185 o Current Document 5詳細技術要求24 HYPERLINK l bookmark187 o Current Document 1技術要求24 HYPERLINK l bookmark189 o Current Document 5.2方案要求26 HYPERLINK l bookmark191 o Current Document 5. 3平臺要求27 HYPERLINK l bookmark193 o Current Document 大數據處理子平臺要求27 HYPERLINK l bookmark243 o Current

7、 Document 數據匯聚子平臺要求40 HYPERLINK l bookmark265 o Current Document 外部服務能力子平臺要求55 HYPERLINK l bookmark275 o Current Document 534信息推送子平臺要求58 HYPERLINK l bookmark298 o Current Document 其他要求677.投標方應在建議書中列出提供的書面技術資料詳細目錄清單。答復：滿足。配置原那么投標方在進行系統設備配置時應遵循以下原那么：(1)投標方應以技術先進、平安、穩定、經濟合理，并有利于今后開展的原 那么進行本系統的優化和硬件設備的配

8、置。答復：滿足。(2)根據招標方的建設需求，投標方應向招標方提供優化的設計方案。答復：滿足。(3)本技術規范書應視為保證本工程所涉及系統及網絡平安運行所需的最低 要求，如有遺漏，投標方應予以補充。答復：滿足。報價要求(1)產品報價應以人民幣為單位，并按軟件或功能模塊類型分別報出單價和 總價。答復：滿足。(2)報價應盡量詳細，軟件應報出各項基本模塊的費用。報價應提供匯總表。 此外還應報出安裝、調測、培訓、資料、折扣等的費用，報價還必須包含系統集 成工作費用(含硬件總集成和軟件總集成)。答復：滿足。一 顯示HIVE表的信息列表，包含表名和狀態。 雙擊表名查看該表的字段定義信息。一直接提交SQL查詢

9、語句，并返回執行結果。. HBase組件監控HBase組件監控內容包括：一 顯示HBase表的信息列表，包含表名和狀態。 雙擊表名查看該表的數據域信息，包括數據域名稱、部署機器、起始 鍵值、結束鍵值、狀態、分割根、分割。.告警管理平臺提供告警面板功能，可以實時監測整個平臺的各種故障信息，告警內容 包括：1）節點磁盤空間缺乏：系統在出現某個節點磁盤空間缺乏的情況報警。2）群集HDFS磁盤缺乏：群集中單個節點空間足夠，但群集HDFS磁盤空間不 足時報警。3）節點CPU負載過高：節點在CUP負載異常情況下報警。4）節點內存缺乏：節點在內存缺乏情況報警。5）服務異常告警：監測HDFS, HIVE, H

10、BASE, Zookeeper等各個關鍵服務的 運行狀態，如果發現異常，將輸出告警信息。6）節點失效故障：當名稱節點與數據節點之間的網絡異常，超過心跳維持的 時間，將判定該節點已經失效，退出服務。7）網絡故障告警：當發現某些節點的網絡連接異常，將輸出網絡故障信息。平臺發生故障時，系統將產生告警，而且輸出告警的信息和告警類型，同時 包含屢次告警的時間等，根據電信維護流程的要求，需要維護人員確認告警，并 按照流程正確處置告警信息。J.6可視化業務管理可視化業務管理包括客戶管理、合同管理、基礎產品管理和結算管理。.客戶管理系統提供圖形化客戶管理功能，包括客戶注冊、登錄、產品訂購、token管 理、服

11、務申請、服務開通等。.合同管理系統提供圖形化合同管理功能，包括：1）合同基本信息管理：合同信息錄入、查詢、合同相關的業務信息關聯、 合同審批、合同生效時間、合同終止時間等。2）合同附件信息管理：合同附件的查詢、上傳、更新、審批等。3）合同執行情況管理：合同執行狀態、合同執行進度、合同執行偏差評估 等。合同錄入完成后通過接口直接導入CRM數據庫。.基礎產品管理基礎產品配置包括以下產品類別：1）數據出售類產品：通過對電信數據資源進行脫敏、加工、提煉后的數據 進行出售。這類數據產品根據數據所涉及的地理屬性，分為全國性數據 和省數據。2）數據咨詢類產品：通過對數據的分析、挖掘，面向不同的行業提供咨詢

12、類報告，這些報告所用的數據也分全國性數據和省數據。3）數據能力產品：這類產品通過能力平臺提供實時API接口數據查詢和大 數據作業服務。4）解決方案產品：這類產品只面向合作伙伴，因為解決方案類產品需要結 合行業合作伙伴，整合自有數據、自有渠道、合作伙伴渠道等提供行業 解決方案。.結算管理結算管理應涵蓋以下功能：1）外部結算管理對合作伙伴的結算管理，根據合同，收入完成情況等要素對合作伙伴進行費用結算。2）內部結算依據考核計劃、考核結果、關聯收入完成情況、數據使用情況 等進行收入結算。3）結算包括現金結算、轉賬結算、結算公式管理、結算期限管理等。結算的費用種類包括了兩大類：大數據平臺查詢服務費用結算

13、和大數據平臺 資源使用費用結算。A大數據平臺的查詢服務可按照查詢次數或者包月服務來計費；A大數據平臺的資源使用包括了存儲、運算和數據三類，其中數據資源根據字 段和使用記錄數來計費，存儲和運算資源那么可以采用租費的結算方式。4. 2. 2標簽服務4. 2. 2.1同步標簽服務寬帶DPI數據流經過實時數據處理后，支持多個同步標簽的服務程序。同步標簽數據處理支持優先級設置，通過優先級決定同步標簽服務程序的執行順序，可以支持并發執行和順序執行；可以通過數據的URL、關鍵字、關鍵字段設置數據處理的范圍，從而滿足 不同的同步標簽處理要求。4. 2. 2.2離線標簽服務寬帶DPI文件和3GDPI文件經過數據

14、處理后，支持多個離線標簽的服務程 序。離線標簽數據處理可靈活設置各廠商作業執行時間。通過字段級Token控制，實現離線標簽數據處理可以訪問的字段類型，從 而實現靈活的數據訪問控制功能。離線標簽提供廠商性能優化功能，以保證各廠商作業在規定的時間內完成。4. 3數據匯聚子平臺4. 3.1寬帶DPI數據采集清洗浙江電信11個地市的寬帶DPI數據通過CN2網絡匯聚到大數據平臺。如下列圖所示:大數據平臺不僅支持寬帶DPI文件匯聚，同時支持寬帶DPI數據流實時匯 聚。 寬帶DPI數據流實時匯聚大數據平臺實時采集清洗寬帶DPI數據流，處理流程如下列圖所示：消息分發 KafkaDPI數據實時入庫 Storm同

15、步標簽 Storm離線標簽Kettle處理流程說明如下：. Kafka消息系統實時接收前端寬帶DPI數據流;. Kafka消息系統將接收到的寬帶DPI數據流分發至同步標簽和實時入庫兩個模塊；.同步標簽模塊采用Storm組件實時處理寬帶DPI數據流，為寬帶DPI數據流打上標簽。.實時入庫模塊采用Storm組件將寬帶DPI數據流以文件形式寫入云平臺 HDFS,后續可以對寬帶DPI文件進行離線標簽處理。 寬帶DPI數據清洗寬帶DPI數據清洗主要是針對兩類流量進行清洗： 一類是非瀏覽器發起的 請求；另一類是瀏覽器發起的非用戶點擊請求；最終清洗后留下的url為用戶的真實點擊；寬帶DPI數據清洗規那么要求

16、如下：可以實現“用戶有效點擊”的 Get的實時提取。（此處“用戶有效點 擊”的定義為：用戶在瀏覽器輸入的有效網址，點擊瀏覽器書簽，用戶在網頁中 發起的任意主動點擊行為）。通過清洗規那么的設定，實現“用戶有效點擊”的 Get的實時提取。規那么庫1:.根據后綴過濾圖片、腳本等針對單條url的規那么。.對應現象：圖片、腳本等頁面元素。規那么描述：一般非頁面資源的文件后綴名有一定規那么可循，后綴滿足匹 配指定字串，那么被識別為非頁面請求而被過濾去除。特征字符串可配置添加，例如如下：redis-cIi sadd bIockedurIpatterns2.js? . jpg . jpeg . png . g

17、i f . css . swt規那么庫2:過濾帶有指定特征字符串的url針對單條url的規那么。.對應現象：廣告、框架、廣告聯盟。規那么描述：一般廣告、圖片服務或框架頁面會帶有固定的特征字串，選 擇可靠的字串可以排除大量的非頁面請求URLo 如下規那么可配置添加：red is-cI/ sadd b/ockedur I pat ternsa/ lyes, comcpro. ba/du. comncache, google, com admaster. com. onrr i frame n cjhq. ba /du. com/quotenew 規那么庫3:過濾重復包針對多條URL請求的規那么對應

18、現象：一個緩沖區域長度內的重復包。規那么描述：在緩沖內判斷是否有重復請求出現，如有那么只提取第一個規那么庫4:識別非頁面類型請求（包含Js發出的請求）針對單條URL的規那么對應現象：瀏覽器與Js腳本發出非頁面類型的請求。規那么描述：瀏覽器與Js腳本發出的非頁面類型請求有一定特征，其中主 要是Accept字段值，一般非頁面的請求，如圖片請求那么會包含“image/ 字串，這類請求一般不屬于頁面類型。當 Accept 字段值中不包含“text/html 或 app I i cat i on/xhtm I +xm I v 子串并不能識別該請求是不是頁面請求，因此而保存下來。規那么庫5:保存白名單中的

19、請求針對單條URL的規那么對應現象：有些URL的特征設定為白名單項規那么描述：設置白名單直接放行已明確需要的URL請求，這樣就不會浪 費實時計算資源而做進一步判斷，提高了系統的吞吐量。白名單可以配置，例如如下：red is-d i sadd a 11 owedur I patterns :/ baidu. com/s? :/cn. bing. com/search? w. google. com. hk/search?114. 3. 23G DPI數據采集清洗系統通過FTP方式采集3G DPI文件，3G DPI數據采集清洗網絡架構如下:外部環境3G DPI數據采集清洗軟件3G DPI接口服務器

20、千兆千兆交換機超髭3G DPI接口服務器千兆千兆Hadoop大數據平臺3G DPI文件清洗流程如下：將3G DPI文件的zip壓縮格式轉成gz壓縮格式。對3G DPI文件進行數據清洗，包括加協議號，過濾重復的記錄，文件加 密。輸出正常文件和重單文件寫入HDFS。4. 3. 3AAA數據采集清洗城域網中獲取到 GET報文數據中用戶標識是IP地址，由于每次用戶登 錄撥號IP地址均可能不同，在進行用戶分析時用戶的標識應該為AD帳號。需要 獲取Radius數據，將用戶上網撥號AAA過程中IP和AD信息的導入，匹配用戶 上網行為記錄中的IP地址和AD賬號的數據原始信息，完成用戶上網記錄身份的 辨識。實現

21、獨立運行的AAA radius解報文模塊，實時提取AAA報文中的Attribute Va I ue Pairs 中的對應報文段，將其 User-Name Framed-1 P-Address Acct-Status-Type并組合當前的系統時間戳形成一條完整的用戶身份配對的撥 號上下線狀態數據的記錄，用于與偽CDR數據進行匹配。4. 3. 40IDD數據采集清洗系統通過FTP方式采集0IDD文件。0IDD數據采集清洗網絡架構如下:外部環境OIDD數據采集清洗軟件start_t imestr i ngNonebase_stat i onstr i ngNonepower_fIagstr i ng

22、None碼)（用戶號（開始時間）（基站）（上電標記）# Part i t i on # col_nameInformat i ondata_typecommentdate IabeIstr i ngNoneIoadstampstr i ngNoneOIDD文件通過分布式ETL工具Kett Ie寫入HDFS。 OIDD數據接口OIDD數據表一,： sada_t icket,表結構如下: h i ve desc formatted sada_t i cket;OKcol_name data_type comment prod_i nst_num str i ng NoneDeta iIed Tab

23、 Ie Informat i on Database:o i ddOIDD數據表二：sada_oidd_day,表結構如下:h i ve desc formatted sada_o i dd_day;OK# co I namedata_typecommentprod_i nst_num start_t ime base_stat i on sector power_fIagstr i ngNone（用戶號碼）str i ngNone（開始時間）str i ngNone（基站）str i ngNone（扇區）str i ngNone（上電標記）# Partition# col_nameInfor

24、mat i ondata_typecommentdate IabeIstr i ngNoneIoadstampstr i ngNone# Deta iIed Tab Ie Informat i onDatabase:oidd4. 3. 50DS數據采集清洗系統通過FTP方式采集ODS文件,ODS數據采集清洗網絡架構如下:外部環境ODS數據采集清洗軟件ODS設備千兆ODS接口服務器千兆交換機千兆ODS接口服務器千兆Hadoop大數據平臺ODS文件通過分布式ETL工具Kettle寫入HDFS 0DS數據接口ODS 數據表：rpt_te Iecom_user_info,表結構如下: hive des

25、c formatted rpt_teIecom_user_i nfo;OK# col_namedata_typecommentwb_i sp_acnt_numstr i ngNone（帳號加密）user_agestr i ngNone（用戶年齡）user_sexstr i ngNone（用戶性別）user_typestr i ngNone（用戶類型）a_connect_coI lege agrmnt_const_exp_dtcommentNoneNone None None None None None None None None None None None None Noneuserar

26、ea desc_cost wb_access_tp act_op_rate prom_group guangwang_fIag ba Iancep i_sub_stat_tp update_status Ist_update_tmpI atIngPart i t i oncol_namedate IabeIstr i ng str i ng str i ng str i ng str i ng str i ng str i ngstr i ng str i ng str i ng str i ng str i ng str i ng str i ngInformat i ondata_type

27、str i ng（用戶所屬區域） （費用范圍描述） （寬帶訪問類型） （活躍操作頻度） （套餐類型）（是否光釬標記） （）（協議有效日期）（余額）（是否在用） （更新狀態）（最后更新日期） （緯度）（經度）# Deta iIedTab Ie Informat i onDatabase:ods4. 3. 6數據脫敏數據脫敏也被稱為數據混淆、數據保密、數據消毒、數據擾頻、數據匿名 化和數據認證。采用數據脫敏技術，可以幫助大數據平臺提高平安性和保密等 級，以防止其數據被濫用，同時滿足集團對數據平安性的規范要求，以及由管 理/審計機關所要求的隱私標準。從實現手段上看，針對不同的數據內容，會有多種數據脫

28、敏方式。在Hadoop 平臺上，利用采集清洗及流處理的功能，可以實現對各個字段，針對性的脫敏 處理，并且保證在數據進入hadoop之前已經是脫敏之后的數據。另外針對AD的脫敏尤為關鍵，AD是唯一能將DPI數據關聯到ODS客戶數 據的字段，我們對所有進入大數據平臺的AD都統一采用sha-1的加密方式， 轉換成只有大數據平臺能夠認識的客戶唯一標示。需要進行脫敏處理的信息如下:(3)投標方應承諾當本工程所購置功能模塊、license數量發生變化時，保證 所提供的價格折扣水平、技術服務等方面的各種優惠條件不變。答復：滿足。(4)投標方提供的所有軟硬件必須是最新開發的全新成熟產品。所有必須組 件都應包括

29、在報價中。投標方應提供所有軟硬件系統的數量和配置說明，且應保 證軟、硬件的品種、數量準確無誤。答復：滿足。(5)本技術規范書應視為保證系統運行所需的最低要求，如有遺漏，投標方 應予以補充，否那么一旦中標將認為投標方認同遺漏局部并免費提供。答復：滿足。(6)投標方應承諾在工程終驗后五年內，買方在后續工程及相應產品的備品 備件的設備定貨時，同一類型的軟、硬件設備價格至少不高于本次合同的價格。答復：滿足。2.6其他要求(1)買方在任何時候保存和擁有對本文件的解釋權和修改權。買方有權在簽 定合同前，根據需要修改和補充本技術規范書，修改補充后的最終技術規范書將 作為合同的附件。答復：滿足。(2)投標方除

30、以下情況外，非經中國電信股份浙江分公司書面許可, 不得將本文件的任何內容透露給除中國電信股份浙江分公司以外的第 三方。經中國電信股份浙江分公司書面許可，應標商才允許將本文(限 于必要局部)透露給其合作伙伴，并保證其合作伙伴不將本文透露給其它人。未 經書面許可將本文件透露給第三方的應標商，將被剝奪中標資格。需脫敏字段描述脫敏前脫敏后Ad寬帶設備號實際adsha加密結果（該算法不可反解）user_age用戶年齡實際年齡年齡段信息，如5年一段，取起始 數值顯示，如25表示25-29address用戶地址實際地址，精確到戶小區、樓盤或商圈信息，如武林商 圈1at&lng位置經緯度實際經緯度精確到0.0

31、01,約1000平方米， 注：I ng* I at =0. 001*0.001 （度）二約 95. 18 米*111.32 米user_name用戶姓名實際姓名僅保存用戶姓氏desc_cost用戶消費情況實際消費金額每150元一檔：0 （表示0749）, 150, 3004. 3. 7數據加密大數據平臺以HDFS為基礎，利用HDFS驅動提供的Format功能，實現 hadoop云平臺系統級、業務級數據加密。HDFS數據加密原理圖如下：數據加密不修改HDFS內核，不影響將來HDFS的升級維護。數據加密后，保證HDFS數據透明訪問，同時支持SQL查詢服務。3. 8數據ETL處理平臺采用ETL工具實

32、現高速ETL處理，處理效率強。功能包括：ETL作業GUI設計器的功能。ETL作業自動調度器的功能。ETL作業多路并發提取的功能。ETL作業多路并發轉換的功能。ETL作業多路并發加載的功能。ETL作業管理功能。ETL作業日志管理功能。3. 9作業智能排隊調度.作業靈活調度系統可以制定作業調度計劃進行作業調度。對于臨時出現的需要緊急運行的作業，可以靈活調整作業調度計劃保證緊急 任務優先執行。.資源智能調整系統保證每個作業都能獲得相應的系統資源，同時對于臨時出現的需要緊急 運行的作業，可以靈活調整資源配置保證緊急任務優先執行。當一個隊列空閑，其系統資源可以被其他隊列搶占使用。一旦空閑隊列有作 業提交

33、時，會返回該隊列的系統資源，直到滿足該隊列最低配置，甚至搶占其他 隊列資源。系統可以動態增加隊列，并且新提交的隊列會慢慢滿足最低資源配置，甚至搶占其他隊列資源。4. 4外部服務能力子平臺4. 4.1標簽查詢服務分布式K-V數據庫采用分布式K-V數據庫，主要用于存放標簽結果數據，并支持以下基礎功能:.數據查詢接口以API的方式提供通用的根據key查詢value的高速查詢接口。.數據加載支持數據直接以文件或者分布式文件系統批量導入的方式，并提供導入的API 接口。另外除了數據追加的方式，還需要支持數據的刪除或修改功能。.分布式模式數據存儲采用類似HDFS的分布式存儲模型，另外計算資源也需要采用分布

34、 式集群調用的方式以此來保證數據的可靠性和系統的可擴展性。.統一的元數據管理對元數據進行統一的存儲和管理。并提供訪問API供業務管理平臺調用。.系統管理提供集群監控、服務管理、日志管理、監控報警等一整套系統管理功能。高并發查詢服務該模塊基于nginx+Apache MINA的框架開發。其中nginx提供高并發的對外 服務，而Apache MINA是一個高性能和高可用性的網絡應用框架。可以完成以下 功能：.基于token的用戶平安認證采用基于Token （令牌）的用戶身份驗證機制，使用戶在訪問受保護的服 務資源時僅需提供Token,而不需要提供用戶名和密碼。Token是包含用戶名、 有效期和某些

35、專有信息并通過共享密鑰加密的信息字符串。對于通過Web Appl ication訪問查詢服務的用戶來說，這種認證方式可以有 效防止服務器的用戶賬戶泄露。對于已經授權訪問服務的用戶，獲取和使用Token的總體流程：1）用戶憑借自身的賬戶向電信申請和獲取Tokeno2）攜帶已獲取的Token查詢有權限的數據標簽Token的生成除了需要獲取Token時用戶輸入的信息外，還需要服務器端指 定的加密密鑰。系統管理員可以對生成Token的加密密鑰進行配置。.用戶訪問權限控制基于K-V數據庫的元數據管理，增加用戶對元數據的權限信息，查詢訪問的 時候首先進行用戶識別，然后根據用戶的元數據權限信息進行訪問控制。

36、.高并發低延時的查詢接口采用web服務的方式封裝K-V數據庫的高速查詢接口，并提供短連接和長連 接兩種方式。需要支持對K-V數據庫的接口分發功能。.查詢緩存服務對一些訪問熱度較高的數據或表通過緩存的方式提高查詢響應效率，并減少 FI ash卡訪問頻率，增加壽命。4. 2DSP廠商程序接入系統允許每個廠商程序導入獨立的Cache。系統支持多個廠商程序算法模型 加載和數據訪問。系統支持多租戶作業的統一任務調度。用戶提交業務應用作業 申請，云平臺統一封裝各業務應用作業。如果用戶網絡時延較大，可以有以下兩種方式實現實時數據查詢：1）羽1 K/V內存數據庫安裝于用戶端。2）系統進行數據分發。4. 3廠商

37、作業性能優化3.1SQL語句優化系統支持SQL語句優化，可以解決數據傾斜的問題。系統提供MapReduce定制服務，當SQL語句效率不高時，可以將SQL語句轉 化成高效的MapReduce作業直接執行。4. 3. 2MapReduce 定制服務我們提供MapReduce定制服務，當SQL語句效率不高時，可以將SQL語句轉 化成高效的MapReduce作業直接執行。SQL語句會產生大量的中間數據，從而影響作業執行效率。MapReduce不產 生中間數據。MapReduce作業和SQL語句相比擬，作業執行效率可以提高37倍。4. 4交互式SQL查詢用戶可以通過圖形化界面定義查詢參數，執行自己的查詢

38、任務。系統接口如下：系統兼容標準的SQL語法，可以通過SQL語句訪問查詢。系統支持JDBC連接方式，適合JAVA應用。系統支持ODBC連接方式，適合WIN應用。系統提供CLI命令接口，適合UNIX應用。系統支持Corba協議，適合IDL服務對象接口。系統支持SOAP協議，適合遠程RPC調用。4. 5在線報表系統提供豐富的報表展現形式，支持表格、餅圖、柱狀圖、折線圖，用戶可 以自由選擇報表展現形式。報表的定義和配置都要求可視化的靈活操作，要求可見即可得，且結果能夠 靈活導出。生成的報表可輸出各種文件格式，如EXCEL、HTML、XML、RTF等。信息推送子平臺流量分發模塊可以控制流量的轉發，判斷

39、流量能否進行廣告投放，可以精確控制符合業務 需要的流量，轉發到服務器上，啟動廣告投放計劃。具體的流量控制轉發規那么可 以靈活的配置。流量分發規那么系統提供統一的規那么配置，根據廣告投放的策略可以靈活的修改。支持的流量分發規那么包括：域名、URL規那么設置能控制流量只轉發到指定的域名或者URL的報文。控制流量分發總量可以控制轉發流量的總流量大小。譬如對搜狗流量，我們可以控制其搜索的 流量只轉發多個個CPM到指定的服務器上。3、頻次控制可以設置對用戶廣告推送的頻次控制，每個用戶與其IP地址、ADSL賬戶關 聯。通過限制IP、ADSL的頻次控制用戶流量轉發到服務器的頻次。4、地域定向規那么可以根據I

40、P地址判斷用戶所在地區，可以只將特定地區的用戶流量進行分發。如武漢某企業用戶可能只希望了解湖北地區的網民搜索、訪問行為，可以對 地域設置只轉發武漢的流量到企業的服務器上進行數據分析，一方面減輕了下游 企業的服務器壓力，另一方面最大限度保護了其他地區的用戶隱私，降低運營商 數據的流量浪費。5、黑名單控制對一些特定的群體投放廣告會產生各種風險問題的，系統提供黑白名單控 制，將具體對象的IP或者ADSL賬戶設置為黑名單。禁止向這些用戶推送廣告。 以此提升用戶整體的體驗效果，降低用戶的投訴。廣告提單管理廣告主賬戶信息管理系統提供對廣告主賬戶信息的管理，可以分級授權，超級管理員可以管理系 統中所有的廣告

41、，通過系統配置授權給廣告主，這些廣告主可以獲取賬戶和密碼 登錄系統對個人的廣告策略進行管理。網址充值付費 :/開通平臺沒有賬號的廣告主需要在官網點擊右上角“注冊”按鈕，填寫相關信息申請 注冊。首頁動念定IRJ洞察產品案例提供數據技術關于我們提交申請專業咨詢郵箱 I郵箱作為賬戶名聯系人：聯系人姓名手機j手機號碼QQQ竭碼驗證碼 fcW 青不清也可通過廣告平臺登陸頁面的“新用戶注冊”按鈕到官網申請注冊。用戶名f I用戶名密碼:密碼登錄首頁新用戶注冊密碼找回動態定向洞察產品案例提供數據技術關于我們4.1.3. 2.廣告提單投放管理在投放管理模塊，可上傳創意，對通過審核的創意組建立推廣單元進行廣告投放

42、。創意組管理通過投放管理一創意組管理，進入創意組管理頁面。創意組列表顯示的信息 包括序號、創意組名稱、所選模板、尺寸（已上傳尺寸數和未上傳尺寸數）和審核狀態，可按創意組名稱和審核狀態查詢。創目組名稱|市核狀態| 座號創意組名稱所選模板尺寸市核狀態掾作1隼支新宣傳默認模板已上傳：2未上, 2個尺寸局部通過局部通過設查|鹿涔|弄求投球單元2然事8默認模板已上傳：10未上傳：21未通過汾置|刪除3集M宣傳默認模板已上傳：1未上傳：30局部通過金置|刪除|奪建投球單元4式3組A默認模板已上傳:6未上傳:25局部通過設置|刪除|拜理扮成單元當麗第1頁.每頁皇示10條，共4條下一頁上一頁 1在創意組列表可

43、點擊創意組名稱可查看該創意組信息；將鼠標放到指定創意 組的審核狀態上，顯示該創意組創意審核情況；點擊指定創意組右側的“設置” 按鈕進行創意組設置；點擊指定創意組右側的“刪除”按鈕刪除該創意組，如果 正在投放的創意組被刪除，該創意組對應的推廣單元變為暫停狀態；對于已經通 過審核的創意組，可點擊該創意組右側的“新建投放單元”進入新建推廣單元頁面對該創意組新建推廣單元設置投放策略。投放管理通過投放管理-投放管理，進入投放管理頁面。在投放管理頁面可按時間維 度查看到推廣單元趨勢圖和推廣單元列表，時間維度包括今天、昨天、本周、上 周、本月、上月和近30天，也可點擊時間對話框通過時間控件點擊指定日期自定義

44、查看單元列表信息。2014-12-15 - 2014-12-17楨 JS本月 上月從 2014-12-15從 2014-12-15到 2014-12-17十二月 2014 )周日周一周二周三周四周五周六十二月 2014 )周日周一周二周三周四周五周六30714 212841813222952916233063101724317411182518512192629十二月2014 )周日周一周二周三周四周1周六3012345678910111213141516K31819202122232425262728293031123456789106132027 310推廣單元趨勢圖可通過下拉框選擇全部推

45、廣計劃或者指定某個推廣單元，還 可定義趨勢圖表展示的指標，包括花費、展現數、點擊數、平均點擊率和平均點擊本錢。推廣單元列表展示該指定時間內的所有推廣計劃，包括推廣單元名稱、狀態、上月 1622014-11-23 - 2014-12-22趙勞國表指示：碼 C展現數O點擊數。平均點擊至。平均點擊本錢推廣單元列表推廣單元：全部卷廣單元本周 上周 本月有效期、每日預算、展現數、點擊數、點擊率、總費用、平均本錢、本頁總計和 全部總計，可輸入指定推廣計劃名稱進行查詢。鼠標放到推廣單元名稱上，點擊 出現的“鉛筆”圖標可在彈出的對話框中修改推廣單元名稱和出價；點擊推廣單 元名稱可查看該投放單元對應的創意組創意

46、列表，也可對該創意組進行編輯；點擊某個屬性右側的上下列圖標使推廣單元列表按照該指標的升序或者降序進行排 列。1新增廣單元ifi百推廣單元良制推廣單元啟用日子SS請輸入推廣華速稱S3 推廣單元有效期默認出價每H演算展現數點擊數點擊率總費用平均點擊本錢Io默認的單元沒育今曰排期2014-12-20-2014-12-311.5030.003825.26%0.010.01O1219測試地域投放用戶音停2014-12-19形5束時間2.00100000-0 00-o1219玩一玩用戶智停2014-12-19無結束時間22.003.0000-0.00-O1220測試標及投放用戶暫停2014-12-20形5

47、束時間3 0010 0000-0 00-1220測試標筌投放_用戶暫停20141220穆東時間1.005.0000-0.00-O1220測H式 CPC用戶暫停2014-12-20穆束時間1 005 0000-0 00-12201555CPC 新測試CPC12201606設置小額點用戶暫停2014.12-20根束時間1.005.0000-0.00-O擊壟價用戶暫停2014-12-20穆束時間0 605 0000-0 00-本頁息計全部總計-38926235.26%0.010.010.01-在該推廣單元列表中，可對推廣單元進行新增、設置、復急I、啟用、暫停和刪除歸檔操作,還可點擊列表下方的“查看已

48、歸檔的推廣計劃”按鈕查看已歸檔的推廣計劃。4.1.3. 3.數據統計報表可在首頁，或者通過進入“數據中心-投放統計”查詢廣告投放統計報告。 可通過“昨天”、“本周”、“上月”和“本月”按鈕快捷查詢對應時間范圍內 的數據報表，也可按自定義時間維度查詢廣告投放數據報表。自定義時間需點擊 時間對話框，選擇起止時間后點擊確定即可。能查看的數據指標包括：展現數、點擊數、平均點擊率、平均點擊單價、總花 費、勝出率、到達率、注冊數、平均注冊單價（CPA）和注冊轉化率。答復：滿足。(3)在技術談判的各個階段，買方將要求投標方對有關問題進行進一步的技 術澄清，投標方應給予應答。答復：滿足。3工程概述3. 1工程

49、背景隨著移動互聯網、云計算、物聯網技術和業務的開展，數據呈爆炸性增長， 全球進入數據ZB時代，2010年全球數據量到達1.2 ZB, 2011年全球數據量達 到1.8ZB,到2020年，將到達35 ZB。電信運營商與互聯網公司等產業上下游 企業激烈競合，產業格局正在重塑，傳統電信運營商面臨低值化、管道化，在新 的產業鏈中需要謀求新突破。為了應對移動互聯網時代的挑戰，中國電信正在向 “智能管道的主導者、綜合平臺的提供者、內容和應用的參與者”的新三者戰略 轉型。根據集團大數據業務規劃，大數據運營以“一點管控、集約運營”為原那么， 通過大數據的挖掘分析，一方面可形成對內數據運營，為精確管理和精確營銷

50、提 供服務，另一方面可形成對外數據運營，直接向外部合作伙伴提供大數據服務， 進一步挖掘數據資產的商業價值，探索基于大數據的新型應用與商業模式，實現 企業數據價值變現答復：滿足。3.2工程目標構建大數據運營平臺，實現數據價值變現：平臺可支撐向行業用戶、外部合 作伙伴提供數據出售、數據咨詢、數據能力和數據解決方案等四種業務形態的數 據服務。通過對外合作的模式，可融合合作伙伴的數據內容，根據合作伙伴和客 戶的需求，將電信的數據資產進行包裝，向合作伙伴提供數據服務。2014-10-27-2014-11-02昨天 本周上周 本月上月321 、一.十月 2014 _ 寸I解贈!哥特1|C32829I 30

51、12345678910111213I 141516171192620 2/*222923302431212345678從到2014-10-282014-10-28價拜2852930123467891011131415161712223242129303113456781219262統計報表提供六種查看方式，點擊即可切換查看，報表以圖形和表格形式展 現，圖形報表包括柱狀和線狀，可選擇柱狀和線狀代表的指標通過圖形報表直觀 展示特定指標數據趨勢；圖形報表按照指定的查看方式（6種之一）羅列具體數據。媒，果總覽定向效果總覽創意效果總覽關鍵詞效果總覽柱狀指標：展現數表格形式展現的數據，可通過點擊對應指標右

52、側的上下箭頭按鈕按照該指標 的上升或者下降順序進行排序。的單元展現數點擊數平均點擊率平均點擊單價總花費注冊數CPAaffluxgj360-IT2-C779373790.486%0.45171 465254%0 000%0融360視頻2-C789683720.471%0.48178.785.727%0.000%0融360-汽車1-C735593720.506%0.47173.993.590%0.000%0-圖形報表支持更改展示形式，可通過點擊右上角按鈕設置為數據展示、雙線 形展示、雙柱狀展示、還原，還可點擊最后一個按鈕進行圖形報表截圖。BI區位CO數據總覽直觀顯示廣告主按時間篩選查詢后，當前投放

53、所花費的金額、點擊價格、注 冊數、CPA、注冊轉化率，讓廣告主對目前的投放狀況一目了然融360融360總花費平均點擊價格注冊數CPA注冊轉化率263.250.32 ：0推廣效果總覽按投放單元查看數據，便于比照各不同投放單元的效果。推廣單元取現數點擊數平均點擊率平均點擊單價總花費CPA注冊轉化率8J360-IT2-C1608138200.510%0.48395.677 031%0.000%0-融3602頻 2C1912918100.423%0.59 474.547.509%0.000%0-融3604 區 1C1626008010493%0 52417667 865%0 000%0-廣告投放統計報

54、表下載點擊“報表下載”按鈕,即可將當前按照時間、和六種查看方式查詢出來的數據結果導出excel到本地。文件- 受保護的視圖-Microsoft Excel開始 播入頁囹布局公式 數君 五閱 視圖ABCDEFGHIK12創意名稱展示效點擊數平均點擊率平均點擊單價總花費跳出率到達率注冊數CPA注冊轉化率34527%0.08274.018.448%0.000%-4酷狗繁星四373%0.08271.818.591%0.000%-5酷狗繁星三643%0.07269.448.632%0.000%-6酷狗繁星一圖142608360

55、52.528%0.08271.688 757%0.000%-7淺多多114239535462.490%008271 078 623%0.000%.8福特移動banne505%0 08270 148 724%0 000%-9好借好還二期2)114216438292 693%0 07270 698 712%0.000%-10慈格-中秋節114216138242.690%0.07270 048712%0.000%-11好借好還2版30492%0.08268.388.689%0.000%-12HRS_南橋綠地出520479571.839%0.1094

56、.697.635%0.000%-0 受保護的視圖 此文件源自Internet位置,可能不安至.請單壬查看詳的S息.啟用編事(E)A1廣告引導管理通過對接DPI底層數據，可以獲取用戶上網請求的 GET報文，對報文 進行分析，在分析的同時，在請求中，添加JS代碼，置換到原有請求中的JS代 碼。新的請求會連同報文發送到客戶端，客戶端會解析執行JS代碼，這個時候 會觸發推送平臺的后端策略控制，匹配與用戶興趣相匹配的廣告計劃，將正確的 廣告素材推送到用戶面向進行展示。整個業務流程中，系統會根據配置規那么，對JS代碼會進行策略性的添加和執 行。系統提供面向用戶的黑白名單配置規那么，可以配置面向用戶推送廣告

57、的頻 率，可以根據用戶的IP與ADSL賬戶等控制對用戶的流量的引導。除面向用戶做策略配置外，可以針對一些特別的媒體網站做策略性的JS代碼 置換，譬如一些企業門戶網站、政府國家機關網站等。可以限制在這些網站上做 廣告的投放。廣告計劃檢索廣告選擇廣告計劃檢索，可以對廣告推送平臺中的所有的廣告計劃資源建立檢索機 制。并能時時更新。廣告計劃創立后，會建立各種創意組，形成不同的廣告執行策略，包括廣告 投放的排期、時間段、地域、廣告狀態及展現的形式等。在用戶發起訪問請求， 觸發廣告投放機制時，系統提供的檢索機制能根據設置好的各種規那么，層層過濾。 將合適的廣告在合適的時間投放給合適的人。2.人群標簽管理人

58、群標簽管理支持私有人群（訪客找回）的管理，包括查詢、新建和編輯操 作。提供人群標簽的導入接口，能對接外部標簽數據。執行廣告計劃前會啟動人 群標簽數據的匹配機制，完成廣告投放人群策略的匹配檢索。人群列表進入人群標簽庫一人群列表頁面，人群列表顯示的信息包括人群名稱、年齡、 規模、熱門度、地域、偏好等。可在搜索框輸入人群名稱進行搜索。點擊指定人群右側“編輯”按鈕可對該人群進行編輯操作。新建人群在人群標簽列表點擊“新建人群”或者從右側菜單人群標簽庫一新建人群進 入新建人群頁面，填寫人群標簽庫名稱和人群標簽描述，定義訪客行為：多少天 內訪問過（或未訪問過）模糊匹配（或者完全匹配）某個url的人群，選擇“

59、或“ 或者“和”條件再點擊“添加另一個人群篩選條件”為人群添加多個篩選條件。 設置完成點擊“提交”完成私有人群的新建。人群*人群庫用途：重走向群庫名稱：|訪客行為：訪客行為：認群庫描述：l天內訪問過y 模糊匹配7O或Cffl添加另t人群蕊選條件提交取至內部業務支撐推送平臺除了面向外界提供廣告推送投放服務，還可以支持運營商內部的業 務營銷。內部業務支撐，主要在兩方面：1、可以為用戶提供時時的提醒服務，提升客戶的服務體驗用戶在使用各種流量套餐包的過程中，在使用瀏覽器上網過程中，當用戶剩 余流量低于閥值或將用盡時，推送平臺可以Toolbar,彈窗等各種形式提醒用戶。可以配置的流量包推送規那么包括：

60、不含流量套餐用戶提醒當客戶使用的套餐包中不包括任何流量業務優惠包的時候，平臺會給客戶推 送各類上網資費標準及套餐的信息。便于用戶直接選擇訂購。套餐使用信息提醒當用戶在使用流量套餐的過程中，根據后臺用戶流量使用數據，平臺可以時 時推送流量消耗的各種信息，如流量剩余量、套餐流量預警、套餐使用完等。2、個性化套餐分析推送：結合用戶流量套餐使用歷史數據與當前使用情況。 對數據展開分析統計，對用戶的消費偏好做統計分析。在合適的時候給用戶推送 合適的套餐業務。四、產品配置清單1、大數據處理子平臺大數據處理子平臺產品配置清單如下:編號產品名稱產品描述1寬帶DPI數據采集清洗支持文件方式和數據流實時處理方 式