ICS35240

L67.

中華人民共和國國家標準

GB/T37722—2019

信息技術

大數據存儲與處理系統功能要求

Informationtechnology—

Technicalrequirementsforbigdatastorageandprocessingsystems

2019-08-30發布2020-03-01實施

國家市場監督管理總局發布

中國國家標準化管理委員會

GB/T37722—2019

目次

前言

…………………………Ⅲ

范圍

1………………………1

規范性引用文件

2…………………………1

術語和定義

3………………1

縮略語

4……………………2

概述

5………………………2

大數據存儲子系統功能要求

6……………3

基本要求

6.1……………3

分布式文件存儲

6.2……………………3

分布式結構化數據存儲

6.3……………3

分布式列式數據存儲

6.4………………3

分布式圖數據存儲

6.5…………………4

大數據處理子系統功能要求

7……………4

基本要求

7.1……………4

批處理框架

7.2…………………………4

流處理框架

7.3…………………………4

圖計算框架

7.4…………………………5

內存計算框架

7.5………………………5

批流融合計算框架

7.6…………………5

Ⅰ

GB/T37722—2019

前言

本標準按照給出的規則起草

GB/T1.1—2009。

請注意本文件的某些內容可能涉及專利本文件的發布機構不承擔識別這些專利的責任

。。

本標準由全國信息技術標準化技術委員會提出并歸口

(SAC/TC28)。

本標準起草單位華為技術有限公司中國電子技術標準化研究院浪潮電子信息產業股份有限公

:、、

司上海計算機軟件技術開發中心勤智數碼科技股份有限公司深圳市金蝶天燕中間件股份有限公司

、、、、

新華三技術有限公司中興通訊股份有限公司杭州中奧科技有限公司天津南大通用數據技術股份有

、、、

限公司

。

本標準主要起草人趙華符海芳衛鳳林張群蘇志遠趙江陳敏剛劉振宇蔡立志劉宇峰

:、、、、、、、、、、

李正林琳潘子健吳文峰張東濤朱松沈貝倫陸韻武新張紹勇李冰尹卓孫嘉陽

、、、、、、、、、、、、。

Ⅲ

GB/T37722—2019

信息技術

大數據存儲與處理系統功能要求

1范圍

本標準規定了大數據存儲與處理系統的分布式文件存儲分布式結構化數據存儲分布式列式數據

、、

存儲分布式圖數據存儲批處理框架流處理框架圖計算框架內存計算框架和批流融合計算框架等

、、、、、

的功能要求

。

本標準適用于大數據存儲與處理系統的設計開發和應用部署

、。

2規范性引用文件

下列文件對于本文件的應用是必不可少的凡是注日期的引用文件僅注日期的版本適用于本文

。,

件凡是不注日期的引用文件其最新版本包括所有的修改單適用于本文件

。,()。

信息技術大數據術語

GB/T35295—2017

3術語和定義

界定的以及下列術語和定義適用于本文件

GB/T35295—2017。

31

.

圖數據庫graphdatabase

一種應用圖理論存儲實體及其之間關系信息的非關系型數據庫

。

注1圖數據庫的數據模型由節點及邊組成即節點間關系

:()。

注2圖數據庫支持圖查詢圖遍歷及圖分析等功能適用于復雜關系的探索與發現

:、,。

32

.

批處理batchprocessing

將一個大型作業分解成為多個任務交由多個節點分別處理再將分解后多個任務處理的結果匯總

,

起來得出最終的分析結果的計算框架具備高可用高擴展高并發等能力

,,、、。

33

.

流處理streamprocessing

能夠對具有實時