(高清版)GB∕T 38675-2020 信息技術(shù) 大數(shù)據(jù)計(jì)算系統(tǒng)通 用要求

ICS35.240GB/T38675—2020國(guó)家標(biāo)準(zhǔn)化管理委員會(huì)IGB/T38675—2020 12規(guī)范性引用文件 13術(shù)語(yǔ)和定義 1 1 25.1硬件組成 25.2計(jì)算單元 25.3計(jì)算加速單元 25.4存儲(chǔ)單元 35.5高速互聯(lián)單元 35.6管理監(jiān)控單元 35.7供電單元 45.8結(jié)構(gòu)及散熱單元 4 46.1軟件組成 46.2操作系統(tǒng) 46.3虛擬化軟件 46.4資源管理軟件 56.5通信管理軟件 5 5 5ⅢGB/T38675—2020本標(biāo)準(zhǔn)按照GB/T1.1—2009給出的規(guī)則起草。請(qǐng)注意本文件的某些內(nèi)容可能涉及專(zhuān)利。本文件的發(fā)布機(jī)構(gòu)不承擔(dān)識(shí)別這些專(zhuān)利的責(zé)任。本標(biāo)準(zhǔn)由全國(guó)信息技術(shù)標(biāo)準(zhǔn)化技術(shù)委員會(huì)(SAC/TC28)提出并歸口。本標(biāo)準(zhǔn)起草單位：浪潮電子信息產(chǎn)業(yè)股份有限公司、中國(guó)電子技術(shù)標(biāo)準(zhǔn)化研究院、北京華勝天成科技股份有限公司、浪潮軟件集團(tuán)有限公司、上海計(jì)算機(jī)軟件技術(shù)開(kāi)發(fā)中心、勤智數(shù)碼科技股份有限公司、平安科技(深圳)有限公司、內(nèi)蒙古大學(xué)、中國(guó)鐵道科學(xué)研究院集團(tuán)有限公司、浙江螞蟻小微金融服務(wù)集團(tuán)股份有限公司、北京百分點(diǎn)信息科技有限公司。GB/T38675—2020信息技術(shù)大數(shù)據(jù)計(jì)算系統(tǒng)通用要求本標(biāo)準(zhǔn)適用于大數(shù)據(jù)計(jì)算系統(tǒng)的開(kāi)發(fā)、設(shè)計(jì)和運(yùn)維。下列文件對(duì)于本文件的應(yīng)用是必不可少的。凡是注日期的引用文件，僅注日期的版本適用于本文件。凡是不注日期的引用文件，其最新版本(包括所有的修改單)適用于本文件。GB/T21028信息安全技術(shù)服務(wù)器安全技術(shù)要求GB/T35295—2017信息技術(shù)大數(shù)據(jù)術(shù)語(yǔ)3術(shù)語(yǔ)和定義GB/T35295—2017界定的以及下列術(shù)語(yǔ)和定義適用于本文件。下列縮略語(yǔ)適用于本文件。API:應(yīng)用程序接口(ApplicationProgrammingInterface)ASIC:專(zhuān)用集成電路(ApplicationSpecificIntegratedCircuit)DDR:雙倍數(shù)據(jù)速率(DoubleDataRate)FPGA:現(xiàn)場(chǎng)可編程門(mén)陣列(FieldProgrammableGateArray)GPU:圖形處理器(GraphicsProHDD:硬盤(pán)驅(qū)動(dòng)器(HardDiskDrive)IPoIB:infiniband上的網(wǎng)絡(luò)協(xié)議(InternetProtocoloverInfiniBand)iSCSI:小型計(jì)算機(jī)系統(tǒng)間網(wǎng)絡(luò)接口(InternetSmallComputerSystemsInterface)PB:拍字節(jié)(PetaByte)QoS:服務(wù)質(zhì)量(QualityofService)RDMA:遠(yuǎn)程數(shù)據(jù)存取(RemoteDirectMemoryAccess)REST:表述性狀態(tài)轉(zhuǎn)移(RepresentationalState—2GB/T38675—2020SAS:小型計(jì)算機(jī)系統(tǒng)串行連接接口(SerialAttachedSCSI)SATA:串行高技術(shù)配置接口(SerialAdvancedTechnologyAttachment)SCSI:小型計(jì)算機(jī)系統(tǒng)接口(SmallComputerSystemInterface)SSD:固態(tài)硬盤(pán)(SolidStateDrives)TCP:傳輸控制協(xié)議(TransmissionControlProtocol)TCP/IP:互聯(lián)網(wǎng)協(xié)議(TransmissionControlProtocol/InternetProtocol)5硬件要求5.1硬件組成大數(shù)據(jù)計(jì)算系統(tǒng)硬件部分包括計(jì)算單元、計(jì)算加速單元、存儲(chǔ)單元、高速互聯(lián)單元、管理監(jiān)控單元、供電單元和結(jié)構(gòu)及散熱單元。5.2計(jì)算單元計(jì)算單元要求如下：a)應(yīng)有相應(yīng)措施保證可用性；b)應(yīng)支持多處理器；c)應(yīng)支持硬件狀態(tài)監(jiān)控管理、遠(yuǎn)程管理；d)應(yīng)支持系統(tǒng)內(nèi)部部件擴(kuò)展；e)應(yīng)支持多種虛擬化方式；f)應(yīng)支持在停止運(yùn)行情況下，配置虛擬機(jī)的內(nèi)存數(shù)量；g)應(yīng)支持在停止運(yùn)行情況下，配置擴(kuò)展內(nèi)存數(shù)量；h)每節(jié)點(diǎn)內(nèi)存應(yīng)不低于8GB;i)應(yīng)支持?jǐn)U展DDR3、DDR4或以上內(nèi)存版本標(biāo)準(zhǔn)；j)宜支持內(nèi)存查錯(cuò)/糾錯(cuò)；k)宜支持內(nèi)存鏡像/熱備；l)宜支持PB以上的讀寫(xiě)能力；m)宜支持系統(tǒng)外部節(jié)點(diǎn)擴(kuò)展；n)宜支持在正常運(yùn)行的情況下橫向及縱向在線擴(kuò)展；o)宜支持混合內(nèi)存架構(gòu)。5.3計(jì)算加速單元計(jì)算加速單元要求如下：a)應(yīng)提供專(zhuān)用計(jì)算資源，協(xié)助計(jì)算單元進(jìn)行運(yùn)算處理；b)應(yīng)提供大數(shù)據(jù)應(yīng)用加速的專(zhuān)用計(jì)算資源，專(zhuān)用計(jì)算資源應(yīng)支持通過(guò)高速互聯(lián)單元與計(jì)算單元c)應(yīng)具備多線程并發(fā)、流水線等模式的計(jì)算處理能力；d)應(yīng)具備獨(dú)立內(nèi)存控制器，提供用于加速計(jì)算任務(wù)的獨(dú)立內(nèi)存空間；e)應(yīng)具備高速總線接口與主處理器互連；f)運(yùn)行在計(jì)算模塊上的主程序應(yīng)能夠配置、使用、管理計(jì)算加速單元上的硬件計(jì)算資源；g)運(yùn)行在計(jì)算模塊上的主程序與計(jì)算加速單元之間應(yīng)具有高效的數(shù)據(jù)交換協(xié)議，包括與主CPU內(nèi)存地址之間的映射關(guān)系；h)應(yīng)支持加速單元擴(kuò)展，接口類(lèi)型如PCIe等；3GB/T38675—20205.4存儲(chǔ)單元存儲(chǔ)單元要求如下：b)應(yīng)支持REST、NFS、Samba、iSCSI、定制API等存儲(chǔ)訪問(wèn)協(xié)議或接口的一種或多種；c)應(yīng)支持存儲(chǔ)半結(jié)構(gòu)化數(shù)據(jù)、結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)等數(shù)據(jù)類(lèi)型的一種或多種；d)應(yīng)提供用戶(hù)數(shù)據(jù)冗余存儲(chǔ)功能；e)宜支持分層或分級(jí)存儲(chǔ)方式；g)應(yīng)支持存儲(chǔ)節(jié)點(diǎn)級(jí)動(dòng)態(tài)擴(kuò)展伸縮及存儲(chǔ)數(shù)據(jù)再均衡；h)應(yīng)支持在線擴(kuò)展SATA、SAS、PCle接口SSD、HDD等，支持熱插拔；i)宜支持?jǐn)U展連接FC、iSCSI、NAS等協(xié)議的存儲(chǔ)系統(tǒng)；j)應(yīng)支持在停止運(yùn)行情況下，擴(kuò)展內(nèi)存的數(shù)量；k)宜支持在線升級(jí)；l)宜支持PB以上的讀寫(xiě)能力；m)可用性應(yīng)有相應(yīng)措施保證；n)應(yīng)配置企業(yè)級(jí)硬盤(pán)，以保證可靠性；o)應(yīng)支持故障硬盤(pán)的數(shù)據(jù)重構(gòu)。5.5高速互聯(lián)單元高速互聯(lián)單元要求如下：a)應(yīng)提供計(jì)算單元、存儲(chǔ)單元與計(jì)算加速單元之間的互聯(lián)；b)應(yīng)提供本地計(jì)算加速單元中不同加速卡之間的互聯(lián)；c)應(yīng)支持TCP/IP等網(wǎng)絡(luò)協(xié)議實(shí)現(xiàn)節(jié)點(diǎn)之間的互聯(lián)；d)宜支持IPoIB、RDMA等協(xié)議實(shí)現(xiàn)節(jié)點(diǎn)之間的高速互聯(lián)；e)應(yīng)支持節(jié)點(diǎn)之間至少百兆網(wǎng)絡(luò)的連接；f)應(yīng)支持在停止運(yùn)行情況下，擴(kuò)展的計(jì)算單元、存儲(chǔ)單元、計(jì)算加速單元之間實(shí)現(xiàn)互聯(lián)；g)支持1Gbps以上帶寬；h)支持基于網(wǎng)絡(luò)芯片硬件的數(shù)據(jù)傳輸或交換加速功能；i)網(wǎng)絡(luò)端口聚合功能，滿足系統(tǒng)對(duì)網(wǎng)絡(luò)帶寬的需求，同時(shí)可以提高系統(tǒng)可用性。5.6管理監(jiān)控單元管理監(jiān)控單元要求如下：a)應(yīng)提供對(duì)硬件部分部件運(yùn)行狀態(tài)部分參數(shù)的監(jiān)控功能，如CPU溫度、電源電壓、風(fēng)扇轉(zhuǎn)速等；b)應(yīng)提供計(jì)算單元和計(jì)算加速單元使用率的監(jiān)控功能；c)應(yīng)提供存儲(chǔ)單元總?cè)萘颗c使用率的監(jiān)控功能；d)應(yīng)提供網(wǎng)絡(luò)流量、網(wǎng)絡(luò)讀寫(xiě)速率的監(jiān)控功能；e)應(yīng)支持遠(yuǎn)程登錄控制臺(tái)，監(jiān)控系統(tǒng)運(yùn)行狀態(tài)；f)應(yīng)具備精確故障警告；g)應(yīng)具備硬件使用超過(guò)閾值的警告功能；h)應(yīng)支持遠(yuǎn)程外設(shè)掛載與程序安裝功能；i)應(yīng)支持系統(tǒng)的日志記錄與日志查詢(xún)；j)應(yīng)支持系統(tǒng)遠(yuǎn)程日常維護(hù)。4GB/T38675—20205.7供電單元供電單元要求如下：a)應(yīng)具備電源冗余控制功能，具備在局部故障時(shí)提供電源的能力；b)電源模塊設(shè)計(jì)支持熱插拔，熱更換；c)應(yīng)具備故障報(bào)警，并將運(yùn)行狀態(tài)提供給監(jiān)控系統(tǒng)；d)應(yīng)具備加電時(shí)序控制功能；e)應(yīng)具備電源負(fù)載動(dòng)態(tài)調(diào)整技術(shù)；f)應(yīng)支持機(jī)柜級(jí)別集中供電；g)應(yīng)支持N+N或N+M電源冗余模式。5.8結(jié)構(gòu)及散熱單元結(jié)構(gòu)及散熱單元要求如下：a)散熱方式應(yīng)支持風(fēng)冷方式，宜支持液冷及傳導(dǎo)散熱方式；b)散熱效率應(yīng)由傳感器監(jiān)控，在管理監(jiān)控單元中可見(jiàn)；c)應(yīng)采用模塊化設(shè)計(jì)；d)應(yīng)采用集中散熱技術(shù)；e)風(fēng)扇應(yīng)支持免工具熱插拔；6軟件要求6.1軟件組成大數(shù)據(jù)計(jì)算系統(tǒng)軟件部分包括操作系統(tǒng)、虛擬化軟件、資源管理軟件和通信管理軟件。6.2操作系統(tǒng)操作系統(tǒng)要求如下：a)應(yīng)支持主流的操作系統(tǒng)類(lèi)型和主要版本；b)應(yīng)提供操作系統(tǒng)自動(dòng)化批量部署能力；c)應(yīng)提供人機(jī)操作界面；d)應(yīng)支持計(jì)算加速單元及驅(qū)動(dòng)程序，提供標(biāo)準(zhǔn)化的編程接口；e)應(yīng)提供系統(tǒng)和設(shè)備運(yùn)行日志及監(jiān)控信息；f)應(yīng)提供大數(shù)據(jù)系統(tǒng)各種組件所需的運(yùn)行環(huán)境；g)宜具備處理器故障隔離支持功能。6.3虛擬化軟件虛擬化軟件要求如下：a)應(yīng)支持對(duì)計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)等物理設(shè)備資源的虛擬化，能