HCNPCBDS大數(shù)據(jù)存儲(chǔ)系統(tǒng)高級(jí)特性InfoTier

大數(shù)據(jù)存儲(chǔ)系統(tǒng)高級(jí)特性

-InfoTier

2目標(biāo)學(xué)完本課程，您將能夠：描述OceanStor9000具有哪些高級(jí)特性及其作用理解OceanStor9000產(chǎn)品主要特性的工作原理掌握OceanStor9000產(chǎn)品主要特性的使用3InfoTier4InfoTier特性介紹InfoTier的定義：InfoTier特性稱為自動(dòng)分級(jí)存儲(chǔ)，按照文件屬性將文件存放在不同性能的存儲(chǔ)設(shè)備上，并實(shí)現(xiàn)文件在存儲(chǔ)設(shè)備之間的自動(dòng)遷移。InfoTier的價(jià)值：目的和受益描述提升系統(tǒng)存儲(chǔ)性能將訪問頻次和熱度較高的數(shù)據(jù)存儲(chǔ)在高速硬盤中。將訪問頻次和熱度較低的數(shù)據(jù)自動(dòng)遷移至低速硬盤中。保證系統(tǒng)對(duì)熱點(diǎn)數(shù)據(jù)訪問的響應(yīng)速度，提升整個(gè)系統(tǒng)的存儲(chǔ)性能。降低總體部署成本使用大容量、低轉(zhuǎn)速的硬盤存儲(chǔ)訪問頻次和熱度較低、但占用大部分存儲(chǔ)空間的數(shù)據(jù)。綜合發(fā)揮不同存儲(chǔ)介質(zhì)的成本優(yōu)勢，有效降低部署和維護(hù)成本。實(shí)現(xiàn)數(shù)據(jù)智能管理系統(tǒng)可以根據(jù)用戶設(shè)置的文件存儲(chǔ)策略，自動(dòng)統(tǒng)計(jì)文件大小、訪問時(shí)間、訪問頻次和熱度等屬性。根據(jù)文件屬性與不同存儲(chǔ)設(shè)備的對(duì)應(yīng)關(guān)系實(shí)現(xiàn)文件的自動(dòng)遷移，降低手動(dòng)管理的成本和復(fù)雜性。5InfoTier特性介紹（續(xù)）InfoTier的應(yīng)用場景：應(yīng)用于數(shù)據(jù)自動(dòng)分類智能管理場景。在數(shù)據(jù)自動(dòng)分類智能管理場景下，OceanStor9000允許將數(shù)據(jù)自動(dòng)分類存儲(chǔ)到不同特性的硬件中，且自動(dòng)根據(jù)文件屬性的變化調(diào)整其存儲(chǔ)位置。文件屬性：包括文件名、文件路徑、文件大小、修改時(shí)間、訪問時(shí)間、用戶/用戶組、I/O讀寫熱度等License支持：InfoTier是OceanStor9000的可選特性，需要獲得License許可才能獲得該特性的服務(wù)。6InfoTier特性-節(jié)點(diǎn)池版本號(hào)C10C30節(jié)點(diǎn)池的概念節(jié)點(diǎn)池是組成分級(jí)的基本單位，由多個(gè)節(jié)點(diǎn)組成。節(jié)點(diǎn)池是組成分級(jí)的基本單位，由多個(gè)節(jié)點(diǎn)組成。節(jié)點(diǎn)池的硬件類型Performancenode：通常應(yīng)用于文件讀寫頻繁且對(duì)讀寫速度要求較高的OPS密集型應(yīng)用場景。Mini-capacitynode：通常應(yīng)用于小容量場景。Capacitynode：通常應(yīng)用于對(duì)文件讀寫帶寬和存儲(chǔ)容量要求較高的大容量應(yīng)用場景。P12、P25和P36：高性能存儲(chǔ)節(jié)點(diǎn)，應(yīng)用于OPS密集型應(yīng)用場景。C36和C72：大容量歸檔節(jié)點(diǎn)，應(yīng)用于大容量應(yīng)用場景。節(jié)點(diǎn)池的構(gòu)成規(guī)則節(jié)點(diǎn)池中的節(jié)點(diǎn)類型必須相同。一個(gè)節(jié)點(diǎn)池中最少包含3個(gè)節(jié)點(diǎn)，最多包含20個(gè)節(jié)點(diǎn)。節(jié)點(diǎn)池中的節(jié)點(diǎn)類型必須相同。由P12、P25、P36和C36組成節(jié)點(diǎn)池時(shí)，一個(gè)節(jié)點(diǎn)池中最少包含3個(gè)節(jié)點(diǎn)，最多包含20個(gè)節(jié)點(diǎn)。由C72組成節(jié)點(diǎn)池時(shí)，一個(gè)節(jié)點(diǎn)池最少包含2個(gè)節(jié)點(diǎn)，最多包含10個(gè)節(jié)點(diǎn)。7InfoTier特性-DiskPoolDiskPool的概念和作用：將每個(gè)節(jié)點(diǎn)池中所有節(jié)點(diǎn)的硬盤按類型組成DiskPool，用于存儲(chǔ)元數(shù)據(jù)和數(shù)據(jù)。DiskPool的劃分原則：第2～n（n為配備的SSD硬盤個(gè)數(shù)）槽位的SSD硬盤組成一個(gè)DiskPool用于啟用SSD加速配置的小文件的存放。HDD硬盤組成一個(gè)DiskPool。8InfoTier特性-分級(jí)分級(jí)的概念分級(jí)由一個(gè)或多個(gè)節(jié)點(diǎn)池組成的邏輯分層。系統(tǒng)部署完成后，管理員可以根據(jù)業(yè)務(wù)需求設(shè)置存儲(chǔ)分級(jí)，并指定節(jié)點(diǎn)池與存儲(chǔ)級(jí)別的對(duì)應(yīng)關(guān)系。分級(jí)的劃分原則針對(duì)訪問熱度較高的數(shù)據(jù)，建議將硬盤處理能力強(qiáng)、響應(yīng)速度快的服務(wù)器所屬的節(jié)點(diǎn)池關(guān)聯(lián)到此分級(jí)，保證系統(tǒng)對(duì)熱點(diǎn)數(shù)據(jù)訪問的響應(yīng)速度，提升整個(gè)系統(tǒng)的存儲(chǔ)性能。針對(duì)訪問熱度較低的數(shù)據(jù)，建議將硬盤響應(yīng)速度較慢但總體存儲(chǔ)容量較大的服務(wù)器所屬的節(jié)點(diǎn)池關(guān)聯(lián)到此分級(jí)，綜合發(fā)揮不同存儲(chǔ)服務(wù)器的優(yōu)勢，有效降低部署和維護(hù)成本。建議同一個(gè)分級(jí)內(nèi)為同種類型的節(jié)點(diǎn)池。9InfoTier特性-分級(jí)（續(xù)）節(jié)點(diǎn)池、DiskPool、分級(jí)的關(guān)系：10InfoTier特性-重條帶化什么是重條帶化？是指將已存儲(chǔ)的數(shù)據(jù)遷移到其他分級(jí)或節(jié)點(diǎn)池中。重條帶化的作用：按照文件池策略更新數(shù)據(jù)存放的位置。11InfoTier特性-水位策略什么是水位？指節(jié)點(diǎn)池中已用空間占存儲(chǔ)空間總量的百分比，包括高水位和只讀水位。水位閾值的作用：通過水位閾值來限制文件的存放和重條帶化。同時(shí)通過設(shè)置節(jié)點(diǎn)池的溢出標(biāo)識(shí)（Spillover）來限制達(dá)到只讀水位時(shí)，是否可以向其他節(jié)點(diǎn)池寫入。水位策略的作用：InfoTier特性通過水位策略監(jiān)控節(jié)點(diǎn)池的存儲(chǔ)容量，以此為根據(jù)指引文件的存放。12InfoTier特性-水位策略（續(xù)）系統(tǒng)默認(rèn)的高水位為已用空間占節(jié)點(diǎn)池存儲(chǔ)空間總量的85%。系統(tǒng)默認(rèn)的只讀水位為已用空間占節(jié)點(diǎn)池存儲(chǔ)空間總量的90%。當(dāng)節(jié)點(diǎn)池的已用空間達(dá)到只讀水位且選中溢出標(biāo)識(shí)（Spillover）時(shí)，該節(jié)點(diǎn)池禁止寫入數(shù)據(jù)，但會(huì)將需要寫入該節(jié)點(diǎn)池的數(shù)據(jù)自動(dòng)寫入到其他任意節(jié)點(diǎn)池或Spillover指定的節(jié)點(diǎn)池內(nèi)。13InfoTier特性-文件池策略文件池策略的作用：文件池策略將決定文件創(chuàng)建的存儲(chǔ)位置，以及文件重條帶化時(shí)的目標(biāo)分級(jí)。以配置為多個(gè)參數(shù)的組合，參數(shù)組合間為“與”的關(guān)系。文件參數(shù)時(shí)間參數(shù)性能參數(shù)存放位置文件名創(chuàng)建時(shí)間I/O次數(shù)指定分級(jí)文件路徑修改時(shí)間I/O熱度任意分級(jí)文件大小最后一次訪問時(shí)間是否啟用SSD加速指定節(jié)點(diǎn)池a用戶/用戶組---a:只有在文件池策略中只設(shè)置文件路徑、用戶/用戶組、文件名時(shí)存放位置可以指定節(jié)點(diǎn)池，否則只能是指定分級(jí)或任意分級(jí)。14InfoTier特性-文件池策略(續(xù))文件初次寫入已存儲(chǔ)文件重條帶化系統(tǒng)根據(jù)文件對(duì)應(yīng)的“文件路徑”、“文件名”、“用戶/用戶組”檢查文件池策略，決定文件初次存儲(chǔ)的位置。系統(tǒng)過監(jiān)控文件屬性的變化情況，將符合文件重條帶化策略的數(shù)據(jù)自動(dòng)遷移到對(duì)應(yīng)的存儲(chǔ)級(jí)別。15InfoTier特性-文件池策略(續(xù))件池策略名稱文件池策略目標(biāo)分級(jí)文件池策略優(yōu)先級(jí)策略1文件大?。?00MBI/O次數(shù)＞20分級(jí)A最高策略2文件大小≥100MBI/O次數(shù)≤20分級(jí)B較高策略3文件路徑：/example所屬用戶：VIP分級(jí)A較低16InfoTier特性-文件池策略(續(xù))文件文件屬性文件池策略匹配結(jié)果A文件A是由VIP用戶創(chuàng)建的且指定存放于“/example”目錄匹配到“文件策略3”，初次寫入時(shí)應(yīng)存儲(chǔ)在分級(jí)A。B文件創(chuàng)建時(shí)文件B存放于“/abc”目錄未匹配到文件策略，初次寫入時(shí)應(yīng)存儲(chǔ)在當(dāng)前空閑空間最大的分級(jí)B。C文件創(chuàng)建時(shí)文件C存放于“/abc”目錄未匹配到文件策略，初次寫入時(shí)應(yīng)存儲(chǔ)在當(dāng)前空閑空間最大的分級(jí)B。文件文件大小I/O次數(shù)文件池策略匹配結(jié)果A150MB15匹配到“文件策略2”和“文件策略3”，但“文件策略