云平臺企業(yè)級部署方案-案例3-本地存儲

企業(yè)級部署方案（案例三：10臺服務(wù)器+本地存儲）StarVCenterTeam2021年4月目錄TOC\o"1-5"\h\z\o"CurrentDocument"概述 1-3\o"CurrentDocument"目標 1-3\o"CurrentDocument"方案優(yōu)缺點 1-3\o"CurrentDocument"名詞解釋 1-3\o"CurrentDocument"硬件設(shè)備清單 2-4\o"CurrentDocument"部署結(jié)構(gòu)規(guī)劃 3-4\o"CurrentDocument"標配方案 3-4\o"CurrentDocument"增量選配方案 3-4\o"CurrentDocument"IP及主機名規(guī)劃 4-5\o"CurrentDocument"安裝部署 5-7\o"CurrentDocument"上架與布線 5-7\o"CurrentDocument"安裝StarVE操作系統(tǒng) 5-7Bios設(shè)置 5-7選擇安裝類型 5-7選擇磁盤 5-8配置主機名、IP 5-8\o"CurrentDocument"添加節(jié)點到計算集群 6-10\o"CurrentDocument"添加節(jié)點 6-10\o"CurrentDocument"配置網(wǎng)卡用途 6-11\o"CurrentDocument"部署新增節(jié)點 6-12\o"CurrentDocument"加入計算集群 6-12\o"CurrentDocument"資源池初始化 7-13\o"CurrentDocument"添加存儲 7-13\o"CurrentDocument"初始化網(wǎng)絡(luò)與IP 7-13添加端口組（子網(wǎng)） 7-13添加IP地址池 7-14\o"CurrentDocument"創(chuàng)建虛擬機 8-151概述目標很多想要搭建云平臺的小企業(yè)，沒有云平臺的建設(shè)經(jīng)驗，不知道搭建云平臺需要哪些軟硬件資源，怎么規(guī)劃，具體怎么落地。本文將結(jié)合小企業(yè)的資源現(xiàn)狀，介紹一種最現(xiàn)實、最容易落地的云平臺搭建方案。小企業(yè)沒有存儲，沒有高配服務(wù)器，沒有高速網(wǎng)絡(luò)設(shè)備等硬件，怎么辦呢？本案例將以10臺物理服務(wù)器，采用本地硬盤做存儲，最簡的單網(wǎng)絡(luò)結(jié)構(gòu)來構(gòu)建云平臺，在其滿負載時能運行150臺虛擬機（4核、10GB內(nèi)存、150GB磁盤）這樣的規(guī)模展開介紹。本文將選用StarVCenter軟件為例，來介紹私有云的具體部署實施過程。20臺服務(wù)器節(jié)點及以下，StarVcenter無需license授權(quán)，因此我們這樣的規(guī)?？梢苑判氖褂?。方案優(yōu)缺點優(yōu)點：硬件成本最低，最易實現(xiàn)，最易運維管理。缺點：虛擬機存放在物理機本地磁盤，物理機故障將導(dǎo)致該機器上的所有虛擬機停運。名詞解釋資源池：一套StarVCenter軟件管控下的所有軟硬件資源的集合。計算集群：一組配置相近、型號相同、物理位置相鄰的物理服務(wù)器的集合，一個資源池下可用劃分成多個計算集群。管理網(wǎng)：用于控制節(jié)點與計算節(jié)點之間的管理指令和消息傳輸。（例如：控制服務(wù)集群虛擬IP、數(shù)據(jù)庫雙主虛擬IP都應(yīng)該配置在管理網(wǎng)）。所有節(jié)點必須通過管理網(wǎng)互通。業(yè)務(wù)網(wǎng)：用于承載虛擬機之間及虛擬機與外界通信的網(wǎng)絡(luò)。存儲網(wǎng)：存儲網(wǎng)根據(jù)后端存儲類型不同，可分為集中式存儲網(wǎng)絡(luò)和分布式存儲網(wǎng)絡(luò)。集中式存儲網(wǎng)絡(luò)主要基于傳統(tǒng)FC-SAN，需要在服務(wù)器中配備HBA卡，用于服務(wù)器與后端存儲陣列之間通信。分布式存儲網(wǎng)絡(luò)主要基于Ceph分布式存儲，建議服務(wù)器配備萬兆網(wǎng)卡，以提供穩(wěn)定高效的性能。StarVE：StarVCenter定制虛擬化專用操作系統(tǒng)，StarVCenter所有軟件包，都集成在StarVE中。管控節(jié)點：整個資源池的控制中心，用于控制調(diào)度整個資源池的資源。計算節(jié)點：負責(zé)運行虛擬機機的物理服務(wù)器，管控節(jié)點同時會用作計算節(jié)點。主存儲：用于存放虛擬機磁盤鏡像，同一集群的計算節(jié)點都將掛載共享存儲。輔助存儲：用于存放操作系統(tǒng)ISO、驅(qū)動工具包等，供整個資源池共享。2硬件設(shè)備清單序號類型規(guī)格數(shù)量備注1服務(wù)器（以老舊為主）2CPU（10核21Ghz，支持VT、超線程）；128GB內(nèi)存（8*16GDDR3）；1*600GBSAS硬盤；1*2.4TBSAS硬盤（10k轉(zhuǎn)）；1塊千兆網(wǎng)卡101塊600GB的SAS硬盤用作系統(tǒng)盤，安裝StarVE系統(tǒng)。1塊2.4TBSAS硬盤做本地存儲。2千兆以太網(wǎng)交換機24口全千兆口1管理網(wǎng)、業(yè)務(wù)網(wǎng)都走同一網(wǎng)3部署結(jié)構(gòu)規(guī)劃3.1標配方案本案例以最簡單、最容易落地、最易維護為目的進行搭建，如果有額外需求見下一節(jié)“增量選配方案”。按照上圖規(guī)劃，10臺服務(wù)器全部用作計算節(jié)點跑虛擬機。其中第1臺服務(wù)器同時又用作管控節(jié)點，管控相關(guān)服務(wù)都部署在第1臺節(jié)點上。3.2增量選配方案如你有以下額外需求，可在標配方案基礎(chǔ)上，增選配置來實現(xiàn)：（1）增強網(wǎng)絡(luò)可靠性需求：對網(wǎng)絡(luò)可靠性要求較高，任意鏈路故障不影響業(yè)務(wù)運行。3-4/15增配方法：再增加一臺相同規(guī)格的交換機，服務(wù)器的網(wǎng)卡（＞=2個網(wǎng)口），按以下方式接線：交換覘1 交換機2接入每臺服務(wù)器 接入每臺服箔器第1個網(wǎng)口 第士個網(wǎng)口云平臺硬件拓撲圖說明：后續(xù)安裝過程中，在“選擇網(wǎng)卡用途”界面，需要先將兩個網(wǎng)口綁定（選擇主備即可），之后再勾選用途。（2）增強網(wǎng)絡(luò)安全性需求：對網(wǎng)絡(luò)安全性要求較高，從虛擬機不能直接訪問物理機。增配方法：將管理網(wǎng)與業(yè)務(wù)網(wǎng)分離，服務(wù)器的網(wǎng)卡（＞=2個網(wǎng)口），按以下方式接線：第1-10口接入每臺服務(wù)器第1個網(wǎng)口,第11-"口接入每臺服務(wù)恭第2個網(wǎng)口說明：后續(xù)安裝過程中，在“選擇網(wǎng)卡用途”界面，需要選擇每臺服務(wù)器的第1個網(wǎng)口作為“管理網(wǎng)”，選擇第二個網(wǎng)口作為“業(yè)務(wù)網(wǎng)”。4IP及主機名規(guī)劃（1）標配方案10臺服務(wù)器的主機名與IP規(guī)劃如下表:序號主機名IP地址（192.168.50.0/24,網(wǎng)關(guān)：192.168.50.254）說明：此處IP地址段選用企業(yè)平常使用的局域網(wǎng)網(wǎng)段即可，確保能與企業(yè)原有網(wǎng)絡(luò)環(huán)境相通。

1starve001192.168.50.12starve002192.168.50.23starve003192.168.50.34starve004192.168.50.45starve005192.168.50.56starve006192.168.50.67starve007192.168.50.78starve008192.168.50.89starve009192.168.50.910starve010192.168.50.10(2)選配網(wǎng)絡(luò)安全增強方案說明：如果選擇了“部署結(jié)構(gòu)規(guī)劃”中的增量選配方案“增強網(wǎng)絡(luò)安全性”，則按以下方式規(guī)劃主機名與IP地址。10臺服務(wù)器的主機名配置為starve001、starve002...starve010。用途CIDR網(wǎng)關(guān)備注管理網(wǎng)172.18.1.0/24172.18.1.254說明：此處IP地址段確保不能與企業(yè)現(xiàn)有網(wǎng)絡(luò)環(huán)境直通，可安裝一臺windows作為跳板機，企業(yè)現(xiàn)有環(huán)境通過跳板機訪問云平臺管理界面。安裝系統(tǒng)時直接配置在服務(wù)器的第1個網(wǎng)口上。從starve001到starve010,對應(yīng)IP地址依次為172.18.1.1至U172.18.1.10。業(yè)務(wù)網(wǎng)192.168.50.0/24192.168.50.254說明：此處IP地址段選用企業(yè)日常使用的局域網(wǎng)網(wǎng)段即可，確保能與企業(yè)原有網(wǎng)絡(luò)環(huán)境相通。業(yè)務(wù)網(wǎng)IP無須在物理網(wǎng)卡上配置。StarVCenter安裝完成后，從管理界面錄入的IP地址池即可。192.168.51.0/24192.168.51.254192.168.52.0/24192.168.52.254……5安裝部署5.1上架與布線按照“部署結(jié)構(gòu)規(guī)劃”中的圖示，將服務(wù)器、交換機上架后，進行布線連接。5.2安裝StarVE操作系統(tǒng)從StarVCenter官網(wǎng)下載云平臺軟件安裝包，starve4-x86_64-StarVCenter-mini-4.2.8.iso,然刻錄安裝光盤或U盤。按以下步驟依次安裝10臺服務(wù)器：將光盤或U盤插入服務(wù)器，進入BIOS設(shè)置。Bios設(shè)置.在bios中開啟虛擬化(VT)支持。.設(shè)置為從光驅(qū)/U盤啟動。在第一個畫面選擇“InstallStarVE4"，稍后進入系統(tǒng)安裝圖形界面，如下圖:SOFTWARESYSTEMAJctcorrectedSOFTWARESELECTIONAllmoneJpstaitINSTALLftTONDESTINATIONAutomaticpartitjoningselectedSTARVESOFTWARESYSTEMAJctcorrectedSOFTWARESELECTIONAllmoneJpstaitINSTALLftTONDESTINATIONAutomaticpartitjoningselectedSTARVE4INSTALLATIONKDUMPKcfumpiser：＜abledHelp!5.2.2選擇安裝類型點擊【SOFTWARESELECTION]進入軟件選擇界面：注意：根據(jù)規(guī)劃，第1臺服務(wù)器用于(管控+計算)節(jié)點，第2?第10臺服務(wù)器用于純計算節(jié)點。因此，此處選擇有差別。在安裝第1臺服務(wù)器時，須選擇【Allinone],然后點擊[Done],如下圖：5-7/15

在安裝第2臺?第10臺服務(wù)器時，須選擇選擇【BasicInstall】，然后點擊【在安裝第2臺?第10臺服務(wù)器時，須選擇選擇【BasicInstall】，然后點擊【Done】，如下圖:BaseEnvironmentAdd-OnsfbrSelectedEnvircniTient［；=： webdeployserverFordustermodeinstallationservices.ALLinerneInstallrllrlllr-i,in.jrl ,KaskInstfllLInstolLacomputs：nodeoptionallyinstallthe'webdeploy%「clusterrnstalletion5.2.3選擇磁盤點擊【INSTALLATIONDESTINATION】選項，按照規(guī)劃，此處選擇第一塊磁盤做系統(tǒng)磁盤，點擊【Done】，然后選擇【AcceptChanges】。如下圖:注意：如果你選擇"Iwillconfigurepartitioning”進行自定義分區(qū)，請勿修改任何默認的類型選項，先通過“自動創(chuàng)建分區(qū)”方式創(chuàng)建，然后再調(diào)整分區(qū)容量。5.2.4配置主機名、IP10臺服務(wù)器的主機名配置為starve001、starve002...starve010。IP地址將配置在服務(wù)器第一個網(wǎng)口（此處我們選擇第一個網(wǎng)絡(luò)設(shè)備即可）上，從starve001至Ustarve010依次為192.168.50.1到192.168.50.10。說明：如果選擇了“部署結(jié)構(gòu)規(guī)劃”中的增量選配方案“增強網(wǎng)絡(luò)安全性”，則按其規(guī)劃，從starveOOI到starve010依次為172.18.1.1至192.168.1.10。1．配置主機名點擊【NETWORK&HOSTNAME］，打開配置界面，在“Hostname”欄輸入主機名。2.配置IP地址點擊【Configure］按鈕，選擇【IPv4Settings】，將“Method”設(shè)置為【Manual】點擊【add】，輸入IP、掩碼、網(wǎng)關(guān)，點擊【Save］，如下圖：點擊【OFF】按鈕使其為【ON】狀態(tài)啟用網(wǎng)卡，然后點擊【Done］，如下圖:點擊【BeginInstallation］按鈕開始部署。點擊【ROOTPASSWORD】設(shè)置root賬戶密碼。

約需要10分鐘完成安裝，安裝完成后，點擊【reboot】重啟系統(tǒng)。按照上述方法完成所有服務(wù)器的操作系統(tǒng)安裝，并確保所有服務(wù)器之間IP互通。6添加節(jié)點到計算集群通過瀏覽器（推薦GoogleChrome）打開管理界面，訪問地址為第1臺服務(wù)器的IP（這里是192.168.50.1）如下圖:采用默認業(yè)務(wù)操作員賬號登錄：user/user。6.1添加節(jié)點說明：我們打開StarVCenter管理界面后，需要將第2?第10臺服務(wù)器節(jié)點添加進來。進入“資源管理”〉“添加部署主機”菜單作為模板，然后點擊“添加”按鈕，然后在起始ip和結(jié)束IP中分別輸入192.168.50.2和192.168.50.10，點擊“確定”按鈕開始添加，如下圖：

6.2配置網(wǎng)卡用途所有節(jié)點都添加成功后，點擊“配置網(wǎng)卡用途”，打開“配置網(wǎng)卡用途”頁面，先勾選第1臺節(jié)點，然后勾選表頭“選擇”，此時將以第1臺節(jié)點為基準，批量配置所有節(jié)點，如下圖:點擊“配置”按鈕，打開“選擇綁定模式與用途”頁面，如下圖：配蛔卡用途五片隼三良星時時同一比女.麗卡盅或惟懈球靛聿，同百瓦I卡對應(yīng)交注孔SI口配=T）H9±fL.期儂用仁二口Lfi（后附閏。個主叫，1ml -王帆S -修理I選擇綁定模式及用途四淡通網(wǎng)是定哲理三到哼i'k.Yf7：：，加同時對第.北刑.兩星揖底擬嘰丁同皿［,aa虛擬kl訃邠利|通信白網(wǎng)沼.當酬臺匿勺主鞏：加BQ口網(wǎng)卡品件 狀充 明定*式 用遑3,埼 / 在此 管建網(wǎng)業(yè)后南口在標配方案中，保持默認選擇即可。說明：如果選擇了“部署結(jié)構(gòu)規(guī)劃”中的增量選配方案“增強網(wǎng)絡(luò)可靠性”，則此需要先綁定兩個網(wǎng)卡（網(wǎng)口），綁定方法：點擊任意網(wǎng)卡名稱后的小圖標，打開綁定頁面，選擇另一塊要綁定的網(wǎng)卡（網(wǎng)卡），點擊“確定”即可。

在“選擇綁定模式及用途”界面，點擊“確定”按鈕，回到上一級“配置網(wǎng)卡用途”頁面再次點擊“確定”按鈕完成網(wǎng)卡用途配置。6.3部署新增節(jié)點完成所有節(jié)點的網(wǎng)卡用途配置后，在“添加部署主機”頁面，勾選所有節(jié)點，點擊“一鍵部署”按鈕，開始部署，如下圖：署，如下圖：6.4加入計算集群完成所有節(jié)點的部署后，可在“物理主機”菜單頁面中看到已部署完的物理主機。進入“資源管理”>“集群”菜單，點擊“默認集群”，點擊頂部操作按鈕，勾選所有節(jié)點，點擊“確定”按鈕，即可將所有物理主機加入默認集群，如下圖：期管理，》首集群>.我認更答回王打虛擬機翻建機王打虛擬機翻建機主機靶號ID：defaultElJSftAT褊弓5tarve010名翱注知PsErveOl。192.168,50.10ID：defaultElJSftAT褊弓5tarve010名翱注知PsErveOl。192.168,50.10施行7資源池初始化添加存儲說明：使用云平臺之前，我們需要將所有服務(wù)器本地磁盤添加到存儲清單。操作方法如下：首先，登錄StarVCetne-進入“資源管理”〉“存儲”菜單，點擊【添加存儲】按鈕，彈出界面如下圖:?身露骨理。存謔miirrarsstoragelccal_stcrage?身露骨理。存謔miirrarsstoragelccal_stcrage為了便于后期識別，我們以“服務(wù)器名稱_本地存儲_磁盤名”格式命名，依次選擇每臺服務(wù)器，存儲類型選擇“LOCALBLOC-本地磁盤或分區(qū)”，磁盤設(shè)備選擇之前規(guī)劃的第二塊磁盤（這里是/dev/sdb）。初始化網(wǎng)絡(luò)與IP說明：按照IP地址規(guī)劃，我們先添加3個子網(wǎng)，并添加IP地址池中。后期需要時再添加新的子網(wǎng)。按IP規(guī)劃，我們每個子網(wǎng)采用24位掩碼，共253個可用IP地址。我們將添加192.168.51.0/24，192.168.52.0/24，192.168.53.0/24這幾個子網(wǎng)。添加端口組（子網(wǎng)）說明：這里一個端口組就是