NEC-ExperssCluster集群軟件部署手冊.doc

北京中科大洋科技發(fā)展股份有限公司 技術(shù)研究院Dayang SI Lab ReleaseNEC ExperssCluster集群軟件部署手冊 Dayang Technology Development Inc北京中科大洋科技發(fā)展有限公司NEC ExperssCluster集群軟件部署手冊報(bào)告文檔信息：NEC ExperssCluster集群軟件部署手冊版本編號版本日期修改者語言更 新 說 明V.1.0A2009-6-5劉釗（技術(shù)研究院）中文創(chuàng)建新測試報(bào)告目錄目錄- 5 -前言- 6 -Experss Cluster集群軟件功能特點(diǎn)- 6 -1.創(chuàng)建集群的基本要求及前期準(zhǔn)備- 12 -系統(tǒng)拓?fù)鋱D- 12 -IP規(guī)劃- 13 -軟硬件要求- 13 -2.建立群集- 13 -安裝Experss Cluster集群軟件（兩臺機(jī)器都做）- 13 -配置Experss Cluster集群軟件（一臺即可）- 22 -4.驗(yàn)證安裝- 107 -4.其它說明- 109 -前言EXPRESSCLUSTER是一款專業(yè)的高可用集群軟件產(chǎn)品，它可提供Windows和Linux平臺上完整的高可用性解決方案。當(dāng)集群中的某個(gè)節(jié)點(diǎn)由于軟件或硬件原因發(fā)生故障時(shí)，集群系統(tǒng)可以把IP、客戶業(yè)務(wù)等資源切換到其他健康的節(jié)點(diǎn)上，使整個(gè)系統(tǒng)能連續(xù)不間斷的對外提供服務(wù)Experss Cluster集群軟件功能特點(diǎn)高可靠性.高可用性在要求持續(xù)運(yùn)行的關(guān)鍵業(yè)務(wù)系統(tǒng)中，由于服務(wù)器宕機(jī)等故障所造成的業(yè)務(wù)停止將帶來無法估量的損失。在由NEC的容錯(cuò)軟件EXPRESSCLUSTER構(gòu)建的集群系統(tǒng)中，即使某臺服務(wù)器發(fā)生故障，用戶業(yè)務(wù)和數(shù)據(jù)也可迅速切換到健康的服務(wù)器上，從而保證了整個(gè)系統(tǒng)對外服務(wù)的正常，為企業(yè)24小時(shí)x365天的關(guān)鍵業(yè)務(wù)應(yīng)用提供了強(qiáng)大的保障。 多種心跳監(jiān)測方式 支持網(wǎng)卡(私網(wǎng)/公網(wǎng))、COM口、磁盤心跳等多種心跳方式,多重保障心跳檢測途徑，進(jìn)一步提高了系統(tǒng)的可靠性。EXPRESSCLUSTER獨(dú)特的利用內(nèi)核空間進(jìn)行心跳探測的技術(shù)，可以保證心跳探測不受系統(tǒng)負(fù)荷影響，從而避免在高負(fù)荷狀態(tài)下心跳超時(shí)所導(dǎo)致的誤切換。支持共享、鏡像、混合等多種集群構(gòu)成方式支持差分鏡像在鏡像型方案中，我們使用的差分備份和差分恢復(fù)技術(shù),可直接對2臺服務(wù)器的鏡像盤中的差分?jǐn)?shù)據(jù)進(jìn)行同步和恢復(fù)，而不必通過全盤Copy，大幅縮短了鏡像同步及恢復(fù)所需的時(shí)間，提高了鏡像集群的性能。 支持多節(jié)點(diǎn)鏡像支持多節(jié)點(diǎn)鏡像技術(shù)，可以用一臺服務(wù)器同時(shí)對多個(gè)節(jié)點(diǎn)進(jìn)行鏡像復(fù)制，實(shí)現(xiàn)多節(jié)點(diǎn)之間互為備份的構(gòu)筑方式。利用EXPRESSCLUSTER率先實(shí)現(xiàn)的多節(jié)點(diǎn)鏡像技術(shù)，可以在不犧牲系統(tǒng)可靠性和性能的前提下，實(shí)現(xiàn)更為靈活的配置，進(jìn)一步節(jié)省硬件投資。多種集群工作模式不僅支持傳統(tǒng)的單活(Active/Passive)、雙活(Active/Active)，還支持N和N+1多節(jié)點(diǎn)集群備份。 (1)Active/Passive (2)Active/Active (3)N+1備份 (4) M+N備份 支持鏡像集群的遠(yuǎn)程容災(zāi) EXPRESSCLUSTER在應(yīng)用方式上的另一個(gè)創(chuàng)舉就是將鏡像型集群應(yīng)用于遠(yuǎn)程容災(zāi)解決方案中。通常的遠(yuǎn)程容災(zāi)解決方案，對網(wǎng)絡(luò)環(huán)境要求高、實(shí)施復(fù)雜、實(shí)現(xiàn)成本也比較昂貴。而利用EXPRESSCLUSTER鏡像型集群軟件的遠(yuǎn)程容災(zāi)解決方案，不但能夠異地備份業(yè)務(wù)數(shù)據(jù)，還可以對軟硬件資源進(jìn)行監(jiān)視，在主節(jié)點(diǎn)發(fā)生故障時(shí)，還能夠自動(dòng)在備份節(jié)點(diǎn)恢復(fù)業(yè)務(wù)。將業(yè)務(wù)服務(wù)的停止控制在最小限度。 支持虛擬技術(shù) EXPRESSCLUSTER支持虛擬集群，它既可以做虛擬機(jī)層級的高可用集群解決方案，也可以針對虛擬機(jī)上的業(yè)務(wù)構(gòu)建高可用集群。當(dāng)虛擬計(jì)算機(jī)上運(yùn)行業(yè)務(wù)發(fā)生故障時(shí)， EXPRESSCLUSTER可以將其切換到另外一個(gè)虛擬計(jì)算機(jī)。如果虛擬機(jī)軟件本身發(fā)生故障，或者物理服務(wù)器發(fā)生故障，EXPRESSCLUSTER能夠?qū)⑻摂M計(jì)算機(jī)整個(gè)切換到另外一臺物理服務(wù)器上。此外，還可以利用虛擬計(jì)算機(jī)，對物理服務(wù)器進(jìn)行備份。例如，如果希望利用一臺服務(wù)器，分別對運(yùn)行不同操作系統(tǒng)的物理服務(wù)器進(jìn)行備份利用虛擬技術(shù)與EXPRESSCLUSTER相結(jié)合，將很容易就可以實(shí)現(xiàn)。最多支持32節(jié)點(diǎn)，具備良好的系統(tǒng)擴(kuò)展性 伴隨業(yè)務(wù)的擴(kuò)大可動(dòng)態(tài)追加集群的服務(wù)器節(jié)點(diǎn)，最多能擴(kuò)展到32個(gè)節(jié)點(diǎn)； 多平臺支持支持目前國內(nèi)幾乎所有主流的Windows和Linux操作系統(tǒng)平臺,如WindowsNT/2000/2003,RedHat,Turbolinux,MIRACLELINUX,Novell SUSE LINUX,RedFlag等。支持64位架構(gòu)支持IA-64、EM64T和和PPC64等64位架構(gòu)的服務(wù)器和操作系統(tǒng)平臺靈活選擇存儲(chǔ)設(shè)備支持目前國內(nèi)大多數(shù)主流的存儲(chǔ)設(shè)備，如NEC、IBM、Dell、EMC、HP、聯(lián)想、曙光等眾多知名存儲(chǔ)設(shè)備廠商的產(chǎn)品。并且不僅支持單通路盤柜，還支持多通路盤柜，另外，對iSCSI型的盤柜設(shè)備也提供支持。支持多種應(yīng)用保護(hù)EXPRESSCLUSTER可以保護(hù)大量的應(yīng)用程序和服務(wù)，幾乎涵蓋了目前Windows和Linux平臺上所有主流的應(yīng)用和服務(wù)，如Oracle、SQLServer、DB2、Sybase、Postgre SQL、PowerGres、MySQL、Exchange Server、Appache、Samba等（詳細(xì)參見“確認(rèn)支持的軟件”）。除了這些主流的應(yīng)用和服務(wù)，還可以保護(hù)用戶自己開發(fā)的應(yīng)用程序和服務(wù)。深層次僵死狀態(tài)的監(jiān)控除了對應(yīng)用程序和服務(wù)的常規(guī)級別的監(jiān)視外(所謂常規(guī)監(jiān)視即進(jìn)程死活級別的監(jiān)視), EXPRESSCLUSTER還提供了一系列監(jiān)視選件，如Database Agent, Internet Server Agent, Application Server Agent, File Server Agent等，這些監(jiān)視選件可對EXPRESSCLUSTER上運(yùn)行的數(shù)據(jù)庫等應(yīng)用程序和服務(wù)的僵死狀態(tài)(Stall)進(jìn)行監(jiān)視,從而為用戶的關(guān)鍵業(yè)務(wù)系統(tǒng)提供了更深層次的保護(hù)。全新的中文化界面，輕松配置集群使用全新的中文界面集群簡易構(gòu)筑工具（Builder）可以實(shí)現(xiàn)集群的快速構(gòu)筑，大大方便系統(tǒng)管理員的操作。人性化的向?qū)崾荆奢p松、快速構(gòu)建集群；支持在線的編輯方式，集群配置信息直接上傳到集群并生效；支持集群配置文件的導(dǎo)入、導(dǎo)出和離線編輯，稍作修改就可輕松配置出大量結(jié)構(gòu)相似的集群。在發(fā)生故障更換服務(wù)器時(shí)，只需要將備份的配置文件導(dǎo)入新服務(wù)器即可迅速完成恢復(fù)。遠(yuǎn)程管理.簡便操作 基于B/S架構(gòu)的管理工具和配置工具，支持跨平臺遠(yuǎn)程管理，不需要安裝客戶端程序，只要有瀏覽器和Java運(yùn)行環(huán)境，任何一臺機(jī)器都可以進(jìn)行監(jiān)控、維護(hù)和配置操作，極大的方便了系統(tǒng)管理員的操作和管理。提供故障通知服務(wù)當(dāng)集群發(fā)生異常狀態(tài)時(shí)，ExpressCluster會(huì)通過AlertService功能向管理者發(fā)送電子郵件形式或者手機(jī)短信方式的故障通知服務(wù)，極大的方便了管理員的維護(hù)工作，讓管理員隨時(shí)隨地掌握集群最新狀況。另外，還可以通過外接的網(wǎng)絡(luò)報(bào)警燈設(shè)備，進(jìn)行聲光方式的故障報(bào)警對GPT分區(qū)格式的支持增加了對GPT分區(qū)格式的支持，可實(shí)現(xiàn)超過2TB的大容量數(shù)據(jù)分區(qū)的劃分。1.創(chuàng)建集群的基本要求及前期準(zhǔn)備系統(tǒng)拓?fù)鋱DIP規(guī)劃名稱IP地址子網(wǎng)掩碼Dayang-1 公網(wǎng)IP0Dayang-2 公網(wǎng)IP1Dayang-1 心跳IP0Dayang-2 心跳IP1數(shù)據(jù)庫實(shí)例虛擬IP客戶端IP00軟硬件要求EXPRESSCLUSTER軟件對硬件沒有特殊要求，在進(jìn)行高可用部署時(shí)，要求雙機(jī)已經(jīng)安裝好SQLServer軟件，并將系統(tǒng)服務(wù)中的SQL Server服務(wù)停止，并將屬性改為“手動(dòng)”。本次手冊中的軟硬件環(huán)境如下：Dayang-1硬件配置2*CPU E5430 2.66GHz8GB 內(nèi)存3*146GB SATA軟件配置Windows 2008 EnterpriseSQL Server 2008 EnterpriseExperss Cluster 2.0 TrailDayang-2硬件配置2*CPU E5430 2.66GHz8GB 內(nèi)存3*146GB SATA軟件配置Windows 2008 EnterpriseSQL Server 2008 EnterpriseExperss Cluster 2.0 Trail2.建立群集安裝Experss Cluster集群軟件（兩臺機(jī)器都做）NEC ExpressCluster工作時(shí)需要一個(gè)管理分區(qū)，大小在20MB以上即可，2臺服務(wù)器的分區(qū)大小必須在字節(jié)上保持一致，做鏡像時(shí)要求鏡像分區(qū)大小也在字節(jié)上保持一致，這里一定要注意，否則會(huì)引起集群工作失??！每個(gè)分區(qū)的盤符和卷標(biāo)必須一致。并且管理分區(qū)不能使用Windows自帶的文件系統(tǒng)格式化，將空間分好就可以了。在劃分管理分區(qū)時(shí)，選擇“不要格式化這個(gè)磁盤分區(qū)”安裝好SQLServer2005,并將數(shù)據(jù)庫文件保存在F盤下，2臺服務(wù)器都是如此。并且請注意在服務(wù)項(xiàng)里需要將SQLServer的啟動(dòng)類型改為手動(dòng)運(yùn)行安裝文件，選擇“NEC EXPRESSCLUSTER for Windows”點(diǎn)擊“下一步”，點(diǎn)擊“下一步”，點(diǎn)擊“安裝”，點(diǎn)擊“下一步”，這里不進(jìn)行任何操作，這是使用共享式存儲(chǔ)設(shè)置的地方，本次測試針對鏡像磁盤，在隨后彈出的警告對話框不用理會(huì)，點(diǎn)擊“下一步”點(diǎn)擊“是”，點(diǎn)擊“登錄”，點(diǎn)擊“使用License文件進(jìn)行登錄”在彈出的對話框中，選擇以“BASE20”結(jié)尾的License文件。點(diǎn)擊“確定”。重復(fù)上述操作，將結(jié)尾“REPL20”的License文件也進(jìn)行注冊。安裝完成后，重啟計(jì)算機(jī)。配置Experss Cluster集群軟件（一臺即可）使用dayang-1服務(wù)器，打開IE瀏覽器，在地址欄里輸入“1:29003”，回車。這里的管理端使用的2008系統(tǒng)，IE安全度較高，將0:29003或者1:29003添加到信任網(wǎng)站就可以了，XP系統(tǒng)不存在此問題。這時(shí)會(huì)彈出一個(gè)界面，意思是需要編輯一個(gè)“java.policy”的文件開打運(yùn)行，在其中輸入紅框處的命令，打開“java.policy”會(huì)提示找個(gè)不到改文件，是否創(chuàng)建，點(diǎn)擊“是”將紅框處的內(nèi)容整體復(fù)制到創(chuàng)建的“java.policy”文本框中，保存退出。將這個(gè)IE全部推出，重新登陸一遍，就可以進(jìn)入“START BUILDER”,配置集群了點(diǎn)擊“設(shè)定”彈出“START BUILDER”界面點(diǎn)擊左上“文件”，彈出的下拉菜單選擇“集群生成向?qū)А睆棾龅膶υ捒驗(yàn)榧喝∶?，這里輸入群集名，點(diǎn)擊“下一步”點(diǎn)擊紅框處的“添加”，這里是添加集群節(jié)點(diǎn)的。這里在名稱處輸入第一臺節(jié)點(diǎn)的機(jī)器名“dayang-1”，點(diǎn)擊“下一步”在出現(xiàn)的對話框中點(diǎn)擊“添加”，在出現(xiàn)的界面中輸入改節(jié)點(diǎn)的鏡像IP地址“”，點(diǎn)擊“確定”同樣，在添加完鏡像IP后，再將改節(jié)點(diǎn)公網(wǎng)IP添加進(jìn)來，“”，保持鏡像IP地址在公網(wǎng)IP地址之上就可以了，點(diǎn)擊“下一步”可以看到，公網(wǎng)IP地址自動(dòng)出現(xiàn)了，直接點(diǎn)擊“下一步”不進(jìn)行任何設(shè)置，下一步不進(jìn)行任何設(shè)置，下一步不進(jìn)行任何設(shè)置，下一步不進(jìn)行任何設(shè)置，下一步不進(jìn)行任何設(shè)置，下一步不進(jìn)行任何設(shè)置，完成在返回到向?qū)Ы缑婧?，可以看到添加的第一個(gè)節(jié)點(diǎn)“dayang-1”，這時(shí)再點(diǎn)擊“添加”，添加第2臺節(jié)點(diǎn)，輸入機(jī)器名“dayang-2”，下一步因?yàn)槭堑?臺節(jié)點(diǎn)，這里直接就有2個(gè)IP地址輸入，分別選擇地址框后，點(diǎn)擊“編輯”，將IP地址加入，注意要和節(jié)點(diǎn)1對應(yīng)，1IP輸入“1”，2IP輸入“1”不進(jìn)行任何設(shè)置，點(diǎn)擊“下一步”，不進(jìn)行任何設(shè)置，點(diǎn)擊“下一步”，不進(jìn)行任何設(shè)置，點(diǎn)擊“下一步”，不進(jìn)行任何設(shè)置，點(diǎn)擊“下一步”，不進(jìn)行任何設(shè)置，點(diǎn)擊“下一步”，不進(jìn)行任何設(shè)置，點(diǎn)擊“完成”，點(diǎn)擊“添加”類型是“失效切換”，名稱為“failover_SQL”，點(diǎn)擊“下一步”把2個(gè)節(jié)點(diǎn)從“能夠使用的服務(wù)器”添加到“可以啟動(dòng)組的服務(wù)器”中，點(diǎn)擊“完成”選擇“組資源”點(diǎn)擊“添加”類型選擇“浮動(dòng)IP資源”，名稱為“fip_SQL”,點(diǎn)擊“下一步”輸入虛擬IP地址，，點(diǎn)擊“下一步”這里不做任何修改，下一步這里點(diǎn)擊“完成”點(diǎn)擊“關(guān)閉”為剛才建立的虛擬IP添加一個(gè)監(jiān)控，這里點(diǎn)擊“添加”資源類型選擇“浮動(dòng)IP監(jiān)視”，名稱是“fipw_SQL”，點(diǎn)擊“下一步”點(diǎn)擊“下一步”在目標(biāo)資源處點(diǎn)擊“參照”，出現(xiàn)的對話框選擇“fip_SQL”，點(diǎn)擊“確定”在復(fù)歸對象處點(diǎn)擊“參照”，在出現(xiàn)的對話框中選擇“fip_SQL”，點(diǎn)擊“確定”點(diǎn)擊“完成”點(diǎn)擊“文件”，選擇“上傳配置文件”顯示上傳成功在最初登陸界面上的“服務(wù)”中選擇“重新啟動(dòng)管理器”，之后再選擇“啟動(dòng)群集”可以看到集群已經(jīng)正常工作了，顯示為綠色，在右邊狀態(tài)欄中顯示綠色“NORMAL”，此時(shí)可以在命令行中去PING 的虛IP，發(fā)現(xiàn)已經(jīng)可以PING通了。代表虛擬IP已經(jīng)工作了?，F(xiàn)在來添加鏡像磁盤。在集群配置界面的SERVERS項(xiàng)中，右鍵點(diǎn)擊“dayang-1”，選擇“屬性”在這里選擇“鏡像連接I/F”，點(diǎn)擊“添加”在這里輸入該節(jié)點(diǎn)的鏡像IP地址 0，點(diǎn)擊“確定”點(diǎn)擊“確定”另一個(gè)節(jié)點(diǎn)“dayang-2”也是一樣，點(diǎn)擊“鏡像連接I/F”可以發(fā)現(xiàn)，已經(jīng)生成了地址框，只需要編輯添加dayang-2的鏡像IP地址就可以了返回集群設(shè)置界面，在“GROUPS”下的“failover_SQL”項(xiàng)目上點(diǎn)擊右鍵，選擇“添加資源”類型選擇“鏡像磁盤資源”，名稱為“md_SQL”，點(diǎn)擊“下一步”選擇dayang-1，點(diǎn)擊“添加”，這里在數(shù)據(jù)分區(qū)里點(diǎn)亮F盤，在集群分區(qū)里點(diǎn)亮E盤，點(diǎn)擊“確定”。如果這里沒有顯示出磁盤信息，點(diǎn)擊“連接”就可以了這時(shí)紅框處已經(jīng)顯示了節(jié)點(diǎn)的分區(qū)信息。不做任何更改，下一步取消鉤選左上的“遵循原由的依賴關(guān)系”，將在右邊可用資源中出現(xiàn)的“fip_SQL”添加到左邊的依賴資源中，點(diǎn)擊“完成”在集群配置中就出現(xiàn)了鏡像盤資源，點(diǎn)擊文件，選擇“上傳信息文件”，按照軟件提示，停掉一些服務(wù)或者集群，直到上傳成功上傳成功后，啟動(dòng)服務(wù)后，2個(gè)節(jié)點(diǎn)會(huì)對鏡像盤做一個(gè)初始同步，需要一定的時(shí)間（NEC工程師說1個(gè)G空間大概需要1分鐘左右）。等初始化結(jié)束，可以看到資源中虛擬IP和鏡像磁盤工作都是正常的，狀態(tài)均是“ONLINE”,接下來添加數(shù)據(jù)庫程序，在集群