hortonworks測(cè)試環(huán)境離線安裝與配置

1、目錄TOC o 1-3 h z u HYPERLINK l _Toc394855855 目錄 PAGEREF _Toc394855855 h 0 HYPERLINK l _Toc394855856 1.基礎(chǔ)礎(chǔ)環(huán)境 PAGEREF _Toc394855856 h 11 HYPERLINK l _Toc394855857 2.準(zhǔn)備備工作 PAGEREF _Toc394855857 h 22 HYPERLINK l _Toc394855858 2.1配配置環(huán)境境 PAGEREF _Toc394855858 h 2 HYPERLINK l _Toc394855859 2.1.1配置置hossts文文件

2、 PAGEREF _Toc394855859 h 2 HYPERLINK l _Toc394855860 2.1.2SSSH無(wú)密密碼登入入 PAGEREF _Toc394855860 h 2 HYPERLINK l _Toc394855861 2.1.3NTTP 時(shí)時(shí)間同步步 PAGEREF _Toc394855861 h 3 HYPERLINK l _Toc394855862 2.1.4SEELinnux & iiptaablees 關(guān)關(guān)閉 PAGEREF _Toc394855862 h 3 HYPERLINK l _Toc394855863 2.2JJavaa環(huán)境安安裝 PAGEREF _

3、Toc394855863 h 4 HYPERLINK l _Toc394855864 2.2.1安裝裝JDKK PAGEREF _Toc394855864 h 4 HYPERLINK l _Toc394855865 2.2.2配置置環(huán)境變變量 PAGEREF _Toc394855865 h 4 HYPERLINK l _Toc394855866 3.Ammbarri安裝裝配置 PAGEREF _Toc394855866 h 66 HYPERLINK l _Toc394855867 3.1配配置本地地源 PAGEREF _Toc394855867 h 6 HYPERLINK l _Toc3948

4、55868 3.1.1建立立本地資資源庫(kù) PAGEREF _Toc394855868 h 66 HYPERLINK l _Toc394855869 3.1.2配置置reppo文件件 PAGEREF _Toc394855869 h 7 HYPERLINK l _Toc394855870 3.1.3配置置Meddia源源 PAGEREF _Toc394855870 h 8 HYPERLINK l _Toc394855871 3.1.4安裝裝必要工工具 PAGEREF _Toc394855871 h 8 HYPERLINK l _Toc394855872 3.1.5配置置Meddia的的htttp源

5、 PAGEREF _Toc394855872 h 9 HYPERLINK l _Toc394855873 3.1.6安裝裝ambbarii-seerveer服務(wù)務(wù) PAGEREF _Toc394855873 h 9 HYPERLINK l _Toc394855874 3.1.7安裝裝ambbarii客戶端端 PAGEREF _Toc394855874 h 10 HYPERLINK l _Toc394855875 3.2aambaari服服務(wù)器配配置與管管理 PAGEREF _Toc394855875 h 100 HYPERLINK l _Toc394855876 4.常見(jiàn)見(jiàn)問(wèn)題 PAGEREF

6、 _Toc394855876 h 119 HYPERLINK l _Toc394855877 4.1mmaprreduuce PAGEREF _Toc394855877 h 119 HYPERLINK l _Toc394855878 4.2oooziie安裝裝 PAGEREF _Toc394855878 h 20基礎(chǔ)環(huán)境境本人配置置操作系統(tǒng)統(tǒng)：reedhaat6.4內(nèi)核版本本：內(nèi)存大小?。禾幚砥鳎篈mbaari版版本：aambaari-1.66.0HDP版版本：HHDP-2.11-laatesst-ccenttos66-rppm.ttar.gzHDP-UTIILS版版本：HHDP-UTIILS

7、-7-cenntoss6.ttar.gzJDK版版本：jjdk-7u445-llinuux-xx64Ambaari安安裝的環(huán)環(huán)境路徑徑（選擇擇安裝所所有服務(wù)務(wù)的情況況）：服務(wù)安裝路徑徑/usrr/liib日志路徑徑/varr/loog配置文件件/etccambaari-serrverrambaari-ageentfalcconganggliaahadooophbassehiveehcattaloogooziietezwebhhcattzookkeepper準(zhǔn)備工作作本次配置置使用hhdp-m2作作為主mmastter節(jié)節(jié)點(diǎn)配置環(huán)境境配置hoostss文件所有機(jī)器器都得執(zhí)執(zhí)行，使

8、用rroott用戶hosstnaame hdpp-m22（該命命令可用用于臨時(shí)時(shí)修改主主機(jī)名） vii /eetc/hossts（該該命令可可用于配配置主機(jī)機(jī)名和IIP的對(duì)對(duì)應(yīng)信息息）10.2242.1577.1115 hdpp-m1110.2242.1577.1117 hdpp-m2210.2242.1577.1222 hdpp-s11vi /ettc/ssyscconffig/nettworrk（該該命令可可用于修修改網(wǎng)絡(luò)絡(luò)主機(jī)名名）SSH無(wú)無(wú)密碼登登入所有機(jī)器器都得執(zhí)執(zhí)行，使用rroott用戶 yuum iinsttalll sssh（安裝SSSH協(xié)協(xié)議）yumm innstaall r

9、syync（rrsynnc是一一個(gè)遠(yuǎn)程程數(shù)據(jù)同同步工具具，可通通過(guò)LAAN/WWAN快快速同步步多臺(tái)主主機(jī)間的的文件）serrvicce ssshdd reestaart （啟動(dòng)服服務(wù)）注：如果果系統(tǒng)中中沒(méi)有安安裝SSSH，需需要進(jìn)行行以上操操作。sshh-keeygeen（該該命令生生成指定定公私秘秘鑰的名名字，iid_ddsa及及id_dsaa.puub）catt /rroott/.sssh/id_dsa.pubb /rroott/.sssh/autthorrizeed_kkeyss（把idd_rssa.ppub追追加到授授權(quán)的kkey里里面去,如果有有多個(gè)mmastter節(jié)節(jié)點(diǎn)則需需把所

10、有有的maasteer節(jié)點(diǎn)點(diǎn)上idd_dssa.ppub文文件內(nèi)容容整合到到autthorrizeed_kkeyss文件中中）ll /rooot/.sssh/（查查看共私私鑰、授授權(quán)keey） sssh-ccopyy-idd -ii idd_dssa.ppub rooothhdp-m1（將將公鑰ccopyy到所有有的機(jī)器器上）sshh hddp-mm1（測(cè)測(cè)試SSSH無(wú)密密碼登入入是否成成功）NTP 時(shí)間同同步Hdp-m2節(jié)節(jié)點(diǎn)將serrverr上/eetc/ntpp.coonf文文件中以以下兩行行的注釋釋打開(kāi)vimm /eetc/ntpp.coonfservver 1277.1227.11.

11、0fudgge1227.1127.1.00 sttrattum 10保存并重重啟nttpd服服務(wù)（注注意關(guān)閉閉防火墻墻，遇到到no serrverr suuitaablee foor ssyncchroonizzatiion fouund問(wèn)問(wèn)題，則則需要在在從節(jié)點(diǎn)點(diǎn)上seerviice ntppd sstarrt）： serrvicce nntpdd sttartt chhkcoonfiig nntpdd onn/ettc/iinitt.d/ntppd rresttartt seerviice ntppd sstattus進(jìn)入其他他從節(jié)點(diǎn)點(diǎn)進(jìn)行時(shí)時(shí)間同步步： sssh hhdp-m1vimm

12、/eetc/ntpp.coonfservver hddp-mm2fudgge 1227.1127.1.00 sttrattum 10 nttpdaate hdpp-m22 exxitSELiinuxx & ipttablles 關(guān)閉Hdp-m2節(jié)點(diǎn)點(diǎn) seetennforrce 0（臨臨時(shí)關(guān)閉閉sellinuux） vii /eetc/yumm/pllugiincoonf.d/rrefrreshh-paackaagekkit.connfenabbledd=0所有節(jié)點(diǎn)點(diǎn) chhkcoonfiig iiptaablees ooff（關(guān)關(guān)閉防火火墻關(guān)閉閉開(kāi)機(jī)啟啟動(dòng)） seerviice ipttab

13、lles stoop（關(guān)關(guān)閉防火火墻）至此環(huán)境境配置完完成，關(guān)關(guān)閉防火火墻后方方可SSSH無(wú)密密碼登入入。Javaa環(huán)境安安裝所有的機(jī)機(jī)器上都都要安裝裝JDKK，現(xiàn)在在就先在在hdpp-m22服務(wù)器器安裝，然然后其他他服務(wù)器器按照步步驟重復(fù)復(fù)進(jìn)行即即可。安安裝JDDK以及及配置環(huán)環(huán)境變量量，需要要以rroott的身身份進(jìn)行行。安裝JDDK首先用rroott身份在在/uusr下創(chuàng)建建jaava文件夾夾，再?gòu)?fù)復(fù)制/homme/hhadooop/下的的jddk-77u455-liinuxx-x664.ggz復(fù)復(fù)制到/ussr/jjavaa文件件夾中。mkddir /ussr/jjavaa cpp /

14、hhomee/haambaari/haddoopp/jddk-77u455-liinuxx-x664.ggz /usrr/jaava taar -zxvvf jjdk-7u445-llinuux-xx64.gz然后查看看/uusr/javva下下面會(huì)發(fā)發(fā)現(xiàn)多了了一個(gè)名名為jjdk11.7.0_45文文件夾，說(shuō)說(shuō)明我們們的JDDK安裝裝結(jié)束，進(jìn)進(jìn)入下一一個(gè)配配置環(huán)境境變量環(huán)節(jié)。配置環(huán)境境變量編輯/etcc/prrofiile文件，在在后面添添加Jaava的的JAAVA_HOMME、CLLASSSPATTH以以及PPATHH內(nèi)容容。 viim/eetc/proofille在/eetc/proofi

15、lle文文件的尾尾部添加加以下內(nèi)內(nèi)容：# seet jjavaa ennvirronmmenttexpoort JAVVA_HHOMEE=/uusr/javva/jjdk11.7.0_45/expoort JREE_HOOME=/ussr/jjavaa/jddk1.7.0_45/jjreexpoort CLAASSPPATHH=.:$CLLASSSPATTH:$JAVVA_HHOMEE/liib:$JREE_HOOME/libbexpoort PATTH=$PATTH:$JAVVA_HHOMEE/biin:$JREE_HOOME/binn保存并退退出，執(zhí)執(zhí)行下面面命令使使其配置置立即生生效。

16、soourcce /etcc/prrofiile jaava -verrsioon如果jaava -verrsioon命令令顯示的的結(jié)果依依然是oopennjdkk，表示示JDKK還未更更新，需需要自己己手動(dòng)選選擇新版版本的JJDK，首先安裝 java alternative jdkupddatee-allterrnattivees innstaall /ussr/bbin/javva jjavaa $JJAVAA_HOOME/binn/jaava 60然后配置置JDKK：upddatee-allterrnattivees coonfiig jjavaa（選擇擇最新的的JDKK即可）Ambaa

17、ri安安裝配置置首先要下下載ammbarri及相相關(guān)軟件件包的安安裝包，別別嘗試著著在yuum來(lái)下下，特別別慢，最最好的方方式是通通過(guò)建立立本地資資源的方方式來(lái)安安裝：ambaari-1.66.0-cenntoss6.taar.ggzHDP-2.11-laatesst-ccenttos66-rppm.ttar.gzHDP-UTIILS-7-cenntoss6.ttar.gz配置本地地源建立本地地資源庫(kù)庫(kù)在hdpp-m22機(jī)器上上建立本地地資源庫(kù)庫(kù)，在vaar/wwww/htmml下建建立一個(gè)個(gè)hdpp目錄，如如果沒(méi)有有該目錄錄，表示示htttpd服服務(wù)未安安裝，請(qǐng)請(qǐng)先安裝裝ht

18、ttpd服服務(wù)yuum iinsttalll htttpdd（一一般的LLiveeCD和和DVDD版本的的IOSS安裝都都是默認(rèn)認(rèn)有的，但但是如mminiimall版本的的安裝是是沒(méi)有的的，目錄錄地址根根據(jù)實(shí)際際情況設(shè)設(shè)定）。 yuum iinsttalll htttpdd如頁(yè)面不不能訪問(wèn)問(wèn) HYPERLINK http:/hdp-m2/ htttp:/hddp-mm2則看看下面文文件配置置： seerviice htttpd resstarrt mkkdirr /vvar/wwww/httml/hdpp把下到的的三個(gè)資資源解壓壓到/sooftwwaree/hddp之后后，移動(dòng)動(dòng)到hddp目錄

19、錄下： cdd /ssofttwarre/hhdp mvv ammbarri /varr/wwww/hhtmll/hddp mvv HDDP /varr/wwww/hhtmll/hddp mvv HDDP-UUTILLS-17 /varr/wwww/hhtmll/hddp在網(wǎng)頁(yè)上上輸入如如下地址址進(jìn)行驗(yàn)驗(yàn)證：httpp:/hdpp-m22/hddp配置reepo文文件在hdpp-m22機(jī)器上上準(zhǔn)備aambaari.reppo文件件,，然然后把這這個(gè)文件件復(fù)制到到集群中中的所有有機(jī)器的的/ettc/yyum.reppos.d/目目錄下： cdd /eetc/yumm.reepos

20、s.d viim aambaari.reppoambaari.reppoambbarii-1.xnamee=Ammbarri 11.xbaseeurll=htttp:/hhdp-m2/hdpp/ammbarri/ccenttos66/1.x/uupdaatess/1.6.11gpgcchecck=11gpgkkey=htttp:/hddp-mm2/hhdp/ambbarii/ceentoos6/1.xx/uppdattes/1.66.1/RPPM-GGPG-KEYYa/RRPM-GPGG-KEEY-JJenkkinssenabbledd=0priooritty=11HDPP-UTTILSS-1

21、.1.00.166namee=Hoortoonwoorkss Daata Plaatfoorm Utiils Verrsioon - HDDP-UUTILLS-16baseeurll=htttp:/hhdp-m2/hdpp/HDDP-UUTILLS-17/rrepoos/ccenttos66gpgcchecck=11gpgkkey=htttp:/hddp-mm2/hhdp/HDPP-UTTILSS-1.1.00.177/reeposs/ceentoos6/RPMM-GPPG-KKEY/RPMM-GPPG-KKEY-Jennkinnsenabbledd=0prio

22、oritty=11HDPP-UTTILSS-1.1.00.177namee=Hoortoonwoorkss Daata Plaatfoorm Utiils Verrsioon - HDDP-UUTILLS-17baseeurll=htttp:/hhdp-m2/hdpp/HDDP-UUTILLS-17/rrepoos/ccenttos66gpgcchecck=00gpgkkey=htttp:/hddp-mm2/hhdp/HDPP-UTTILSS-1.1.00.177/reeposs/ceentoos6/RPMM-GPPG-KKEY/RPMM-GPPG-KKEY-J

23、ennkinnsenabbledd=1priooritty=11Upddatees-aambaarinamee=ammbarri - Uppdattesbaseeurll=htttp:/hhdp-m2/hdpp/ammbarri/ccenttos66/1.x/uupdaatess/1.6.11gpgcchecck=11gpgkkey=htttp:/hddp-mm2/hhdp/ambbarii/ceentoos6/1.xx/uppdattes/1.66.1/RPPM-GGPG-KEYY/RPPM-GGPG-KEYY-Jeenkiinsenabbledd=1priooritty=11配置Meedi

24、aa源進(jìn)入hddp-mm2機(jī)器器上/eetc/yumm.reeposs.d文文件夾還還可能看到已存存在四個(gè)個(gè)文件：CenttOS-Debbugiinfoo.reepoCCenttOS-Vauult.reppoCenttOS-Basse.rrepooCenntOSS-Meediaa.reeporrhell-soourcce.rrepoo把這些文文件都刪刪除安裝必要要工具強(qiáng)制替換換安裝rrpm -ivvh forrce 文件名名(順序序執(zhí)行) , 都可可以在光光盤(pán)的PPackkagee目錄找找到：所有機(jī)器器都運(yùn)行行：rpm ivvh -foorcee deeltaarpmm-3.5-00.5.20

25、00909913ggit.el66.x886_664.rrpmrpm ivvh -foorcee pyythoon-ddelttarppm-33.5-0.55.20009009133gitt.ell6.xx86_64.rpmmrpm ivvh -foorcee crreattereepo-0.99.8-5.eel6.noaarchh.rppmrpm ivvh -foorcee oppensssl-1.00.1ee-166.ell6_55.x886_664.rrpm配置Meediaa的htttp源源掛載isso中的的Pacckagge到hhdp-m2將將機(jī)器上上的/vvar/wwww/httml

26、/rheel下，然然后： mkkdirr /vvar/wwww/httml/rheel cpp -rr /mmediia/ccdroom/PPackkagees /varr/wwww/hhtmll/rhhel crreattereepo /vaar/wwww/htmml/rrhell（生成rrepoodatta文件件夾）rooothhambbarii httml# ccreaaterrepoo /vvar/wwww/httml/rheel37200/37720 - PPackkagees/rroottfilles-8.11-6.1.eel6.noaarchh.rppmSaviing Priim

27、arry mmetaadattaSaviing fille llistts mmetaadattaSaviing othher mettadaata在所有機(jī)機(jī)器上的的/ettc/yyum.reppos.d文文件夾中中添加一一個(gè)myyisoo.reepo文文件，內(nèi)內(nèi)容如下下： viim mmyisso.rrepoomyiisonamee=myyisoo reepobaseeurll=htttp:/hhdp-m2/rheelgpgcchecck=00enabbledd=1gpgkkey=fille:/eetc/pkii/rppm-ggpg/RPMM-GPPG-KKEY-CenntOSS-6mysq

28、ql卸載載使用rooot用用戶登陸陸hdpp-m22執(zhí)行以下下命令，使用的的myssql安安裝文件件為提供供的MyySQLL-seerveer-55.5.28-1.llinuux2.6.xx86_64.rpmm，MySSQL-cliientt-5.5.228-11.liinuxx2.66.x886_664.rrpm查找以前前是否裝裝有myysqll命令：rrpm -qaa|grrep -i myssql刪除myysqll刪除命令令：rppm -e noodepps 包包名查看是否否刪除成成功：刪除成功功刪除老版版本myysqll的開(kāi)發(fā)發(fā)頭文件件和庫(kù)命令：rrm -fr /ussr/llib/m

29、yssqlrm -fr /ussr/iinclludee/myysqll注意：卸卸載后/varr/liib/mmysqql中的的數(shù)據(jù)及及/ettc/mmy.ccnf不不會(huì)刪除除，如果果確定沒(méi)沒(méi)用后就就手工刪刪除rm -f /etcc/nfrm -fr /vaar/llib/myssqlmysqql安裝裝執(zhí)行命令令安裝mmysqql服務(wù)務(wù)端(文文件參見(jiàn)附件清清單中，mmysqql安裝裝程序/myssql-serrverr-*)rpm -ivvh MyySQLL-seerveer-55.5.28-1.llinuux2.6.xx86_64.rpmm執(zhí)行命令令安裝mmysqql客戶戶端(文文件參見(jiàn)附件

30、清清單中，mmysqql安裝裝程序/myssql-cliientt-*)rpm -ivvh MySSQL-cliientt-5.5.228-11.liinuxx2.66.x886_664.rrpm配置myysqll設(shè)置服務(wù)務(wù)為開(kāi)機(jī)機(jī)自啟動(dòng)動(dòng)：chhkcoonfiig mmysqql oon開(kāi)啟服務(wù)務(wù)：seerviice myssql staart啟動(dòng)設(shè)置置rooot密碼碼登陸命令令行：mmysqql -u rroott myysqll 更改密碼碼：Uppdatte uuserr seet ppasssworrd=PPASSSWORRD(12334566) wheere useer = rroo

31、tt;退出：eexitt;設(shè)置遠(yuǎn)程程可訪問(wèn)問(wèn)rooot用戶戶的權(quán)限限，并指指定密碼碼命令行執(zhí)執(zhí)行：myssql u rooot p，第一次次時(shí)，無(wú)需輸輸入密碼碼，直接接按回車(chē)車(chē)鍵進(jìn)入myysqll的shhelll命令行行，依次次輸入以以下內(nèi)容容：mysqql sett PAASSWWORDD = PASSSWOORD(12234556);提示成功功mysqql graant alll onn *.* tto rroott% iidenntiffiedd byy 11234456;提示成功功mysqql fluush priivillegees;提示成功功創(chuàng)建用戶戶密碼和和遠(yuǎn)程訪訪問(wèn)的權(quán)權(quán)限hi

32、vee用戶，執(zhí)行以下命令grannt aall priivillegees oon *.* to hiive% iidenntiffiedd byy hhivee wwithh grrantt opptioon; grannt aall priivillegees oon *.* to hiivellocaalhoost iddenttifiied by hiive wiith graant opttionn; grannt aall priivillegees oon *.* to hiivehhdp-m2 iddenttifiied by hiive wiith graant opttio

33、nn; grannt aall priivillegees oon *.* to hiivehhdp-m1 iddenttifiied by hiive wiith graant opttionn; flussh pprivvileegess;ambaari用用戶，執(zhí)執(zhí)行以下下命令grannt aall priivillegees oon *.* to ammbarri% iddenttifiied by ammbarri witth ggrannt ooptiion; grannt aall priivillegees oon *.* to ammbarriloocallhosst idee

34、ntiifieed bby ambbarii wwithh grrantt opptioon; grannt aall priivillegees oon *.* to ammbarrihddp-mm2 ideentiifieed bby ambbarii wwithh grrantt opptioon; flussh pprivvileegess;bigddataa用戶，執(zhí)執(zhí)行以下下命令grannt aall priivillegees oon *.* to biigdaata% iidenntiffiedd byy bbigddataa wwithh grrantt opptioon; g

35、rannt aall priivillegees oon *.* to biigdaatallocaalhoost iddenttifiied by biigdaata wiith graant opttionn; grannt aall priivillegees oon *.* to biigdaatahhdp-m2 iddenttifiied by biigdaata wiith graant opttionn; flussh pprivvileegess;退出：eexitt;測(cè)試用戶戶是否已已經(jīng)創(chuàng)建建mysqql -u aambaari p輸入密碼碼ambbarii表明用戶戶已成功功創(chuàng)

36、建數(shù)據(jù)庫(kù)初初始化創(chuàng)建數(shù)據(jù)據(jù)庫(kù)執(zhí)行命令令：myysqll u rooot p 12334566進(jìn)入mmysqql sshelll窗口口依次執(zhí)行行以下mmysqql語(yǔ)句句creaate dattabaase ambbarii deefauult chaarseet=UTFF8;creaate dattabaase hivve ddefaaultt chharsset=UTTF8;creaate dattabaase biggdatta ddefaaultt chharsset=UTTF8;初始化數(shù)數(shù)據(jù) (這一步步會(huì)在安安裝ammbarri-sservver時(shí)時(shí)有提示示，到時(shí)時(shí)候根據(jù)據(jù)提示執(zhí)執(zhí)行即可

37、可)執(zhí)行命令令：myysqll -u ammbarri -p aambaari進(jìn)進(jìn)入ammbarri用戶戶操作窗窗口執(zhí)行語(yǔ)句句：soourcce 路路徑/AAmbaari-DDLL-MyySQLL-CRREATTE.ssql(路徑視具體情況況而定)安裝ammbarri-sservver服服務(wù)在hdpp-m22機(jī)器上上,從配配置好的的本地源源安裝aambaari服服務(wù)，如如遇到pposttgreesqll版本太太低，用用CDRROM源源進(jìn)行高高版本的的安裝即即可： yuum ccleaan aall yuum -y iinsttalll ammbarri-sservver（輸入y回車(chē)）然后see

38、rveer上執(zhí)執(zhí)行ammbarri-sservver settup，一一路回車(chē)車(chē)，安裝裝ambbarii-seerveer，它它會(huì)自動(dòng)動(dòng)安裝配配置PoostggreSSQL，同同時(shí)要求求輸入用用戶名和和密碼，如如果按nn，它用用默認(rèn)的的用戶名名/密碼碼值：aambaari-serrverr/biigdaata，如如果輸入入有誤可可在/eetc/ambbarii-seerveer/cconff/修改改ambbarii.prropeertiies文文件即可可。 ammbarri-sservver settup選擇自定定義的jjdk配置JAAVA_HOMME目錄錄地址配置數(shù)據(jù)據(jù)庫(kù)將myssql的的j

39、dbbc驅(qū)動(dòng)動(dòng)包放到到對(duì)應(yīng)文文件夾下下servver啟啟動(dòng)ammbarri-sservver：ambbarii-seerveer sstarrtambbarii-seerveer sstarrt pss -eef | grrep Ambbarii（查看看Ambbarii服務(wù)是是否啟動(dòng)動(dòng)）ambaari服服務(wù)器配配置與管管理使用瀏覽覽器輸入入htttp:/hddp-mm2:880800進(jìn)入登登陸頁(yè)面面如下，用用戶名/密碼：admmin/admmin集群服務(wù)務(wù)信息服務(wù) 機(jī)器名名hdp-m1hdp-m2hdp-s1hdp-s2hdp-s3HDFSSActiive NammeNoodeStanndby

40、yNammeNoodeDataaNoddeDataaNoddeDataaNoddeYARNNYarnnCliientt、ReesouurceeMannageer、AApp Timmeliine SerrverrYarnnCliienttNodeeMannageerNodeeMannageerNodeeMannageerMapRReduuce22MapRReduuce22CliienttHisttoryySerrverr MaapReeducce2CClieentTezHBasseActiive HBaaseMMastterStanndbyyHBaaseMMastterRegiionSServv

41、erRegiionSServverRegiionSServverHiveeHivee CllienntHivee Meetasstorre、HHiveeSerrverr2、MMysqqlSeerveer、HHivee CllienntWebHHCatt HYPERLINK http:/hdp-m2:8080/ o hdp-m2 WebHHCatt SeerveeGanggliaaGanggliaa Moonittor HYPERLINK http:/hdp-m2:8080/ o hdp-m2 Ganggliaa SeerveerGanggliaa MoonittorGanggliaa Moon

42、ittorGanggliaa MoonittorNagiios HYPERLINK http:/hdp-m2:8080/ o hdp-m2 Nagiios SerrverrZooKKeepperPigSqooopOoziieOoziie CClieentOoziie SServver、Oozzie CliienttFalcconStorrm集群名稱(chēng)稱(chēng)，隨便便取：指定hddp版本本和hddp的yyum 倉(cāng)庫(kù)位位置，ccenttos66對(duì)應(yīng)項(xiàng)項(xiàng)的倉(cāng)庫(kù)庫(kù)位置配配置需要要修改，其其他的不不選：節(jié)點(diǎn)列表表和seerveer的iid_ddsa私私鑰文件件，彈出出的警告告直接點(diǎn)點(diǎn)OK，hhostt最好是是主

43、機(jī)名名和域名名的結(jié)合合，記得得在/eetc/hossts中中增加帶帶有域名名的IPP映射，iid_ddsa私私鑰文件件要講文文件內(nèi)容容復(fù)制到到空白版版中(最最好選擇擇私鑰文文件)：確認(rèn)節(jié)點(diǎn)點(diǎn)：主要有22個(gè)問(wèn)題題：oppensssl和和serrverr主機(jī)無(wú)無(wú)法訪問(wèn)問(wèn)的問(wèn)題題。問(wèn)題一解解決方案案：在部署aambaari的的時(shí)候會(huì)會(huì)出現(xiàn)如如題的錯(cuò)錯(cuò)誤。這這個(gè)錯(cuò)誤誤是在配配置hoost的的時(shí)候出出現(xiàn)的錯(cuò)錯(cuò)誤。谷谷歌這個(gè)個(gè)是說(shuō)ccenttos66.5的的一個(gè)bbug，不不過(guò)已經(jīng)經(jīng)修復(fù)了了。如果果是使用用在線的的yumm源的話話，應(yīng)該該是不會(huì)會(huì)出現(xiàn)這這個(gè)問(wèn)題題的。不不過(guò)我使使用的是是本地源源，所以以就出

44、現(xiàn)現(xiàn)了這個(gè)個(gè)問(wèn)題，這這個(gè)應(yīng)該該是版本本兼容性性不行導(dǎo)導(dǎo)致的?？梢韵孪螺d新的的opeensssl-11.0.1e-16.el66_5.x866_644文件并并進(jìn)行安安裝即可可，以前前的版本本是oppensssl-1.00.1ee-155.ell6_55.x886_664， 由于ccenttos已已經(jīng)含有有這個(gè)軟軟件，所所以需要要使用命命令： rppm -ivhh repplaccefiiless oppensssl-*.rrpm當(dāng)然也可可以自己己下載oopennssll-1.0.11e-116.eel6_5.xx86_64文文件進(jìn)行行安裝，因因?yàn)橐呀?jīng)經(jīng)安裝過(guò)過(guò)opeensssl-11.0.1e-

45、15.el66_5.x866_644，所以以要先卸卸載： rppm -i foorcee noddepss oppensssl-1.00.1ee-166.ell6_55.x886_664.rrpm問(wèn)題二解解決方案案：在安裝完完ambbariiseerveer并配配置之后后，選定定客戶端端進(jìn)行指指定安裝裝的時(shí)候候，發(fā)現(xiàn)現(xiàn)總是遇遇到這一一錯(cuò)誤，看看了一下下錯(cuò)誤日日志發(fā)現(xiàn)現(xiàn)在從aambaariserrverr傳送到到客戶端端的seetuppAgeent.py腳腳本的mmainn函數(shù)中中的參數(shù)數(shù)設(shè)置老老是不對(duì)對(duì)，如下下所示：原先的代代碼不對(duì)對(duì)，如果果按照原原先的代代碼執(zhí)行行就會(huì)一一直出現(xiàn)現(xiàn)上述問(wèn)問(wèn)題。

46、而而手動(dòng)指指定了aambaariserrverr所在機(jī)機(jī)器的hhostt和seerviice porrt，修修改之后后執(zhí)行就就可以通通過(guò)。選擇服務(wù)務(wù)，全選選，直接接nexxt：指定maasteers服務(wù) 機(jī)器名名Hdp-m1Hdp-m2Hdp-s1Hdp-s2Hdp-s3HDFSSActiive NammeNoodeStanndbyyNammeNoodeDataaNoddeDataaNoddeDataaNoddeYARNNYarnnCliienttResoourcceMaanagger、YarrnClliennt、AApp Timmeliine SerrverrNodeeMannageerNo

47、deeMannageerNodeeMannageerMapRReduuce22Histtoryy SeerveerMapRReduuce22CliienttMapRReduuce22CliienttMapRReduuce22CliienttTezHBasseActiive HBaaseMMastterStanndbyy HBBaseeMassterrRegiionSServverRegiionSServverRegiionSServverHiveeHivee CllienntHivee Meetasstorre、HHiveeSerrverr2、MMysqqlSeerveer、HHivee Cl

48、lienntOoziieOoziie CClieentOoziie SServverOoziie CClieentOoziie CClieentOoziie CClieentWebHHCattFalcconStorrmGanggliaaNagiiosZooKKeepperPigSqooop指定sllavees和客客戶端配置服務(wù)務(wù)，將hhivee的數(shù)據(jù)據(jù)庫(kù)paasswwordd配置成成abccd12234，oooziie的數(shù)數(shù)據(jù)庫(kù)ppasssworrd配置置成abbcd112344，naagioos的ppasssworrd配置置成abbcd112344，emmaill配置成成meaaemzzgm

49、maill.coom預(yù)覽配置置情況開(kāi)始安裝裝只安裝一一個(gè)節(jié)點(diǎn)點(diǎn)時(shí)才成成功，而而且不少少服務(wù)沒(méi)沒(méi)有啟動(dòng)動(dòng)：以下為三三個(gè)節(jié)點(diǎn)點(diǎn)：高可用配配置在完成NNameeNodde配置置之后，HHivee需要實(shí)實(shí)現(xiàn)高可可用，對(duì)對(duì)Hivve中的的hdfss存儲(chǔ)路路徑指向向進(jìn)行修修改。在在hivve服務(wù)務(wù)的安裝裝機(jī)器上上進(jìn)行。命令如如下：1)檢查查當(dāng)前的的hivve中的的HDFSS數(shù)據(jù)存存儲(chǔ)配置置hivee connfigg /eetc/hivve/cconff.seerveer seerviice mettatoool liistFFSRooot結(jié)果如下下：Listtingg FSS Roootss.hdfss

50、:/appps/hivve/wwareehouuse2)修改改hivve的hhdfss文件存存儲(chǔ)目錄錄為naamennodee高可用用方式：$ hiive -cconffig /ettc/hhivee/coonf.serrverr serrvicce mmetaatoool -upddateeLoccatiion 如：hiive -cconffig /ettc/hhivee/coonf.serrverr serrvicce mmetaatoool -upddateeLoccatiion hdffs:/myycluusteer/aappss/hiive/warrehoousee hddfs:/h

51、hdp-m1:80220/aappss/hiive/warrehoousee3)再次次檢查修修改結(jié)果果：hivee connfigg /eetc/hivve/cconff.seerveer seerviice mettatoool liistFFSRoootResoourcce MManaagerr高可用用配置Horttonwworkks2.1版本本需要手手動(dòng)配置置Ressourrce Mannageer高可可用，參考bkk_syysteem-aadmiin-gguidee-xxxx.ppdf修改yaarn-sitte.xxml文文件：yyarnn.reesouurceemannageer.c

52、clussterr-iddyarrn-cclussterryyarnn.reesouurceemannageer.hha.eenabbleddtruueyyarnn.reesouurceemannageer.hha.rrm-iidsrm11,rmm2yyarnn.reesouurceemannageer.hhosttnamme.rrm1$rrm1 adddresssyyarnn.reesouurceemannageer.hhosttnamme.rrm2$rrm2 adddresssyyarnn.reesouurceemannageer.wwebaapp.adddresss.rrm1rm11_w

53、eeb_aaddrresss:poort_nummWe cann seet rrm1_webb_adddreess sepparaatelly. If nott, iit wwilll usse$yaarn.ressourrcemmanaagerr.hoostnnamee.rmm1:DEFFAULLT_RRM_WWEBAAPP_PORRTyyarnn.reesouurceemannageer.wwebaapp.adddresss.rrm2rm22_weeb_aaddrresss:poort_nummyyarnn.reesouurceemannageer.rrecooverry.eenabble

54、ddtruueyyarnn.reesouurceemannageer.sstorre.cclasssorgg.appachhe.hhadooop.yarrn.sservver.ressourrcemmanaagerr.reecovveryy.ZKRMMStaateSStorreyyarnn.reesouurceemannageer.zzk-aaddrresss$zzk1.adddresss,zzk2.adddresssyyarnn.clliennt.ffailloveer-pproxxy-pprovvideerorgg.appachhe.hhadooop.yarrn.cclieent.Conn

55、figgureedRMMFaiilovverPProxxyPrroviiderryyarnn.reesouurceemannageer.hha.aautoomattic-faiilovver.zk-basse-ppathh/yaarn-leaaderr-ellecttionnOpttionnal setttinng. Thee deefauult vallue is /yaarn-leaaderr-ellecttionn重啟zoookeeepeer和rresoourccemaanaggerAmbaari Serrverr界面只只能啟動(dòng)動(dòng)默認(rèn)安安裝的，其它的的需手動(dòng)動(dòng)啟動(dòng)：su - yaarn

56、-c exxporrt HHADOOOP_LIBBEXEEC_DDIR=/ussr/llib/haddoopp/liibexxec & /ussr/llib/haddoopp-yaarn/sbiin/yyarnn-daaemoon.ssh coonfiig /etcc/haadooop/cconff sttartt reesouurceemannageer切換狀態(tài)態(tài)：yarnn rmmadmmin -trranssitiionTToAcctivve mm1yarnn rmmadmmin -trranssitiionTToSttanddby m2HBasseHA配置在選擇服服務(wù)所在在節(jié)點(diǎn)的的頁(yè)面

57、，可可以增加加HBaase Massterr的節(jié)點(diǎn)點(diǎn)數(shù)，就就行Zoookeeepeer一樣樣增加節(jié)節(jié)點(diǎn)即可可，如下下圖：增加新節(jié)節(jié)點(diǎn)yum remmovee hccataalogg*yum remmovee hiive*yum remmovee hbbasee*yum remmovee zoookeeepeer*yum remmovee oooziee*yum remmovee piig*yum remmovee snnapppy* yum remmovee haadooop-llzo*yum remmovee knnox* yum remmovee haadooop* yum remmove

58、e exxtjss-2.2-11 myysqll-coonneectoor-jjavaa-5.0.88-1*如果之前前有安裝裝過(guò)，則則執(zhí)行以以上命令令將其他正正常節(jié)點(diǎn)點(diǎn)下的/etcc/haadooop/cconff/* 拷貝到到新節(jié)點(diǎn)的的/ettc/hhadooop/connf下在Webb管理頁(yè)頁(yè)面進(jìn)入入Hossts-Addd NNew Hossts：進(jìn)入新增增節(jié)點(diǎn)界界面：注冊(cè)新節(jié)節(jié)點(diǎn)：確認(rèn)為sslavvve節(jié)節(jié)點(diǎn)：配置服務(wù)務(wù)：查看配置置：安裝與完完成：Web頁(yè)頁(yè)面上查查看新節(jié)節(jié)點(diǎn)：服務(wù)遷移移到另一一節(jié)點(diǎn)服務(wù)遷移移是將主主服務(wù)遷遷移到其其他節(jié)點(diǎn)點(diǎn)的功能能，只支支持NaameNNodee、SNN

59、ameeNodde和RResoourcceMaanagger的的遷移。在此，以以RessourrceMManaagerr為例：在Serrvicces - Yarrn - SServvicee Acctioons - Movve RResoourcceMaanaggerAmbaari Serrverr移動(dòng)將ambbarii Seerveer移動(dòng)動(dòng)到其它它機(jī)器，命令如如下：停止ammbarri sservver：ambaari-serrverr sttop創(chuàng)建備份份目錄：mkdiir /tmpp/dbbdummpscd ddbduumpss備份poostggress數(shù)據(jù)庫(kù)庫(kù)：pg_ddumpp -

60、UU ammbarri aambaari aambaari.sqll Paasswwordd:biigdaatapg_ddumpp -UU maapreed aambaarirrca aambaarirrca.sqll Paasswwordd:maapreedambaari默默認(rèn)賬號(hào)號(hào)密碼：ambbarii-seerveer/bbigddataaambaarirrca默默認(rèn)賬號(hào)號(hào)密碼：mappredd/maapreedsss停止所有有ambbarii aggentt服務(wù)：ambaari-ageent stoop刪除所有有機(jī)器上上舊的代代理證書(shū)書(shū)：rm /varr/liib/aambaari-a