F5負載均衡設備維護手冊

1、F5負載均衡設備維護手冊CONTENTS目錄 TOC o 1-5 h z HYPERLINK l bookmark21 o Current Document 第一章日常物理檢查3 HYPERLINK l bookmark24 o Current Document F5 BiglP設備面板結構3 HYPERLINK l bookmark37 o Current Document 狀態(tài)燈判斷3 HYPERLINK l bookmark40 o Current Document 第二章日常運行監(jiān)控4 HYPERLINK l bookmark43 o Current Document 檢測各臺BIG-

2、IP設備的主備工作狀態(tài).4 HYPERLINK l bookmark55 o Current Document 檢測F5設備負載狀況4 HYPERLINK l bookmark61 o Current Document 檢測BIG-IP的CPU和內(nèi)存使用狀況使用命令行：top.4 HYPERLINK l bookmark73 o Current Document 檢測客戶連接數(shù)量4 HYPERLINK l bookmark96 o Current Document 查看服務器節(jié)點狀態(tài)5 HYPERLINK l bookmark111 o Current Document 查看當前建立的所有連接

3、6備份日志6 HYPERLINK l bookmark114 o Current Document 查看LOG列表6 HYPERLINK l bookmark120 o Current Document 第三章變更操作7 HYPERLINK l bookmark123 o Current Document F5 BIG-IP設備的變更操作.7 HYPERLINK l bookmark133 o Current Document 服務器的變更維護管理8 HYPERLINK l bookmark140 o Current Document 第四章系統(tǒng)管理10 HYPERLINK l bookmar

4、k143 o Current Document 用戶管理10 HYPERLINK l bookmark156 o Current Document SNMP 管理11 HYPERLINK l bookmark160 o Current Document 第五章標準故障診斷流程11 HYPERLINK l bookmark191 o Current Document 第六章系統(tǒng)配置備份及恢復14系統(tǒng)配置的備份146.1.1命令行方式14 HYPERLINK l bookmark209 o Current Document 系統(tǒng)配置的恢復166.2.1命令行方式16 HYPERLINK l boo

5、kmark213 o Current Document 第七章基本錯誤處理流程18 HYPERLINK l bookmark218 o Current Document 第八章應急處理189.1.系統(tǒng)訪問異常，但Telnet（ssh）或Console可以連接上F5 Active設備 步驟：19 HYPERLINK l bookmark225 o Current Document 系統(tǒng)訪問異常，切Telnet （ssh）和Console均無法連接主設備。19第一章日常物理檢查根據(jù)設備檢查需要，可以進行設備物理檢查，觀察設備面板指示燈，分析設備運行狀態(tài)。F5 BigIP設備面板結構10/100 i

6、nterface模光纖接口多個10/100 M自適應的網(wǎng)絡接口 Gigabit fiber interface多個1000M多Serial console port 一個串口命令行管理端口 Failover port一個串口冗余狀態(tài)判斷端口Mgmt interface 一個 10/100M 管理端口1.2狀態(tài)燈判斷BigIP在正常工作時可以通過端口狀態(tài)顯示燈判斷工作狀態(tài)：10/100 M端口連接狀態(tài)燈綠色為100M連接正常，橙色為10M連接正常10/100 M端口數(shù)據(jù)通訊狀態(tài)燈 停止為無流量，閃爍為正在進行數(shù)據(jù)通訊1000 M端口連接狀態(tài)燈綠色為1000M連接正常1000 M端口數(shù)據(jù)通訊狀態(tài)燈

7、停止為無流量，閃爍為正在進行數(shù)據(jù)通訊 可以通過系統(tǒng)面板右側系統(tǒng)狀態(tài)燈，檢查系統(tǒng)運行狀態(tài)：System正常情況下為綠色為系統(tǒng)工作正常Status正常情況下的Active設備為綠色，而Backup設備為橙色Activity在有數(shù)據(jù)流量通過 時閃爍，無數(shù)據(jù)流量時定時閃Alarm 健康檢查報警，系統(tǒng)發(fā)現(xiàn)有服務節(jié)點處于“不健康”狀態(tài)時提示報警第二章 日常運行監(jiān)控2.1檢測各臺BIG-IP設備的主備工作狀態(tài)在命令行輸入b failover show確認SLB51MO3-1工作在active狀態(tài)，SLB51MO3-2工作在standby狀態(tài)這是系統(tǒng)默認狀態(tài)，如果有變化且非人為設定，則代表系統(tǒng)切換過，需細查原

8、因。2.2檢測F5設備負載狀況通常情況下，我們可以通過在命令行輸入如下命令，分別獲取相關的F5設備信息：2.3檢測BIG-IP的CPU和內(nèi)存使用狀況 使用命令行：topoot4Cl. 16.24.241 仁8511-1.99-0?日門5811_3.491 167x47File Edit Settings VT Options Tunnels Helpload averages； 0. 06j C. 0. OS54 processes： 1 r uiuni ng, 53 si e epi ngCFU states : 0.6% user, Cl. 0% Rice, 3.2% system, Cl

9、.U窩 iiiterruLit.日&.2% i dlwMemorw： Real： W9M/115M13洲/489M Fzrwe：日N1M-FIDUSEOAlflEFBIBICESIZERESSTATETIMEwcruCFUCOMHAHB16722iaem cm204316E6204Ksleeji441Cl.蹣0.琳bi gEruTip ii423i：=Lt=rri ：in1802264KT92E0000. 00%0. 00%httlid424laem cm1802264K792Ksleep000 . 00%0. 00%ht tpdS30laem cm1802328K7SBKsleeji000.

10、 000. 00%ht tjid831daem on1802328K788Ksleep0000. 00%0. 00%ht tp dS3&d=Lm onLS02340ETS4K吝1自捋000Q. 00%0. 口籃ht tpd425laem cmIS02264K7S0Esleep0000. 00%0. 00%ht tpd530ilaHiri on1802316K776E0010. 00%0. 00%ht tp d16085root180416K404KEl&ep0000. 00%0. 00%nt p-i30rcnjt100T52K1436E0000. 00%0. 00%Tn：illTLt_rTif

11、E2514IUijt100966K936Ksleep000 . 00%0. 00%bash2Srcnj t100T52E376Ksleeji000. mo. cmrrinuiLt.m fs416rcnjt100Z16K248K0000. 00%0. 00%蛀L1L00136E1SQK吝1自捋000Q. 00%0. 口籃ini t3S5rcnj t10008K136Ksleep000. 000. 00%re sp aATL如果需要將top執(zhí)行的結果保存在文件里，可執(zhí)行以下命令top - d 5 |tee /var/tmp/topresults.txt其中的5表示連續(xù)輸出5次結果。2.4檢測客戶連

12、接數(shù)量檢測當前BIG-IP上的連接數(shù)量，以及每個對外服務的虛擬服務器的用戶連接數(shù)量，使用命 令行：bigtop*oot 10,16,24243. SSH-l,99-OpenSSH_3,4plL67x47File Edit Settings VT Optians Tunnels Help10. 16.24.8:：my256.OH 403.0M2.5E47.OE43. OKMODE iP：por t|InLHitLorm-|InLHitCmr10. 16.24.2:imy114. OH184.0M88126.OE23. OKIQ. 15.24.3;=iTL762. OH1Q3.JM5142,OE9

13、, OKQ10. IS. 24.1:my45. ON63.0M51210.OK9. OK10. 16.24.4:33. OH51. DM6000aVIF Lp:port|State 班班UPUF平時應觀察正常工作時，BIG-IP上的用戶請求數(shù)量，并針對各個時間段作記錄，以便于當bits sinceMay 1 17；10；324 secondsIn1tl 七C oriiL-In1tl 七C oriiL-cuiTent ti tit 12:10:37BI(MP ACTIVESLB5LM03-1. icbc. com. c 256. 0M 403.0M 2. 5E 47. OE 43. OK 0遭受

14、攻擊時可以判定。2.5查看服務器節(jié)點狀態(tài)通過進AF5管理界面，登陸下面界面，我們可以清楚地看到，所有服務器節(jié)點所處的狀態(tài):上半下半部分顯示各服務器池（pool）中各節(jié)點的L4或者L7的健康檢查結果。部分測試結果上圖中Node Address欄表示服務器是否能Ping通，如果服務器能Ping通，則前頭為 向上的綠色，如果不能ping通，則前頭為向下的紅色。Virtual Servers and Nodes欄表示使用Monitor Service檢測對服務器的檢查結 果，在 本例中如果BIGIP對服務器的兩個端口8210和8001進行TCP端口檢查 都通的時候，則前頭 為向上的綠色。如果某臺服務器

15、只要有一個端口TCP檢查 不通則前頭為向下的紅色。補充說明：如果在上圖健康狀態(tài)監(jiān)視中，只要有一項不能通過，在F5 BIG-IP的前面板 的第四個指示燈Alarm會變黃。2.6查看當前建立的所有連接g System :擊:Virtual Servers P Nodes 圜 Pools i砒表 i-MATiA Proxies p NelwmK :Filters e Moninors :l BIGpipe + Statistics Log Files 菜 Minerrn SSH ,書 System AdmliLO.15.25. 161:37943 L0. 15- 254161:37944 L0u 1

16、5.354.151:37345 61:37946 L0. IE. 3E4.1&1:37947 LO. 15.254-170:64736 10.15.25d. 161:37915 LO. 15.354161:37940 LO. 15.我土 1T0: &4741 LO. 15.254.155:39699 10-15- 254. &： 37534 L0.15.25. 155:39900 L0.15.254155:39901 ULL土朋4.1時；我曲& L55:39902 10. IE. 354.5:37916L EE; 39903 10.15- 25 i| i W：i h 輯 fl m * : *r

17、ip J 審Mil r心 1 i 5. | IjlS 十土 ！ J C；IKX；1 t%is Jlj515;35: 4liLEiD50&iJ_abjs1iTl:.；5_TciTiit ht tpdJim515;-35! 44-bLlp5ui,i sHeNu七cel 2nclrili: TsiicatLogMtarfter Lng下圖是關于各服務器健康檢查的LOG記錄:第三章變更操作F5 BIG-IP設備的變更操作在進行參數(shù)變更，修改系統(tǒng)配置時，建議在ACTIVE設備上進行操作。確認冗余系統(tǒng)的設備是否處于ACTIVE狀態(tài)，方法為：看下圖第二行中顯示的本機的狀 態(tài)；或看BIG-IP的前面板的第二個

18、指示燈Status，綠色代表ACTIVE，黃色代Standby。村日wertlV 5 電Hf Nf g MlQf_R：HQ.uiidAiiE PnifDfiiTlAEi_FafigM Portal邸a 1 1 口 *hr;nrrs r；nr.Jiiurrf?b hnActlvfStanciLx：且匚TIV巳Je a院血仙尸Configsync User：ad mEnfnn卵Stateftil Falaver Mirror Enlxled:Network Fail over Enabl-ed;LSSL A-ocsIorator Fall-over EnabEed:LActive-Acfive M

19、ode Enableif:rFallcver Llnkdawn:FailsafeEnabFed;田u睡r;!Ping (ssctmdfl：口Timcoiut (sCGinil|:Aar：/ Hasar |在ACTIVE設備上做完配置之后，如果確認無誤，點擊如下“Synchronize Configuration 按鈕，即可把本機上的新配置文件同步到對端，如果對端設備故 障更換新設備之后也可以通 過這種方法自動地在對端新設備上生成全套配置。如果想對BIG-IP ACTIVE設備做停機維護，可以首先點擊如下“Force toStandby”按鈕，手動把本機設置為Standby狀態(tài)，然后再退出系統(tǒng)。

20、根據(jù).2服務器的變更維護管理廠家如果想對服務器做變更維護，由于有BIG-IP設備對服務器池做HA，所以不必非要等到夜間 資戶連接很少的時候才退出運行，進行變更操作。料在F5 BIG-IP管理界面中中打開對應的節(jié)點的窗口，在第一行的“Enable Sessions”中 的對勾去掉，并Apply保存配置，該接點就處于Disble”狀態(tài)，此 時，F(xiàn)5停止向該服務器發(fā) 送新的流量。F5當管理員通過下圖監(jiān)視到對應的服務器上現(xiàn)存的連接數(shù)逐漸下降為0時，就 可以安全地把該服務器退出運行，開始變更、停機等維護工作。Connection!Addre&s servicePackets!J1 J:M61.EMm 1

21、M0 030 .CM33.2 M51.CM10-16-74.4 0豹bKInBfts10-15-24.1 074. IMJD0.EM60.CM48.BK26.3雙:M 網(wǎng)枳83.D60. SM 佃.WPackets電 5134 M44. EM 34.7;Password:j 如.r* y y半由 hi 5v *i 如ir*:Jr Admlrabphnriiion禺.血 門血創(chuàng)wi AdriElnBborUma尊EitffWmrwslraljDncucica user name in the list to viw me propmieis or that uir.Level;Retype Pa

22、aswrd:d；|wV-b Rjh Oiil-f1PrtisiR&ad/-AA heFlHmh H AJVi/iVnlRUl | l j| g缸 H;=nrbWnfe NEB角NIIWHM Add UserL ncaf Uss rsadminCLI + Full Web ReBd/UUHteSNMP 管理SNMP管理，我們可以設置通過SNMP把相關信息自動發(fā)送到網(wǎng)管工作站上，包括SNMP管 理和SNMP Trap 的使用，BigIP 支持MIB I, MIB II, Private MIB。CEHtimunl, Cm?J_SFiiip /J WU皿ikdi ling彳 P 崗UEimirSIt

23、i門 2grrliUWKii i-r r.i r* k i. i Im nfi Ml ii冉utHTr叩.EnableClient *，財髭富System InfarmaiiQinLocflJbort: TrapCttnflgurartriIP AdrirosE orAllcw N&iwork Address: Netmask:KE . .curTm Lisi: F |i?nniG omnnynlly： servlet: Sink Trap List： .I Current LBt: rl第五章標準故障診斷流程1 .故障發(fā)生時，首先保存現(xiàn)場故障信息，并將信息保存，以備以后檢查。收集系統(tǒng)Tech

24、 Support信息，在命令行輸入：qkview檢測各臺BIG-IP設備的主備工作狀態(tài)在命令行輸入：b failover show確認兩臺主備負載均衡器工作狀態(tài)，確認當前工作在active狀態(tài)的負載 均衡器，另一臺應 工作在standby狀態(tài)。檢查用戶請求數(shù)量根據(jù)平時收集的正常狀態(tài)用戶請求數(shù)量，分析當前是否遇到攻擊。檢測各臺BIG-IP設備上的日志請參見3.6章通過圖形界面檢查當天的BIG-IP日志，其中System記錄了系統(tǒng)硬件相關信息， BIG-IP Log則記錄了所有BIG-IP配置變更信息，而MonitorLog則記錄了對服務器檢查的情況。 通常，可以通過觀察Monitor日志可以確認

25、所有服務器是否發(fā)生過異常。如果需要檢查前7天內(nèi) 的日 志，則必須使用命令行方式，進入/var/log目錄檢索所查當日的記錄。檢測F5設備的狀況通常情況下，我們可以通過在命令行輸入如下命令，分別獲取相關的F5設備信息:top檢測BIG-IP的CPU和內(nèi)存使用狀況海4CL16.24.241 167x47File Ed it Settings VT Options Tunnels Help1 a =d aver ages! 0. 06.,0. LI0_,0 . US54 procezzes： 1 rurLTting. 53 sleepingCPU states : Ll.BS：. usei-,. L

26、l. 0% ni ce_, 3. system., D. 0 常 i 工世 er if 口 t, 弱.咨 i dl 巳M所如-裂；F2 al;網(wǎng)帛U 5M li r t; 13洲何4瞠M Fr加；E曰MFIDUSEOAHEFBIBICESIZEEES STkTETIMEwcruCPUCOMNAini16722daem on204316E6204K sleep4:410. 33% 0.93%bi gsrnTip d423daem on1602264KT92K sleep0:000. 00% 0.00%ht tp d424laem cmIS02264E792K sleep0:00. cm o.cm

27、ht tpdS30laem cm1802328K7SBK sleep0:000. 00% 0.00%ht tjid831i：=Lt=rri ：in1802328KTS8E sl&ep0:000. 00% 0.00%httlid836laem cm1802340E704K sleep0:00 . 00% 0.00%ht tpd425daem cnLS02E&4ETOOK sleep0;00Q. 00% Cl, 口籃ht tpdF30la&m cm1802316E77BK sleepC:01ci. o.cmht tpil160S5r o : i180416K404K sleep0:000. 00%

28、 0.00%ntp-130rrn：it100T52E1436K sleep0:000. 00% 0.00%Tn：nirLt_TifE2514rcnjt100968K936K sleep0:000. 00% 0.00%bash罪100T52E376K sleepC；DOQ. 00% 0.Q理rio】mt_Ti 玷4L&rcnj t100216K24BK sleep0:00ci. cm o.00%sk1rcnjt100136K1S0K sl&ep0:000. 00% 0.00%Ini t385rcnjt10088E136K sleep0:000. 00% 0.00%ruEpaATi如果需要將top

29、執(zhí)行的結果保存在文件里，可執(zhí)行以下命令top - d 5 |tee /var/tmp/topresults.txt其中的5表示連續(xù)輸出5次結果。iHroot 41 167x47gFile Edit Settings VT Options Tunnels Helpbits s i nc aMay 21 17:10:32InOutC oriTL-4 sec uruls1 IILliltC ijliliTtIG-IF ACTIVELB51M03-1. icbc. com. c 256.0M 403.0M256. 0M 403. 0M 2. 5K 47. OK 43. OK前. 16.24.2:ari

30、y114.0M 184.0M88128. OK23. OK10. 16.24.3:ariy62.0M 103.0M5149. OK9. OK很.低跑.1:any45.0M 63.0M51210. OK9. OK?0. 16.24.4:any33.0M 51.0M60000Ib pool show檢查當前BIG-IP上的服務器組的連接狀況上的連接以及每個對外服務的虛擬服務器的用戶連接數(shù)量5LE51MQ3-1；律SLB51M03-1:#SLB51M03-1SLE51M03-11 pool showFOOL D3R_F00L LB_METHOD round_robiR(cur, mast, Limi

31、t, tot) = CTT, 185, Cl, 2507)(jckti.bits) in = (221299, 269844&S0 out = (2:01475, 425337952)+ MEMBER 10. 16. 24. 1:0ACTIVE, Wour, may, Limit, tot) = (2D, 49, 0, 512JtpoktE.bitE) in = (40376, 4840439Z), out = (35961, 6T2523B4)+ MEMBER 10. 16. 24.2:0ACTIVE, UT(curj eskLimit, tot) = (IS, 5%881)in = (96

32、263, 120420848 ou-t =舊775, 194813680)+ MEMBER 10. IB. 24.3:0ACTIVE, UTour, may, Limit, tot) = C21, 4& 0, 514Jtpcktz.bits) in = (54921, 66127752), out = (5&54, 109288784=)+ MEMBER 10. 16. 24.4:0ACTIVE, UT(curj eskLimit, tot) = (0 4、1 60。)(jckti.bits) in = (29739/ 34B916B8); out = 027069, 539B3104)SLB

33、51M03-1:# |b virtual show檢查當前virtual server虛擬服務器的連接狀況SLB51M03-1:# b virtual showVIRTITAL + 10. 16.24.8(cur,Limit,(pckts, bi ts) in = PASS AM IF: disabledinur 1tct) = (58, IBS, D, 25073+ -+ WILDCARD SERVICEEMkBLEDhw_ac c eler ation none (cur, manLimit, (pckts, bi ts) in =FOOL DSR FOQLMEMBERtot)= 68,

34、185, D, 25073(222108, 270829856), out = C202211 427025568MEMBERMEMBERMEMBER10.IB.24.1 :*(cur jLifnit,(pcktE, bi ts) in =10. 16. 24.(tufj majfj Limit(pcktSj hit,。in ：10. 16. 24. 3:*(cur, m嘰 Limit,(pcktz, bi ts) in =10. IB. 24. 4;*(cur j majtj Limi tj(pckts? bi is) m :UP tot) (40514,UP 頃)= 附珥UP tot)=

35、(5509T,UP tot)=電咀D,48560560X512)out = G6080, 6T4S1560M 0.121024256), out = C8S231, 19594324)16, 46, D,6&329T44Xg 41, 0.C2976T, 34915296XSSL)514)out = 60810, 109563912)600)out = (27093, 54026472(222108, Z70829856), out = C202211 427025568b node monitor show 用于觀察Monitor 對Node點的檢查狀態(tài)第六章系統(tǒng)配置備份及恢復F5的設備配置可

36、以保存為一個后綴為.ucs的文件，以便今后必要時進行系統(tǒng)恢復。該系配兩置個文件系統(tǒng)配置的備份6.1.11命令行方式備到 份 當 前 配 置SLB51MO3-1_200302201025.ucs 這個文件中（文件名由管理員確定）紅色為管理員輸入命令，黑色為系統(tǒng)顯示內(nèi)容SLB51MO3-1:#確認連接到的是SLB51MO3-1 這臺SLB51MO3-1:#configsaveSLB51MO3-1_200302201025.ucs|Saving active configuration.Creating UCS for config save request.SLB51MO3-1: # cd /us

37、r/local/ucsSLB51MO3-1:/usr/local/ucs# lsSLB51MO3-1_200302201025.ucscs_backup.ucs.1cs_backup.ucslast boot.ucs保存在/usr/local/ucs 目錄下請再次確認上一步驟的確產(chǎn)生了SLB51MO3-1_200302201025.ucs 這個文E、嵬口肴英希霞甫SLB51MO3-1:/usr/local/ucs# ftp Trying 9.21.Connected to 9.220 raymond Microsoft FTP Service (Version 5.0). Name (:roo

38、t): ftp331 Anonymous access allowed, send identity (e-mail name) as password.Password:230 Anonymous user loggedin. Remote system type isWindows_NT.ftp bin200 Type set to I.ftp hashHash mark printing on (1024 bytes/hashmark). ftp put SLB51MO3-1_200302201025.ucs采用FTP連接到管理員的工作站（本例 為）采用二進制傳輸文件（BIN格式）顯示傳

39、輸進程 （hash為on）local:傳送系統(tǒng)配置ucs文件到管理員工作#226 Transfer complete.274511 bytes sent in 0.0194 seconds (14139118 bytes/s)ftpled /configLocal directory now /configftp put bigip.confftpput bigip_base.confftpbye221SLB51MO3-1:/usr/local/ucs#從/usr/local/ucs目錄切換到/config目 錄備份bigip.conf文件備份bigip_base.conf文件 退出ftp進程

40、一系統(tǒng)配置的恢復6.2.1命令行方式同上，管理員工作站采用網(wǎng)絡連接到BIG-IP上，同時管理員工作站必須配置有FTP服務 器。具體操作如下：紅色為管理員輸入命令，黑色為系統(tǒng)顯示內(nèi)容SLB51MO3-1:#確認連接到的是這臺BIG-IP設備SLB51MO3-1:# cd /varSLB51MO3-1:/var#cd /tmp進入/var/tmp目錄以避免 直接傳 送 ucs文件到 /usr/local/ucs目錄覆蓋本地SLB51MO3-1:/var/tmp# ftp Trying .Connected to 9.220 raymond Microsoft FTP Service (Versio

41、n 5.0). Name (9:root): ftp331 Anonymous access allowed, send identity (e-mail name) as password.Password:230 Anonymous user loggedin. Remote system type is Windows_NT.ftp ls227 Entering Passive Mode (9,4,55). 125 Data connection already open; Transfer starting.02-19-0410:24AM274511SLB51MO3-1_2003022

42、01025.ucs02-19-0410:27AM274482SLB51MO3-1_200302200930.ucs226 Transfer complete.ftp bin200 Type set to I.的系統(tǒng)uc甘T文連接管理員工作站查看目錄并確認存在備份 系統(tǒng)配置ucs文 件SLB51MO3-1_200302201025.ucs采用二進制傳輸文件（BIN格 式）顯示傳輸進程（hash為on）1 I-rm 口 i- /Z-、L /、乂 K /口 ac-t 口XISLB51MO3-1:/var/tmp# lsSLB51MO3-1_200302201025.ucsfinish.logvi.recover/從管理員工作站傳送系統(tǒng)配置 確認巳取到系統(tǒng)配置ucs文件使用SLB51MO3-1:/tmp#b configSLB51MO3-1_200302201025.ucsCreating UCS for config save request. Passwords restored.Loaded base configuration from /