日期：2015-12-24 點(diǎn)擊: 關(guān)鍵詞：H3C交換機(jī)4核心節(jié)點(diǎn)IRF2虛擬化下檢測機(jī)制
H3C交換機(jī)4核心節(jié)點(diǎn)IRF2虛擬化下檢測機(jī)制——背景介紹：項(xiàng)目中涉及4臺(tái)核心交換機(jī)做虛擬化，實(shí)施中發(fā)現(xiàn)不同的檢測方式在腦裂情況下存活設(shè)備并不是一樣的現(xiàn)象，在BFD監(jiān)測、萬兆業(yè)務(wù)單板的情況下，一旦主master節(jié)點(diǎn)主業(yè)務(wù)單板故障，則業(yè)務(wù)會(huì)全部中斷、所有存活設(shè)備均會(huì)抑制端口，必須采用lacp mad方式監(jiān)測，以保留腦裂后存活節(jié)點(diǎn)多的一組設(shè)備。
1.IRF介紹
H3C 交換機(jī)支持IRF2功能，可將多臺(tái)設(shè)備虛擬化為一臺(tái)邏輯設(shè)備，可簡化管理并提高可靠性。
IRF是利用設(shè)備普通的萬兆接口建立的，某些特殊性況下(如物理線路故障)會(huì)導(dǎo)致IRF設(shè)備之間通信中斷，一個(gè)IRF變成多個(gè)新的IRF。這些IRF擁有相同的IP地址等三層配置，會(huì)引起地址沖突，導(dǎo)致故障在網(wǎng)絡(luò)中擴(kuò)大。為了提高系統(tǒng)的可用性，當(dāng)IRF分裂時(shí)我們就需要一種機(jī)制，能夠檢測出網(wǎng)絡(luò)中同時(shí)存在多個(gè)IRF，并進(jìn)行相應(yīng)的處理，盡量降低IRF分裂對(duì)業(yè)務(wù)的影響。MAD(Multi-ActiveDetection，多Active檢測)就是這樣一種檢測和處理機(jī)制。
2.BFD和LACP檢測原理
BFD MAD檢測原理
BFD MAD檢測是通過BFD協(xié)議來實(shí)現(xiàn)的。要使BFD MAD檢測功能正常運(yùn)行，除在三層接口下使能BFD MAD檢測功能外，還需要在該接口上配置MAD IP地址。MAD IP地址與普通IP地址不同的地方在于：MAD IP地址與成員設(shè)備是綁定的，IRF中的每個(gè)成員設(shè)備上都需要配置，且所有成員設(shè)備的MAD IP必須屬于同一網(wǎng)段。
當(dāng)IRF正常運(yùn)行時(shí)，只有主設(shè)備上配置的MAD IP地址生效，從設(shè)備上配置的MAD IP地址不生效，BFD會(huì)話處于down狀態(tài);(使用display bfd session命令查看BFD會(huì)話的狀態(tài)。如果Session State顯示為Up，則表示激活狀態(tài);如果顯示為Down，則表示處于down狀態(tài))
當(dāng)IRF分裂形成多個(gè)IRF時(shí)，不同IRF中主設(shè)備上配置的MADIP地址均會(huì)生效，BFD會(huì)話被激活，此時(shí)會(huì)檢測到多Active沖突。
沖突處理原則：對(duì)于BFD MAD，與ARP MAD、ND MAD檢測處理原則相同，沖突處理會(huì)直接讓主設(shè)備成員編號(hào)小的IRF繼續(xù)正常工作;其它IRF遷移到Recovery狀態(tài)。
LACP MAD檢測原理
LACP MAD檢測是通過擴(kuò)展LACP協(xié)議報(bào)文內(nèi)容實(shí)現(xiàn)的，即在LACP協(xié)議報(bào)文的擴(kuò)展字段內(nèi)定義新的TLV(Type/Length/Value，類型/長度/值)數(shù)據(jù)域——用于交互IRF的DomainID(域編號(hào))和ActiveID(等于主設(shè)備的成員編號(hào))及成員數(shù)量。
使能LACP MAD檢測后，成員設(shè)備通過LACP協(xié)議報(bào)文和其它成員設(shè)備交互DomainID和ActiveID信息。
當(dāng)成員設(shè)備收到LACP協(xié)議報(bào)文后，先比較DomainID。如果DomainID相同，再比較ActiveID;如果DomainID不同，則認(rèn)為報(bào)文來自不同IRF，不再進(jìn)行MAD處理。
如果ActiveID相同，則表示IRF正常運(yùn)行，沒有發(fā)生多Active沖突;如果ActiveID值不同，則表示IRF分裂，檢測到多Active沖突。
沖突處理原則：對(duì)于LACP MAD檢測，沖突處理會(huì)先比較兩個(gè)IRF中成員設(shè)備的數(shù)量：數(shù)量多的IRF繼續(xù)正常工作;數(shù)量少的遷移到Recovery狀態(tài)(即禁用狀態(tài));如果成員數(shù)量相等，則主設(shè)備成員編號(hào)小的IRF繼續(xù)正常工作，其它IRF遷移到Recovery狀態(tài)。為減小當(dāng)IRF分裂對(duì)網(wǎng)絡(luò)的影響，當(dāng)只有兩個(gè)成員設(shè)備組成IRF時(shí)，建議您配置成員編號(hào)小的成員設(shè)備為Master。
3.核心區(qū)域IRF拓?fù)鋱D
4.核心交換IRF互聯(lián)端口
5.核心交換機(jī)規(guī)劃
交換機(jī)1/2/3/4 IRF端口都是采用萬兆端口建立鄰居關(guān)系，BFD檢測采用的千兆端口互聯(lián)，核心交換機(jī)優(yōu)先級(jí)設(shè)置規(guī)則：1號(hào)交換機(jī)對(duì)應(yīng)20，2號(hào)交換機(jī)對(duì)應(yīng)15,3號(hào)交換機(jī)對(duì)應(yīng)10,4號(hào)交換機(jī)對(duì)應(yīng)5，虛擬組內(nèi)的交換機(jī)根據(jù)設(shè)置的優(yōu)先級(jí)進(jìn)行master和slave選舉，優(yōu)先級(jí)高的將會(huì)成為虛擬組內(nèi)的master機(jī)器，在虛擬組合并過程中將根據(jù)設(shè)備的成員編號(hào)進(jìn)行選舉，成員編號(hào)低的將選舉成為虛擬組內(nèi)存活設(shè)備。
6.核心萬兆單板處理過程
原來核心區(qū)域部署方式采用BFD MAD檢測，在模擬故障測試過程中，將核心交換機(jī)1的萬兆板卡拔掉后，交換機(jī)1和交換機(jī)2/3/4IRF端口失效，鄰居關(guān)系中斷。由于BFD檢測采用的是千兆板卡互聯(lián)，所以交換機(jī)1和交換機(jī)2/3/4之間BFD檢測是正常的，但是萬兆板卡故障后IRF鄰居關(guān)系卻失效了，BFD檢測發(fā)現(xiàn)IRF鄰居出現(xiàn)異常了，交換機(jī)1優(yōu)先級(jí)高會(huì)成為master，成員編號(hào)最低會(huì)成為存活設(shè)備。反之交換機(jī)2/3/4 被遷移為Recovery狀態(tài)，業(yè)務(wù)無法通過交換機(jī)1的萬兆板卡傳輸(萬兆板卡故障)，同時(shí)交換機(jī)2/3/4處于Recovery狀態(tài)無法傳輸萬兆業(yè)務(wù)，造成亦莊和東壩數(shù)據(jù)中心萬兆業(yè)務(wù)全部中斷。
目前核心區(qū)域部署方式改為LACP MAD檢測，LACP MAD檢測和BFD MAD處理原則不同，LACP MAD沖突處理會(huì)先比較兩個(gè)IRF中成員設(shè)備的數(shù)量：數(shù)量多的IRF繼續(xù)正常工作;數(shù)量少的遷移到Recovery狀態(tài)(即禁用狀態(tài));如果成員數(shù)量相等，則主設(shè)備成員編號(hào)小的IRF繼續(xù)正常工作，其它IRF遷移到Recovery狀態(tài)。
當(dāng)模擬核心交換機(jī)1萬兆板卡故障時(shí)，LACP MAD同樣會(huì)檢測到1和2/3/4之間的IRF鄰居關(guān)系失效。選舉方式會(huì)先比較成員設(shè)備數(shù)量，2/3/4交換機(jī) IRF鄰居關(guān)系是正常的并且設(shè)備成員數(shù)量多會(huì)繼續(xù)存活下去，相反交換機(jī)1只有一臺(tái)存活被遷移為Recovery狀態(tài)。交換機(jī)2/3/4會(huì)形成一個(gè)虛擬組并正常轉(zhuǎn)發(fā)數(shù)據(jù)和處理業(yè)務(wù)。交換機(jī)1被Recovery后，交換機(jī)2優(yōu)先級(jí)最高選舉成為master。
7.IRF注意事項(xiàng)
當(dāng)IRF分裂后，不要在存活的交換機(jī)上敲save命令，一旦保存配置會(huì)將分裂的狀態(tài)寫入設(shè)備，將丟失掉分裂出去的設(shè)備配置。
當(dāng)虛擬組中的設(shè)備萬兆板卡出現(xiàn)故障時(shí)，盡量將故障設(shè)備斷電將萬兆板卡更換完畢后再啟動(dòng)設(shè)備，這樣分裂出去的交換機(jī)會(huì)重新加入虛擬組中，并且不會(huì)與現(xiàn)有的虛擬組設(shè)備進(jìn)行競爭。如果在線更換板卡，交換機(jī)IRF鄰居將會(huì)以新的角色與現(xiàn)有的虛擬組以合并的方式進(jìn)行競選，競選失敗的交換機(jī)會(huì)重啟并成為slave。
來源：互聯(lián)網(wǎng)
企業(yè)通訊