問題描述（故障現(xiàn)象）

某ZXMP S385設(shè)備13#SEE單板配置開通了一條動(dòng)環(huán)的etree以太網(wǎng)業(yè)務(wù)，該以太網(wǎng)業(yè)務(wù)配置了48個(gè)葉子節(jié)點(diǎn)，某天突然出現(xiàn)該SEE單板承載的以太網(wǎng)動(dòng)環(huán)業(yè)務(wù)不通。

原因分析

SEE單板以太網(wǎng)業(yè)務(wù)不通的主要原因一般如下：

1數(shù)據(jù)配置問題，尤其是UNI、NNI口的帶寬設(shè)置，是很多人配置容易忘記的地方。

2對接問題以及以太網(wǎng)內(nèi)部環(huán)回引發(fā)廣播風(fēng)暴導(dǎo)致異常。

由于本次故障是在設(shè)備以太網(wǎng)業(yè)務(wù)開通之后，一般可以排除數(shù)據(jù)配置問題，由于以太網(wǎng)業(yè)務(wù)異常，很多是對接問題或者是內(nèi)部環(huán)回引發(fā)廣播風(fēng)暴導(dǎo)致異常。

問題2是故障排查的關(guān)鍵。

解決方案

對于以太網(wǎng)不通的問題進(jìn)行了逐個(gè)排查：

1以太網(wǎng)業(yè)務(wù)相關(guān)告警性能排查，沒有發(fā)現(xiàn)異常的告警性能。

2檢查以太網(wǎng)數(shù)據(jù)配置，SEE單板以太網(wǎng)業(yè)務(wù)配置很簡單，就是一個(gè)樹形業(yè)務(wù)配置。由于是整個(gè)樹形業(yè)務(wù)都異常，這和各葉子節(jié)點(diǎn)配置無關(guān)。SEE單板配置檢查沒有發(fā)現(xiàn)異常。

從以上的排查來看，SEE的數(shù)據(jù)配置沒有什么問題，初步判斷可能是對接問題或者是廣播風(fēng)暴導(dǎo)致業(yè)務(wù)異常。

需要到現(xiàn)場進(jìn)行排查。為了排查故障，首先找客戶要來動(dòng)環(huán)采集模塊的IP配置。

由于該站點(diǎn)動(dòng)環(huán)業(yè)務(wù)很多，分別掛在三塊以太網(wǎng)單板上，現(xiàn)場將13#SEE單板和14#SEE單板網(wǎng)線對調(diào)，13#SEE單板的業(yè)務(wù)依舊不通，排除了對接的問題。因?yàn)閾Q了網(wǎng)線后，14#SEE單板的業(yè)務(wù)是正常的。

于是把在電腦上設(shè)置IP和采集模塊在同一個(gè)段內(nèi)，ping采集模塊，發(fā)現(xiàn)異常，采集模塊可以ping通，但是有很大的丟包。連續(xù)ping了三個(gè)不同的采集模塊，均是同樣的現(xiàn)象。

從ping采集模塊可以ping同來看，說明以太網(wǎng)數(shù)據(jù)配置是正常的，從不時(shí)出現(xiàn)丟包，大致可以判斷可能是該以太網(wǎng)業(yè)務(wù)出現(xiàn)廣播風(fēng)暴導(dǎo)致。

出現(xiàn)光播風(fēng)暴一般是UNI、NNI口出現(xiàn)環(huán)回，但是樹形業(yè)務(wù)只有一個(gè)UNI口，基本上可以判斷是NNI口出現(xiàn)環(huán)回。于是在VCG組配置界面，逐個(gè)刪除VCG組配置，觀察電腦PING包情況，發(fā)現(xiàn)當(dāng)刪除VCG組40時(shí)，電腦ping包恢復(fù)正常，不再出現(xiàn)丟包現(xiàn)象。于是將其他刪除的VCG組補(bǔ)齊，繼續(xù)觀察，沒有在出現(xiàn)丟包，于是將動(dòng)環(huán)業(yè)務(wù)網(wǎng)線恢復(fù)，經(jīng)客戶確認(rèn)動(dòng)環(huán)業(yè)務(wù)恢復(fù)。

正常運(yùn)行的以太網(wǎng)業(yè)務(wù)怎么會(huì)突然內(nèi)部NNI口環(huán)回業(yè)務(wù)不通了呢，于是和客戶溝通近期做了什么操作，客戶反饋近期由于接入環(huán)中一個(gè)設(shè)備退網(wǎng)，客戶將兩邊光路打通，之后動(dòng)環(huán)就出現(xiàn)異常了。客戶在拆除該退網(wǎng)設(shè)備時(shí)，并沒有刪除對應(yīng)的時(shí)隙等數(shù)據(jù)。問題清楚了，由于客戶一個(gè)設(shè)備退網(wǎng)，而這個(gè)退網(wǎng)設(shè)備是到13#SEE單板以太網(wǎng)業(yè)務(wù)的一個(gè)葉子節(jié)點(diǎn)，設(shè)備退網(wǎng)后，本應(yīng)該刪除這個(gè)葉子節(jié)點(diǎn)，但是客戶沒有刪除，導(dǎo)致這個(gè)葉子節(jié)點(diǎn)內(nèi)部環(huán)回，從而影響了業(yè)務(wù)。