亮燈卻斷網(wǎng)？車間停擺真相太奇葩！一次上門排查揪出兩個“隱形兇手”

“狂人，快來救救急！客戶的網(wǎng)絡(luò)老是斷，今天是車間突然斷網(wǎng)，生產(chǎn)線都停了！”

一大早接到電信協(xié)同排查的電話，語氣里滿是焦灼。要知道車間網(wǎng)絡(luò)一旦中斷，掃碼入庫、設(shè)備聯(lián)網(wǎng)監(jiān)控全得停擺，每耽誤一分鐘都是真金白銀的損失。

掛了電話，我們立刻帶齊工具趕去現(xiàn)場，路上還在復(fù)盤客戶之前提到的一個細(xì)節(jié)：幾個月來辦公室經(jīng)常會斷網(wǎng)，但刷新幾次又能恢復(fù)，本以為是小毛病沒當(dāng)回事，沒想到今天車間直接“罷工”，而且怎么折騰都連不上。

第一重隱患：藏在IP里的“小錯誤”

到了現(xiàn)場先從“老問題”查起——既然偶爾斷網(wǎng)且刷新能恢復(fù)，大概率是網(wǎng)絡(luò)配置問題或者設(shè)備性能問題。

交換機(jī)是傻瓜交換機(jī)，那就沒什么好看的了，但是網(wǎng)絡(luò)接口的燈，怎么感覺那么怪呢？

不管了，先看路由器吧，剛登錄WEB界面，一眼就看到了問題：子網(wǎng)掩碼255.255.255.0。

不可能，絕對不可能，電信絕不會這么大方，直接給一整段公網(wǎng)IP？那不是天方夜譚么？

抬頭看了一眼光貓，果然應(yīng)該是255.255.255.252，迅速修改后，這個垃圾路由還不立即生效，還非得重啟一下。

重啟后，上網(wǎng)正常，暫時也沒有出現(xiàn)需要刷新的故障現(xiàn)象，但是，由于時間還短，未必就不會再出現(xiàn)同樣的故障現(xiàn)象了，也許還有其他問題，還沒排查到。

但這個時候，更急的顯然是車間的網(wǎng)絡(luò)，那就繼續(xù)排查，看看究竟是什么問題？

第二重奇葩：亮著燈的“壞零件”

到車間后，筆記本電腦接入交換機(jī)，順利獲取到IP，ping網(wǎng)關(guān)能通，ping外網(wǎng)卻完全超時。

tracert -d 某網(wǎng)址。能解析出IP，也能走到外網(wǎng)去，看似正常，但是打開瀏覽器，無法上網(wǎng)。

怪，真怪，全是傻瓜交換機(jī)，既然有了IP，ping網(wǎng)關(guān)也能通，tracert 都出去了，憑什么不能上網(wǎng)？

跳過交換機(jī)，筆記本電腦直插光纖收發(fā)器，故障還是一樣，但又不太一樣：IP正常獲取到，ping網(wǎng)關(guān)也能通，但是tracert出不去了。

觀察光纖收發(fā)器，這個燈的閃爍頻率，怎么看就怎么怪，那重啟光纖收發(fā)器吧。

tracert出去了幾跳，后面立即不行了，但是ping網(wǎng)關(guān)的窗口沒關(guān)，除了重啟的時候斷了幾個包，后面沒掉過，一直是通的狀態(tài)。

真是怪了，算了，不折騰了，換光纖收發(fā)器吧。

筆記本電腦瞬間恢復(fù)了網(wǎng)絡(luò)，把交換機(jī)連上，車間的生產(chǎn)設(shè)備也陸續(xù)恢復(fù)了聯(lián)網(wǎng)！原來問題真的出在光纖收發(fā)器上，沒想到啊，這玩意兒居然“裝死”都這么逼真。

復(fù)盤：兩個故障給我們的警示

復(fù)盤這次的排查經(jīng)歷，兩個故障點(diǎn)其實(shí)都藏著小教訓(xùn)：

• 固定IP配置別大意：很多人覺得填對IP就行，忽略了子網(wǎng)掩碼、網(wǎng)關(guān)這些“配套設(shè)置，一定要和網(wǎng)絡(luò)服務(wù)商確認(rèn)準(zhǔn)確的配置參數(shù)，避免因小錯誤導(dǎo)致間歇性斷網(wǎng)。

• 別被硬件指示燈“騙了”：指示燈亮不代表設(shè)備完全正常，像這次的光纖收發(fā)器，可能是內(nèi)部光電轉(zhuǎn)換模塊有故障，更換后，機(jī)房交換機(jī)的燈，看著也正常了。

最后想問大家：你們在工作中遇到過哪些“燈亮卻故障”的奇葩設(shè)備問題？歡迎在評論區(qū)分享你的排查經(jīng)歷～ 覺得有用的話，別忘了點(diǎn)贊收藏，轉(zhuǎn)發(fā)給身邊搞IT運(yùn)維的朋友！

關(guān)注《IT狂人日志》，下次分享更多網(wǎng)絡(luò)排查的實(shí)用技巧！