S5700下挂多(duō)台服務器(qì)和(hé)PC，PC-ping服務器(qì)發生(shēng)不規律丢包
2014/11/25 11:47:07點擊：
問題描述
客戶的S5700交換機直連下挂多(duō)台服務器(qì)和(hé)一台測試用PC，PC去ping服務器(qì)，出現部分服務器(qì)丢包的情況，且丢包服務器(qì)随接口變化而變化，ping丢包的過程還(hái)不時(shí)出現接口down/up的現象。
處理(lǐ)過程
懷疑丢包和(hé)接口反複UP/DOWN有(yǒu)關。
S1—确認客戶設備型号、版本、拓撲、故障現象：S5700-SI交換機；V2R5版本；PC（百兆網卡）和(hé)10台服務器(qì)（百兆/千兆自适應）均和(hé)S5700千兆電(diàn)口直連；現象如上(shàng)所述；
S2—查看接口狀态，自協商模式，均為1000M，全雙工；STP狀态變化會(huì)導緻接口狀态變化，建議客戶查看STP和(hé)接口收斂狀态。全局下去使能STP，現象依舊(jiù)；
S3—告知客戶display logbuffer和(hé)dis diag查看信息，看到有(yǒu)多(duō)個(gè)接口反複UP/DOWN，但(dàn)是沒有(yǒu)其他的信息；
S4—display interface xxx查看各個(gè)接口的統計(jì)信息，有(yǒu)大(dà)量的inputerror和(hé)CRC校(xiào)驗錯誤，但(dàn)是由于不能确定統計(jì)的時(shí)間(jiān)段，讓客戶reset counter 重新統計(jì)；一天後，查看客戶的diag信息，接口依舊(jiù)有(yǒu)大(dà)量的inputerror和(hé)CRC校(xiào)驗錯誤，這個(gè)和(hé)線纜質量或對端設備有(yǒu)關系，建議客戶更換線纜試試；
S5—所有(yǒu)線纜都更換成超五類線，問題現象依舊(jiù)；懷疑是服務器(qì)的問題；
S6—讓客戶PC直連各個(gè)服務器(qì)ping，兩端都自動協商成了100M全雙工，部分服務器(qì)長ping一千個(gè)包隻出現一個(gè)丢包，部分服務器(qì)出現較多(duō)丢包；PC直連57，兩端協商成了100M全雙工，長ping沒有(yǒu)出現丢包；至此排查出部分服務器(qì)的網卡确實有(yǒu)明(míng)顯的問題，建議客戶更換。然後讓客戶嘗試調換單個(gè)接口下挂的服務器(qì)，在允許的條件下隻挂一台服務器(qì)和(hé)PC，還(hái)是出現丢包；
S7—至此，懷疑還(hái)是客戶的服務器(qì)網卡和(hé)交換機協商有(yǒu)問題。建議客戶找了一台千兆網卡的pc接到5700的各個(gè)端口測試，均協商為1000M全雙工模式，且長ping沒有(yǒu)丢包的現象，端口狀态也一直是up/up。
S8 —最後，受S6中pc和(hé)服務器(qì)協商100M不丢包啓發，将交換機和(hé)服務器(qì)均手動強制(zhì)為100M全雙工，PC再長ping服務器(qì)，沒有(yǒu)再出現丢包了。
S8 —由此可(kě)見，當交換機和(hé)服務器(qì)自動協商全雙工1000M時(shí)，丢包；手動強制(zhì)全雙工100M時(shí)，正常，且結合千兆網卡的pc接到5700的各個(gè)端口測試，均協商為1000M全雙工模式，且長ping沒有(yǒu)丢包，排查出可(kě)能是服務器(qì)的網卡協商1000M有(yǒu)問題導緻交換機端口出現反複up/down，建議客戶更換網卡。
S1—确認客戶設備型号、版本、拓撲、故障現象：S5700-SI交換機；V2R5版本；PC（百兆網卡）和(hé)10台服務器(qì)（百兆/千兆自适應）均和(hé)S5700千兆電(diàn)口直連；現象如上(shàng)所述；
S2—查看接口狀态，自協商模式，均為1000M，全雙工；STP狀态變化會(huì)導緻接口狀态變化，建議客戶查看STP和(hé)接口收斂狀态。全局下去使能STP，現象依舊(jiù)；
S3—告知客戶display logbuffer和(hé)dis diag查看信息，看到有(yǒu)多(duō)個(gè)接口反複UP/DOWN，但(dàn)是沒有(yǒu)其他的信息；
S4—display interface xxx查看各個(gè)接口的統計(jì)信息，有(yǒu)大(dà)量的inputerror和(hé)CRC校(xiào)驗錯誤，但(dàn)是由于不能确定統計(jì)的時(shí)間(jiān)段，讓客戶reset counter 重新統計(jì)；一天後，查看客戶的diag信息，接口依舊(jiù)有(yǒu)大(dà)量的inputerror和(hé)CRC校(xiào)驗錯誤，這個(gè)和(hé)線纜質量或對端設備有(yǒu)關系，建議客戶更換線纜試試；
S5—所有(yǒu)線纜都更換成超五類線，問題現象依舊(jiù)；懷疑是服務器(qì)的問題；
S6—讓客戶PC直連各個(gè)服務器(qì)ping，兩端都自動協商成了100M全雙工，部分服務器(qì)長ping一千個(gè)包隻出現一個(gè)丢包，部分服務器(qì)出現較多(duō)丢包；PC直連57，兩端協商成了100M全雙工，長ping沒有(yǒu)出現丢包；至此排查出部分服務器(qì)的網卡确實有(yǒu)明(míng)顯的問題，建議客戶更換。然後讓客戶嘗試調換單個(gè)接口下挂的服務器(qì)，在允許的條件下隻挂一台服務器(qì)和(hé)PC，還(hái)是出現丢包；
S7—至此，懷疑還(hái)是客戶的服務器(qì)網卡和(hé)交換機協商有(yǒu)問題。建議客戶找了一台千兆網卡的pc接到5700的各個(gè)端口測試，均協商為1000M全雙工模式，且長ping沒有(yǒu)丢包的現象，端口狀态也一直是up/up。
S8 —最後，受S6中pc和(hé)服務器(qì)協商100M不丢包啓發，将交換機和(hé)服務器(qì)均手動強制(zhì)為100M全雙工，PC再長ping服務器(qì)，沒有(yǒu)再出現丢包了。
S8 —由此可(kě)見，當交換機和(hé)服務器(qì)自動協商全雙工1000M時(shí)，丢包；手動強制(zhì)全雙工100M時(shí)，正常，且結合千兆網卡的pc接到5700的各個(gè)端口測試，均協商為1000M全雙工模式，且長ping沒有(yǒu)丢包，排查出可(kě)能是服務器(qì)的網卡協商1000M有(yǒu)問題導緻交換機端口出現反複up/down，建議客戶更換網卡。
根因
當交換機和(hé)服務器(qì)自動協商全雙工1000M時(shí)，丢包；手動強制(zhì)全雙工100M時(shí)，正常，且結合千兆網卡的pc接到5700的各個(gè)端口測試，均協商為1000M全雙工模式，且長ping沒有(yǒu)丢包，将交換機和(hé)服務器(qì)均手動強制(zhì)為100M全雙工，PC再長ping服務器(qì)，沒有(yǒu)再出現丢包了。
排查出可(kě)能是服務器(qì)的網卡協商1000M有(yǒu)問題導緻交換機端口出現反複up/down，建議客戶更換網卡。
排查出可(kě)能是服務器(qì)的網卡協商1000M有(yǒu)問題導緻交換機端口出現反複up/down，建議客戶更換網卡。
解決方案
将交換機和(hé)服務器(qì)均手動強制(zhì)為100M全雙工，PC再長ping服務器(qì)，沒有(yǒu)再出現丢包了。
排查出可(kě)能是服務器(qì)的網卡協商1000M有(yǒu)問題導緻交換機端口出現反複up/down，建議客戶更換網卡。
排查出可(kě)能是服務器(qì)的網卡協商1000M有(yǒu)問題導緻交換機端口出現反複up/down，建議客戶更換網卡。
建議與總結
涉及我方華為設備對接常用處理(lǐ)思路：
光口不UP 處理(lǐ)思路：
1. display interface xxx看接口是否shutdown；
2 .是否Error-down (57,93,CE交換機等)；
3 .是否是華為認證光模塊；
4 .查看光功率display transceiver interface xxx verbose查看收發光功率是否在正常範圍；
5 .兩端協商模式是否自協商，兩端是否協商一緻的；
6 .自環環回測試，看是否光模塊的故障。若能up，則可(kě)以确定設備和(hé)光模塊沒有(yǒu)問題，問題可(kě)能出在對方設備上(shàng)或者光鏈路上(shàng)；
7. 兩端光模塊數(shù)據要相同，例如波長等；
8 .光纖和(hé)光模塊的單模多(duō)模要對應一緻；
9 .替換光模塊測試；
10.個(gè)别廠家(jiā)的設備跟我司設備互連可(kě)能自協商不能link up，這時(shí)将兩端端口都嘗試設置成強制(zhì)方式嘗試；
11.建議更換光模塊；
光口不UP 處理(lǐ)思路：
1. display interface xxx看接口是否shutdown；
2 .是否Error-down (57,93,CE交換機等)；
3 .是否是華為認證光模塊；
4 .查看光功率display transceiver interface xxx verbose查看收發光功率是否在正常範圍；
5 .兩端協商模式是否自協商，兩端是否協商一緻的；
6 .自環環回測試，看是否光模塊的故障。若能up，則可(kě)以确定設備和(hé)光模塊沒有(yǒu)問題，問題可(kě)能出在對方設備上(shàng)或者光鏈路上(shàng)；
7. 兩端光模塊數(shù)據要相同，例如波長等；
8 .光纖和(hé)光模塊的單模多(duō)模要對應一緻；
9 .替換光模塊測試；
10.個(gè)别廠家(jiā)的設備跟我司設備互連可(kě)能自協商不能link up，這時(shí)将兩端端口都嘗試設置成強制(zhì)方式嘗試；
11.建議更換光模塊；
- 上(shàng)一篇：一般場(chǎng)景下防火(huǒ)牆推薦配置哪些(xiē)攻擊防範 2014/11/28
- 下一篇：S5700光口對接不UP 2014/11/25