中低端交换机常见故障实例分析

日期:2013.
3.
15杭州华三通信技术有限公司版权所有,未经授权不得使用与传播熟悉网络故障的排查应急处理流程熟悉常用的排查手段熟悉常见故障的排查案例掌握基本维护命令课程目标学习完本课程,您应该能够:网络故障的应急处理流程与规范系统资源故障处理方法硬件接口故障处理方法转发异常问题处理方法其他常见故障处理方法常用基本维护命令目录www.
h3c.
com3网络故障应急处理原则重要业务故障应以恢复业务为第一目标排查故障及业务恢复的相关动作应该不引入新的问题,并且操作可回退;网络架构设计时要考虑冗余性,以便在故障时快速切换到备份设备或线路上应建立自动化的网络管理平台,实时监控网络设备运行状态,重要事件及时通知运维人员应建立故障应急处理与上报机制,定期进行故障应急演练以提高应急处理能力故障恢复时应先确定故障设备,并基本判断故障部位,以防止误动作导致故障影响的扩大故障恢复后应观察2小时以上确认业务无异常www.
h3c.
com4故障原因分类硬件原因:主要指导致故障的原因是硬件损坏或硬件缺陷等.
软件原因:主要指导致故障的原因是产品软件设计考虑不周全、代码实现错误等软件缺陷.
其它原因:除产品质量或客户原因外的导致故障的原因,如合作方或我方工程师方案设计不合理、配置错误、操作不规范等.
外界原因:主要指不按流程规范操作、违反日常维护建议、在已有明确资料指导下数据配置错误或误操作、局方提供的设备配套设施(包括与我司设备对接的其他厂商设备、电源系统、机房环境、地线、光纤/电缆系统等)问题、无法抗拒的自然力(如洪水、火灾或强烈雷击)造成的故障,或理解有误.
www.
h3c.
com5问题解决方法分类根本解决办法通过更换备件,升级版本和补丁,更换网络组网和规划,完全彻底的解决问题规避解决办法故障本身没有解决,但是通过其他手段规避了问题,确保故障不再出现出现问题时,应首先采用能够快速恢复业务的解决办法,例如先实施规避解决办法,最后再实施根本解决办法www.
h3c.
com6规避解决的具体方法(一)Reset协议如果某一个端口上的业务异常,但是端口上没有错包,可以执行resetarpinterface命令重新学习这个端口上的arp如果设备上的业务异常,并且怀疑只跟路由协议相关,那么可以通过reset路由协议来恢复,注意reset路由协议可能会造成整个设备的所有路由中断更换端口如果确认端口异常,那么可以通过更换光纤,光模块来检查是否可以恢复,仍然不能恢复,请立即切换业务端口到其他单板上的备用链路恢复业务www.
h3c.
com7规避解决的具体方法(二)整机掉电重启如果所有端口都存在业务异常,并且无法确定故障所在,或者通过以上手段都无法恢复业务,那么在有备用设备或者备用链路的情况下,可以关闭设备电源,然后再打开,将整机断电后重启,检查故障是否消除注意掉电重启将导致整机的业务都会受到影响掉电重启之前,确认已经收集相关信息或者备份相关配置网络故障的应急处理流程与规范系统资源故障处理方法硬件接口故障处理方法转发异常问题处理方法其他常见故障处理方法常用基本维护命令目录www.
h3c.
com9H3Cconfidential系统资源故障处理方法第一节CPU占用率异常第二节内存占用率异常第三节电源异常故障第四节风扇异常故障第五节环境温度异常www.
h3c.
com10CPU占用率异常-定位思路(1)STEP1:确认哪个任务占用CPU高[h3c-hidecmd]displaycpu-usagetaskslot1(UnderHiddenView)=====CurrentCPUusageinfo=====CPUUsageStat.
Cycle:9(Second)CPUUsage:62%CPUUsageStat.
Time:2000-04-2614:07:55CPUUsageStat.
Tick:0x77(CPUTickHigh)0x395fbdec(CPUTickLow)ActualStat.
Cycle:0x0(CPUTickHigh)0x26b3bf13(CPUTickLow)TaskNameCPURuntime(CPUTickHigh/CPUTickLow)VIDL38%0/f0ab5a4L2X08%0/375bed9bLK04%0/1e56eaeL2X18%0/37b7e68FMCK1%0/6c62b6T_ST0%0/79cb5bRX10%0/1444caCPU利用率,VIDL任务占用率高是正常的,是空任务.
常见的:FMCK:实时检测是哪种光模块插入.
Brx1:CPU收包的.
L2X1:从硬件地址表里边读取地址的.
www.
h3c.
com11CPU占用率异常-定位思路(2)STEP2:根据任务进一步确认诱发CPU高的原因方法1:结合其他手段、查看交换机上非正常的信息.
常见的情况:(1)CPU报文非常多,可能有攻击报文的情况.
(2)配置超规格.
(3)其他.
方法2:查看占用CPU时间长任务的调用栈反馈给开发(最后采用的方法)-[H3C-hidecmd]displaytask124slot1Taskname:RDSTaskPLATIndex:124TaskOSIndex:0x803c0800Taskpriority:100TaskStatus:eventblockLastruntime(CPUTick):0x0(high)0x2276(low)StackInformation:0x802319480x802364500x8023850cwww.
h3c.
com12CPU占用率异常-查看CPU报文统计的方法(1)STEP1:查看上CPU报文统计数据[H3C-diagnose]debugrxtxshow10RxDv:Dv=4,Dvhead=0x163d2308,Dvtail=0x163d3748,token=0,Pps=0TxDv:Dv=0,Dvactive=0x0,Dvfree=0x17b1bb98,Dvfreecnt=1Intr:Desc=989890,Chain=330224,Tx=33,Rx=1320769Cos[0]=0Cos[1]=0Cos[2]=0Cos[3]=0Cos[4]=0Cos[5]=0Cos[6]=0Cos[7]=1320226P01_rx=0P02_rx=0P03_rx=0P04_rx=0P05_rx=86P06_rx=0P07_rx=432P08_rx=0P09_rx=0P10_rx=0P11_rx=0P12_rx=0P13_rx=0P14_rx=0P15_rx=0P16_rx=0P17_rx=0P18_rx=0P19_rx=25P20_rx=0P21_rx=0P22_rx=0P23_rx=0P24_rx=0P25_rx=0P26_rx=0P27_rx=325973P28_rx=645689P29_rx=348564P30_rx=0P31_rx=0P32_rx=0P33_rx=0P38_rx=0P39_rx=0P40_rx=0P41_rx=0P42_rx=0P43_rx=0P44_rx=0P45_rx=0P50_rx=0P51_rx=0P52_rx=0说明:其中P01_rx----P52_rx中的端口信息是芯片端口号,可以通过debugportmap1查看芯片端口对应的面板端口号.
www.
h3c.
com13CPU占用率异常-查看CPU报文统计的方法(2)STEP2:查看上CPU协议报文软件CAR统计数据[H3C-diagnose]debugrxtxsoftcarshow1IndexTypeNumberPpsSwitch0Unknown-Type0200On1STP0100On2LACP0100On3GVRP0100On4DLDP0100On5SMLK020On6LLDP0100On7RRPP0100On8DOT1AG0100On9BPDU-TUNNEL_DEF0100On10BPDU-TUNNEL_MAC00100On11BPDU-TUNNEL_MAC10100On12BPDU-TUNNEL_MAC20100On13ARP37910100Onwww.
h3c.
com14CPU占用率异常-查看CPU报文统计的方法(3)STEP3:按条件查看上CPU报文的统计数据[H3C-diagnose]debugrxtxcatchbydaDestpacketmacdipDestIPetypePackettypeiptypePacketIPtypesaSourcepacketmacsipSourceIPvlanVLAN[H3C-diagnose]debugrxtxcatchbysip1Slot1:informationofModuleRxTx[H3C-diagnose]debugrxtxcatchend1[H3C-diagnose]debugrxtxcatchend1Slot1:informationofModuleRxTxTheCatchResultofsipis:1.
1.
1.
1461.
1.
1.
810说明:这里只举例了按照源IP统计,其他方式可按照实际情况操作.
www.
h3c.
com15CPU占用率异常-查看上CPU报文的方法STEP1:设定过滤报文[H3C-diagnose]displayrxtxdest_mac0180-c200-0000说明:可以设定很多过滤条件,命令行里边有帮助,例如:Broadcast,cos,dest_mac,dip,etype,iptype,port,reason,receive,sip,send,source_mac,vlan.
.
.
STEP2:查看报文内容[H3C-diagnose]debugrxtx-c100-s100pkt1DebugRxTxpacketison!
[H3C-diagnose]*Apr2709:00:47:8702000H3CRXTX/7/pkt:Fromboard1:receivedpacketfromchip0,port17,reason=0x1000,cos=3,sMod=0,sPort=17,len=216,Matched=53*Apr2709:00:48:462000H3CRXTX/7/pkt:00000180c200000e000fe25b18c981000001–说明:-[H3C-diagnose]debugrxtx[-c][-s]pkt其中:-c:显示报文的个数,缺省10个;-s:显示报文的长度,缺省64字节;pkt:具体的slot号.
www.
h3c.
com16CPU占用率异常-debug报文转换抓包的方法STEP1:截取debug报文内容[[H3C-diagnose]debugrxtx-c10pkt1DebugRxTxpacketison!
*Jun1416:55:18:3312000H3CRXTX/7/pkt:Fromboard1:transmitpacketfromchip0,port14,Priority=0x7,len=85*Jun1416:55:18:3332000H3CRXTX/7/pkt:00000023892874b5000fe24194e4810000010010080045c000438bda0000ff062b0f0101002001090101010100170b6cda7f5340f2110030fdb9501880008f7b00000a0d20446562STEP2:利用wireshark的text2pcap.
exe命令将文本转成抓包文件www.
h3c.
com17CPU占用率异常-常见CPUTask说明CPU任务任务说明VIDL空闲任务STMR平台堆叠处理任务DSTK驱动堆叠处理相关任务SYSM系统模块处理任务L2X0/L2X1地址同步任务unit0/unit1bC.
0/bC.
1端口统计读取任务unit0/unit1bLK0/bLK1端口link状态扫描任务unit0/unit1LPDT环路检测T_DMMAC同步任务bRX1/bRX2收包进程SCAR防攻击处理任务SOCKCPU收包AGNTSNMP处理任务BDPC处理设备在运行过程中由于芯片异常而产生的错误告警信息FMCK光模块定时处理任务www.
h3c.
com18CPU高故障举例一-S5800CPU高(1)故障现象:某客户一台S5800交换机出现CPU过高[S5800-hidecmd]discpu-usagetask=====CurrentCPUusageinfo=====CPUUsageStat.
Cycle:37(Second)CPUUsage:100%CPUUsageStat.
Time:2012-07-2417:02:30CPUUsageStat.
Tick:0x5e3ef(CPUTickHigh)0xf3b4d911(CPUTickLow)ActualStat.
Cycle:0x0(CPUTickHigh)0x9394a4b7(CPUTickLow)TaskNameCPURuntime(CPUTickHigh/CPUTickLow)bLK12%0/325d567bLK01%0/2e75310DQFD0%0/15daecDQIT2%0/421c364bRX154%0/51182017NSTM1%0/2c14670SOCK23%0/22da5b18www.
h3c.
com19CPU高故障举例一-S5800CPU高(2)原因分析:debugrxtxsoftcarshow1=IndexTypePkt_PSecDisPkt_AllPpsSwitchHash0ROOT100041206307300OnSMAC11IPV4_MC_OSPF_5221100OnSMAC54DLDP10100OnSMAC61TELNET/SSH11332500OnSMAC63SNMP420500OnSMACThelastdiscardedpacketofROOT:0000c4cad93a997754899872f45a81000002001008004500002b000040004011a05f0ab100208db00101010180d230390017e07661620030636465666768696a6b6c6d6e00000000可以看出黄色为目的MAC,这个MAC是设备VLAN的MAC地址,红色为源MAC,蓝色为源IP,紫色为目的IP.
由于设备上没有到1.
1.
1.
1的路由,而且还配置了ipunreachablesenable,导致整个目的不可达的路由上CPU处理了.
www.
h3c.
com20CPU高故障举例二-S5120CPU高(1)故障现象:某局点S5120EI设备从11月21日下午17点开始的CPU突然上升到60%,而且始终不能下降S9512E-1S9512E-2S5120EI-145464748www.
h3c.
com21CPU高故障举例二-S5120CPU高(2)原因分析:1、displaycputask查看是设备的哪个任务引起的:www.
h3c.
com22CPU高故障举例二-S5120CPU高(3)2、根据上面查看是T_DM任务占用高.
T_DM是MAC地址同步任务,一个多小时内,上行聚合口收到大量的TC报文,这时候需要删除MAC的,需要查一下网络的状态;10点记录:STPslot1TCorTCNcountMSTIDPortReceiveSend0Bridge-Aggregation13051030Bridge-Aggregation231008311点半的记录:STPslot1TCorTCNcountMSTIDPortReceiveSend0Bridge-Aggregation13318530Bridge-Aggregation2335153查看核心设备是否TC改变,发现收方向的TC改变报文只有1-2个增加,%Nov2214:25:26:7332012TJ-DQ-M301-G12-H9512-WC-02MSTP/2/NOTIFIEDTC:Instance0'sBridge-Aggregation36wasnotifiedatopologychange.
www.
h3c.
com23CPU高故障举例二-S5120CPU高(4)通过核心交换机去查看聚合链路对应的S5120EI设备的log,发现某个端口不停地down和UP.
www.
h3c.
com24系统资源故障处理方法第一节CPU占用率异常第二节内存占用率异常第三节电源异常故障第四节风扇异常故障第五节环境温度异常www.
h3c.
com25内存占用率异常-定位思路(1)STEP1:使用displaymemoryslot[slotid]命令查看各个单板内存信息.
如果单板内存占用率高于80%,可能存在内存异常问题.
[H3C]displaymemoryslot0SystemTotalMemory(bytes):53133696TotalUsedMemory(bytes):48479992UsedRate:81%[H3C]displaymemoryslot7SystemTotalMemory(bytes):191790720TotalUsedMemory(bytes):64562064UsedRate:33%www.
h3c.
com26内存占用率异常-定位思路(2)STEP2:多次使用下列命令查看内存使用细节,查看哪个模块使用内存在不断增加.
[H3C-hidecmd]_dismemoryslot0BlockSize32Free729Used25876Total26605BlockSize64Free49Used30053Total30102BlockSize1024Free17Used66351Total368BlockSize2048Free23Used593Total616BlockSize4096Free4Used156Total160请注意保存该信息!
重点查看"Used"列的统计.
如果发现某个块内存在不停增加,那么表示该块内存在被不断使用.
注意,有些块内存的增加是正常的.
所以需要判断那个块是真正的异常,需要判断该块被使用的数目是否巨大.
例如,上述命令显示中:BlockSize1024Free17Used66351Tota368,该块被使用的实际内存为66351*102464.
79M.
一个模块正常不可能使用这么大的内存空间,所以可以肯定该内存块有异常.
另外有些内存的泄漏问题不是快速的,而是缓慢的过程,所以需要比较长的时间(甚至是几周的时间来对比观察.
www.
h3c.
com27内存占用率异常-定位思路(3)STEP3:根据步骤2查看的结果,确定泄漏内存的具体块.
使用下列命令查是哪个模块使用内存异常.
[H3C-hidecmd]_dismemory1024groupslot0(STEP2确定的异常块)(8888,20)(00a4,4)(00a8,1)(00ae,1)(dd35,66251)(0150,149)(0090,11)(0392,2)(014d,1)(0140,6)(01d0,1)(0002,3)(017d,10)(0050,105)(001b,4)(0430,1)(55aa,21)(0170,2)(0000,0)(0000,0)括号中的第一列数值表示为模块号,第二列为该模块使用的内存量.
从上述命令中可以看到,(dd35,66251)内存存在重大嫌疑.
模块dd35使用了66251块1024字节的内存,这是明显异常的.
所以可以肯定该模块存在问题.
www.
h3c.
com28内存占用率异常-定位思路(4)STEP4:由于上述信息只是明确了问题的范围,具体是那个代码有问题还需要继续收取信息,后续信息收集复杂度较高,不建议用服人员操作,所以请与研发联系.
另外,请注意如果业务允许的前提下尽量不要重启设备!
www.
h3c.
com29内存异常故障举例-BGP路由学习异常(1)故障现象:某局点反馈BGP路由学习异常,路由经常无法学习或者丢失.
原因分析:Step1:使用displaymemoryslotid命令查看各个单板内存信息.
发现单板0内存占用率高于60%[H3C]displaymemoryslot0SystemTotalMemory(bytes):53133696TotalUsedMemory(bytes):40879992UsedRate:81%www.
h3c.
com30内存异常故障举例-BGP路由学习异常(2)Step2:多次使用下列命令查看内存使用细节,查看哪个模块使用内存在不断增加.
[H3C-hidecmd]_displaymemoryslot0BlockSize32Free729Used25876Total26605BlockSize64Free49Used30053Total30102BlockSize1024Free17Used196351Total368BlockSize2048Free23Used593Total616BlockSize4096Free4Used156Total160www.
h3c.
com31内存异常故障举例-BGP路由学习异常(3)Step3:进一步查导致内存被大量占用的软件模块代号,以便定位内存异常的软件模块名称.
根据步骤2查看的结果,确定泄漏内存的具体块.
使用下列命令查是哪个模块使用内存异常.
[H3C-hidecmd]_dismemory1024groupslot0(步骤2确定的异常块)(8888,20)(00a4,4)(00a8,1)(00ae,1)(dd35,166251)(0150,149)(0090,11)(0392,2)(014d,1)(0140,6)(01d0,1)(0002,3)(017d,10)(0050,105)(001b,4)(0430,1)www.
h3c.
com32内存异常故障举例-设备无法保存配置故障现象:设备保存配置文件失败.
saveThecurrentconfigurationwillbewrittentothedevice.
Areyousure[Y/N]:yPleaseinputthefilename(*.
cfg)[flash:/startup.
cfg](Toleavetheexistingfilenameunchanged,presstheenterkey):flash:/startup.
cfgexists,overwrite[Y/N]:yValidatingfile.
Pleasewait.
Error:Failedtosavetheconfigurationforlackofmemoryorsomeotherreasons.
www.
h3c.
com33系统资源故障处理方法第一节CPU占用率异常第二节内存占用率异常第三节电源异常故障第四节风扇异常故障第五节环境温度异常www.
h3c.
com34电源异常故障Step1:查看电源状态,看是否存在fault、absent状态的电源模块在位.
displaypowerPower1State:NormalPower2State:AbsentStep2:如果存在Fault状态电源模块,表示该电源模块异常,无法供电.
拔出该电源模块再次插入,使用displaypower看是否能恢复到正常状态.
如果还不能恢复,如果设备还有其它空闲电源插座孔,更换电源模块到该空闲插座孔.
如果还无法恢复,更换电源模块.
Step3:如果为absent状态,表示电源模块没有插入.
需要检查是否有电源模块在位,如果在位,那么请检查模块是否插入牢固.
www.
h3c.
com35系统资源故障处理方法第一节CPU占用率异常第二节内存占用率异常第三节电源异常故障第四节风扇异常故障第五节环境温度异常www.
h3c.
com36风扇异常故障Step1:查看状态,查看风扇的使用状态是否为fault、absent.
displayfanFan1State:faultStep2:如果为fault状态,表示该风扇异常,无法提供抽风功能.
使用displayenvironment查看系统温度是否比较高如果高,建议使用手在设备出风口触摸以进一步判断是否有出风.
Step3:如果温度明显偏高(大于70度),并且发现没有出风,那么可以肯定风扇异常.
Step4:插拔风扇框,检查是否能恢复,如果不能恢复,需要更换该风扇框,如果没有风扇框,请关闭设备以免发生温度高导致电路烧坏.
(如果有降温措施保证系统工作在60度以下,可以继续使用设备).
Step5:如果为absent状态,表示风扇框没有插入位.
需要检查是否插到位.
处理方法同fault状态.
(风扇模块的异常信息能打印到log日志,判断风扇异常时间可以参考log信息).
www.
h3c.
com37风扇异常故障举例故障现象:%May2317:29:47:712000ChengBei_S5120_F2_ADEV/4/FANFAILED故障原因:风扇积尘严重.
www.
h3c.
com38系统资源故障处理方法第一节CPU占用率异常第二节内存占用率异常第三节电源异常故障第四节风扇异常故障第五节环境温度异常www.
h3c.
com39环境温度异常故障Step1:查看温度状态,查看温度是否正常.
displayenvironmentSystemtemperatureinformation(degreecentigrade):BoardTemperatureLowerlimitUpperlimit18810802481080Step2:检查风扇是否正常详细参考风扇异常问题定位方法.
如果为风扇异常,请按照风扇异常方法处理.
Step3:如果风扇正常,检查设备是否配置了防尘网.
如果配置了防尘网需要检查防尘网是否洁净.
清理防尘网后,看温度是否能恢复正常.
Step4:清洗防尘网无效或者设备没有配置防尘网,检查系统所在环境是否比较高如果高,建议增加空调或者其它散热措施.
网络故障的应急处理流程与规范系统资源故障处理方法硬件接口故障处理方法转发异常问题处理方法其他常见故障处理方法常用基本维护命令目录www.
h3c.
com41硬件接口故障处理方法第一节端口信息介绍第二节电口频繁up/down第三节光口频繁up/down第四节端口不up(非SFP)第五节SFP端口不upwww.
h3c.
com42端口信息介绍–端口信息显示www.
h3c.
com43端口信息介绍–错包类型Input/Output错包类型含义说明Inputrunts接收到的超小帧的数量超小帧是指长度小于64字节、格式正确且包含有效的CRC字段的帧giants接收到的超大帧的数量超大帧是指有效长度大于端口允许通过最大报文长度的帧throttles当缓存或CPU过载时,设备将端口关闭情况称为throttleCRC接收到的CRC校验错误、长度正常的帧的数量frame接收到的CRC校验错误、且长度不是整字节数的帧的数量overruns当端口的接收速率超过接收队列的处理能力时,导致报文被丢弃aborts接收到的非法报文总数ignored由于端口接收缓冲区不足等原因而丢弃的报文数量Parityerrors接收到的奇偶校验错误的帧的数量Outputunderruns当端口的发送速率超过了发送队列的处理能力,导致报文被丢弃,是一种非常少见的硬件异常bufferfailures由于端口发送缓冲区不足而丢弃的报文数量aborts发送失败的报文总数,即报文已经开始发送,但由于各种原因(如冲突)而导致发送失败deferred延迟报文的数量,延迟报文是指发送前检测到冲突而被延迟发送的报文collisions冲突帧的数量,冲突帧是指在发送过程中检测到冲突的而停止发送的报文latecollisions延迟冲突帧的数量,延迟冲突帧是指帧的前512bits已经被发送,由于检测到冲突,该帧被延迟发送Lostcarrier载波丢失www.
h3c.
com44端口信息介绍–端口down的类型端口down类型含义说明DOWN普通down,未插线缆或者线缆故障DOWN(Administratively)端口视图下配置了shutdownDOWN(DLDPconnectionfailure)DLDPdownDOWN(loopdown)Loopback-detection监测到环路,端口被强制关闭了DOWN(BPDU-protected)该端口在BPDUguard功能的作用下被关闭了DOWN(Monitor-Linkuplinkdown)同一个MonitorLink组里的上行端口DOWN导致本端口DOWNDOWN(STORMCONSTRAINDOWN)表示端口上因为未知单播、组播或广播报文中某类报文的流量大于其上限阈值而被关闭DOWN(PortSecurityDisabled)因检测到端口收到非法报文,端口安全的入侵检测机制将端口关闭www.
h3c.
com45硬件接口故障处理方法第一节端口信息介绍第二节电口频繁up/down第三节光口频繁up/down第四节端口不up(非SFP)第五节SFP端口不upwww.
h3c.
com46电口频繁up/downStep1:查看两端端口是否存在收发错误报文统计.
命令为displayinterface如果存在错误报文统计,则表明链路质量不好,需要检查端口配置情况和检查链路质量.
Step2:如果确认端口配置正常(速度以及双工一致),则检查物理链路是否正常.
简单方法是使用手轻轻碰网线看是否有UP/DOWN变化.
如果没有,则更换连接线观察.
Step3:如果确认物理链路正常(通过更换网线等措施),而端口又为协商模式,将两端配置为强制模式观察.
Step4:更换一端设备端口(如果条件允许,推荐是同类型的其它槽位单板),观察是否故障依旧.
Step5:如果更换端口依旧,则更换另一端设备端口(如果条件允许,推荐是同类型的其它槽位单板).
如果故障依旧需要研发人员确认.
www.
h3c.
com47硬件接口故障处理方法第一节端口信息介绍第二节电口频繁up/down第三节光口频繁up/down第四节端口不up(非SFP)第五节SFP端口不upwww.
h3c.
com48光口频繁up/downStep1:查看两端端口是否存在收发错误报文统计.
命令为displayinterface如果存在错误报文统计,则表明链路质量不好,需要检查端口配置情况和检查链路质量.
Step2:如果确认端口配置正常(速度以及双工一致),则检查物理链路是否正常.
简单方法是使用手轻轻碰光纤看是否有UP/DOWN变化.
如果没有,则更换连接线观察.
Step3:通过测试光功率依旧更换光纤等手段,如果确认物理链路正常,而端口又为协商模式,将两端配置为强制模式观察.
Step4:更换一端设备端口(如果条件允许,推荐是同类型的其它槽位单板).
观察是否故障依旧.
Step5:如果更换端口依旧,则更换另一端设备端口(如果条件允许,推荐是同类型的其它槽位单板).
如果故障依旧需要研发人员确认.
www.
h3c.
com49硬件接口故障处理方法第一节端口信息介绍第二节电口频繁up/down第三节光口频繁up/down第四节端口不up(非SFP)第五节SFP端口不upwww.
h3c.
com50端口不up(非SFP端口)Step1:在本板或本设备上两端口直接互连,判定是否能up.
Step2:如果直连无法up,检查物理连接线是否正常.
Step3:如果确认物理连接线正常,使用命令displayinterface检查配置情况.
Step4:如果确认对端没有被配置为down状态或者配置正常.
更改端口属性.
Step5:如果为电口,建议更换网线类型(交叉以及直连网线).
Step6:把端口内环(命令loopbackinternal),看看内环测试是否成功,如果内环测试不成功则可以肯定端口故障,如果内环测试成功,则联系厂家人员进一步处理.
www.
h3c.
com51硬件接口故障处理方法第一节端口信息介绍第二节电口频繁up/down第三节光口频繁up/down第四节端口不up(非SFP)第五节SFP端口不upwww.
h3c.
com52SFP端口不up-排查步骤Step1:在本板或本设备上两端口直接互连,判定是否能up.
Step2:如果直连无法up,检查物理连接光纤以及光功率是否正常,连接光纤收发是否接对正确.
Step3:如果确认物理连接光纤正常(测试光功率、以及更换光纤),则检查SFP模块是否与光纤匹配(单多模、支持公里数等等),两端SFP模块是否匹配.
Step4:使用命令displayinterface检查是否配置合理,是否能正确读出SFP的模块参数.
如果确认对端没有被配置为down状态并且端口配置完全一致,建议更换两端端口配置数据(双工以及速度).
Step5:分别将两端更换到其它端口进行测试.
判断是否能up.
Step6:如果更改端口模式还无法正常,则分别更换两端SFP模块,判断是否能up.
www.
h3c.
com53SFP端口不up-光模块信息查看(1)displaytransceiverinterface[interface-typeinterface-number]显示光模块基本信息[H3C]displaytransceiverinterfaceg2/0/26GigabitEthernet2/0/26transceiverinformation:TransceiverType:1000_BASE_SX_SFPConnectorType:LCWavelength(nm):850TransferDistance(m):550(50um),270(62.
5um)DigitalDiagnosticMonitoring:YESVendorName:H3COrderingName:SFP-GE-SX-MM850www.
h3c.
com54SFP端口不up-光模块信息查看(2)displaytransceiveralarminterface[interface-typeinterface-number]显示光模块告警信息[H3C]displaytransceiverinterfaceg2/0/26displaytransceiveralarminterfaceGigabitEthernet2/0/26GigabitEthernet2/0/26transceivercurrentalarminformation:TXfaultwww.
h3c.
com55SFP端口不up-光模块信息查看(3)displaytransceiverdiagnosisinterface[interface-typeinterface-number]查看光模块数字诊断参数的当前测量值[H3C]displaytransceiverdiagnosisinterfaceg2/0/26GigabitEthernet2/0/26transceiverdiagnosticinformation:Currentdiagnosticparameters:Temp(°C)Voltage(V)Bias(mA)RXpower(dBM)TXpower(dBM)313.
365.
450.
270.
28www.
h3c.
com56光模块故障举例-端口无法up故障现象:端口无法up,更换光模块正常.
原因分析:查看光功率,发现收光功率异常[H3C-hidecmd]_displaytransceiverdiagnosisinterfaceTen-GigabitEthernet1/0/49transceiverdiagnosticinformation:Currentdiagnosticparameters:Temp.
(°C)Voltage(V)Bias(mA)RXpower(dBm)TXpower(dBm)293.
266.
06-36.
96-2.
48Alarmthresholds:Temp.
(°C)Voltage(V)Bias(mA)RXpower(dBm)TXpower(dBm)High733.
8010.
502.
00-1.
00Low-32.
811.
00-11.
90-10.
31www.
h3c.
com57光模块故障举例-端口无法up原因分析:光模块返回分析,发现光模块被污染.
网络故障的应急处理流程与规范系统资源故障处理方法硬件接口故障处理方法转发异常问题处理方法其他常见故障处理方法常用基本维护命令目录www.
h3c.
com59三层转发先查看路由表是否正常三层转发问题定位流程(一)displayiprouting-table[vpn-instancevpn-instance-name]ip-address[mask-length|mask][longer-match][verbose]displayiprouting-tableRoutingTables:PublicDestinations:10Routes:10Destination/MaskProtoPreCostNextHopInterface10.
153.
43.
0/24Direct0010.
153.
43.
62Vlan5192.
168.
1.
0/24Static60010.
153.
43.
1Vlan5www.
h3c.
com60查看路由FIB表项三层转发问题定位流程(二)[H3C]displayfib[vpn-instancevpn-instance-name][aclacl-number|ip-prefixip-prefix-name][|{begin|exclude|include}regular-expression][H3C]displayfibDestinationcount:2FIBentrycount:2Flag:U:UseableG:GatewayH:HostB:BlackholeD:DynamicS:StaticR:RelayDestination/MaskNexthopFlagOutInterfaceInnerLabelToken192.
168.
1.
0/2410.
153.
43.
1USGVlan5NullInvalid10.
153.
43.
0/240.
0.
0.
0UVlan5NullInvalidwww.
h3c.
com61查看ARP软件表项是否正常三层转发问题定位流程(三)[H3C]displayarp[[all|dynamic|static][slotslot-number]|vlanvlan-id|interfaceinterface-typeinterface-number][count|verbose][|{begin|exclude|include}regular-expression][H3C]displayarp10.
153.
43.
1Type:S-StaticD-DynamicIPAddressMACAddressVLANIDInterfaceAgingType10.
153.
43.
10023-89a2-52055GE1/0/4813Dwww.
h3c.
com62查看硬件ARP表项三层转发问题定位流程(四)[H3C-diagnose]debugipv4-drvshowarp[VRF_Value][IP]slot[slot_ID][H3C-diagnose]debugipv4-drvshowarp010.
153.
43.
1slot1-IPv4ARPInformationSlot1---UNIT:0----VRF:0-IPADDR:10.
153.
43.
1-LOCATION:host-EGRESSID:100005-IPMCPTR:0-FLAGS:0x0-HITBIT:NO-EGRESSFLAGS:0x0-INTFNUM:4-MACADDR:0023-89a2-5205-VLAN:5-DMOD:6-DPORT:24-TRUNK:0-FRRLABEL:0www.
h3c.
com63二层转发查看mac地址表二层转发问题定位流程(一)displaymac-address[mac-address[vlanvlan-id]|[[dynamic|static][interfaceinterface-typeinterface-number]|blackhole][vlanvlan-id][count]]displaymac-addressintg1/0/5MACADDRVLANIDSTATEPORTINDEXAGINGTIME(s)000f-e25b-1c0a2LearnedGigabitEthernet1/0/5AGING000f-e25b-1c2a2LearnedGigabitEthernet1/0/5AGINGwww.
h3c.
com64查看二层转发的底层信息二层转发问题定位流程(二)[H3C-diagnose]debugl2[slot_no][chip_no]mac/find/vid=[vid]/mac=[macaddress][H3C-diaganose]debugl210mac/find/vid=2/mac=00:0f:e2:5b:1c:2afindmac00:0f:e2:5b:1c:2ainvlan2unit0:l2entryfoundmod4,port7,flag(0x00000440):Hit|SRC_HIT|;group(0):Learntunit1:l2entryfoundmod4,port7,flag(0x00000000):;group(22):DynamicSynwww.
h3c.
com65查看端口信息,看是否存在错包转发丢包问题定位流程(一)displayinterfaceinterface-typeinterface-number[brief][|{begin|exclude|include}regular-expression]displayinterfaceG1/0/1GigabitEthernet1/0/1currentstate:UPIPPacketFrameType:PKTFMT_ETHNT_2,HardwareAddress:5866-ba0b-90761000Mbps-speedmode,full-duplexmode166111unicasts,12925broadcasts,8multicastsInput:0inputerrors,0runts,0giants,0throttles0CRC,0frame,-overruns,0aborts-ignored,-parityerrorsOutput:0outputerrors,-underruns,-bufferfailures0aborts,0deferred,0collisions,0latecollisions0lostcarrier,-nocarrierwww.
h3c.
com66找出丢包设备采用镜像或者抓包的方式对比报文流镜像、端口镜像抓包采用流统计的方式统计报文转发丢包问题定位流程(二)www.
h3c.
com67流统计举例转发丢包问题定位流程(二)-流统计举例E1/0/1E1/0/3E1/0/2PC1PC2E1/0/3www.
h3c.
com68流统计举例转发丢包问题定位流程(二)-流统计举例aclnumber3000rule0permiticmpsource10.
0.
53.
100destination10.
0.
53.
90rule5permiticmpsource10.
0.
53.
90destination10.
0.
53.
100trafficclassifieraccif-matchacl3000trafficbehavioraccaccountingqospolicyaccclassifieraccbehavioraccinterfaceGigabitEthernet1/0/3qosapplypolicyaccinboundqosapplypolicyaccoutbound通过下面命令查看流统计信息:displayqospolicyinterfaceG1/0/3www.
h3c.
com69查看芯片丢包信息转发丢包问题定位流程(三)[H3C]en_diag[H3C_diagnose]bcm[slot][chip]show/c/[port_num][H3C]en_diag[H3C_diagnose]bcm10show/c/ge7RDBGC7.
ge7:0+0RDBGC8.
ge7:0+0HOLD.
ge7:123+12TDBGC0.
ge7:0+0TDBGC1.
ge7:0+0TDBGC2.
ge7:0www.
h3c.
com70S5800转发异常问题实例1-(1)故障现象:PC1无法访问PC2的业务S580010.
138.
225.
10010.
142.
1.
50www.
h3c.
com71S5800转发异常问题实例1-(2)原因分析:进行报文统计:aclnumber3999rule0permitipsource10.
142.
1.
500destination10.
138.
225.
1000rule1permitipsource10.
138.
225.
1000destination10.
142.
1.
500trafficclassifiercntoperatorandif-matchacl3999#trafficbehaviorcntaccountingpacket#qospolicycntclassifiercntbehaviorcnt#qosapplypolicycntglobalinboundqosapplypolicycntglobaloutboundwww.
h3c.
com72S5800转发异常问题实例1-(3)通过查看接口统计,发现上行到PC1的数据没有统计结果disqospolicyinterfaceInterface:Ten-GigabitEthernet1/0/49Direction:OutboundPolicy:cntClassifier:cntOperator:ANDRule(s):If-matchacl3999Behavior:cntAccountingEnable:0(Packets)Interface:Ten-GigabitEthernet1/0/50Direction:OutboundPolicy:cntClassifier:cntOperator:ANDRule(s):If-matchacl3999Behavior:cntAccountingEnable:0(Packets)www.
h3c.
com73S5800转发异常问题实例1-(4)由于设备转发异常,请先查看本地logbuffer是否记录了异常日志:[H3C]_hideNowyouenterahiddencommandviewfordeveloper'stesting,somecommandsmayaffectoperationbywronguse,pleasecarefullyuseitwithourengineer'sdirection.
[H3C-hidecmd]locallogbuffer1display0Oct26201214:31:43:0582:unit1ING_L3_NEXT_HOPentry77parityerrorOct26201214:31:43:0804:unit1ING_L3_NEXT_HOPanalysisOct26201214:31:43:0805:unit1ING_L3_NEXT_HOPentry77parityerror从上面看出是有校验位异常,可以通过重置此校验位恢复www.
h3c.
com74S5800转发异常的问题实例1-(5)解决方案:sySystemView:returntoUserViewwithCtrl+Z.
[H3C]en_diagCAUTION:Nowyouenteranen_diagcommandviewfordeveloper'stesting,somecommandsmaybedangerous,pleasecarefullyuseitwithourengineer'sdirection.
[H3C-diagnose][H3C-diagnose]bcm10modreg/ING_L3_NEXT_HOP_PARITY_CONTROL/parity_en=0[H3C-diagnose]bcm11modreg/ING_L3_NEXT_HOP_PARITY_CONTROL/parity_en=0就是关闭next_hop表项的校验作用.
www.
h3c.
com75S5800转发异常的问题实例2-(1)故障描述:S5800设备转发异常原因分析:查看本地logbuffer是否记录了异常日志:[H3C]_hideNowyouenterahiddencommandviewfordeveloper'stesting,somecommandsmayaffectoperationbywronguse,pleasecarefullyuseitwithourengineer'sdirection.
[H3C-hidecmd]locallogbuffer1display0Dec27201222:21:04:0866:unit=0,L3_ENTRY_ONLY,entry5329parityerrorDec27201222:21:04:0973:unit=0,L3_ENTRY_ONLY,entry5329parityerrorDec27201222:21:05:0596:unit=0,L3_ENTRY_ONLY,entry5329parityerror从上面看出是有校验位异常,可以通过重置此校验位恢复www.
h3c.
com76S5800转发异常的问题实例2-(2)解决方案:sysSystemView:returntoUserViewwithCtrl+Z.
[H3C]en_diagCAUTION:Nowyouenteranen_diagcommandviewfordeveloper'stesting,somecommandsmaybedangerous,pleasecarefullyuseitwithourengineer'sdirection.
[H3C-diagnose]bcm10modreg/L3_ENTRY_PARITY_CONTROL/PARITY_EN=0就是关闭L3_ENTRY_PARITY表项的校验作用.
www.
h3c.
com77S5120-EI下挂服务器ping不通网关(1)故障现象:下挂服务器无法ping通网关S9512E-1S9512E-2S5120EI-1S5120EI-2S5120EI-145464748www.
h3c.
com78S5120-EI下挂服务器ping不通网关(2)原因分析:首先看看stp的状态如下图所示,45和46口stp处于阻塞:设备STP配置如下:stpbpdu-protectionstpenablestpregion-configurationregion-nameSZ-FYB4-WCinstance1vlan300to312350activeregion-configurationS9512E-1S9512E-2S5120EI-1S5120EI-2S5120EI-145464748www.
h3c.
com79S5120-EI下挂服务器ping不通网关(3)查看内部端口映射情况[SZ-FYB-0401-E08-H5120-W-01]en_diagCAUTION:Nowyouenteraen_diagcommandviewfordeveloper'stesting,somecommandsmaybedangerous,pleasecarefullyuseitwithourengineer'sdirection.
[SZ-FYB-0401-E08-H5120-W-01-diagnose]debugportmapping1[Interface][Unit][Port][Name][Combo][Active][IfIndex][MID][Link]GE1/0/45120ge20yesyes0x90002c1upGE1/0/46121ge21yesyes0x90002d1upGE1/0/47122ge22yesyes0x90002e1upGE1/0/48123ge23yesyes0x90002f1upGE1/0/49121ge21yesno0x9000301downGE1/0/50123ge23yesno0x9000311downGE1/0/51120ge20yesno0x9000321downGE1/0/52122ge22yesno0x9000331downwww.
h3c.
com80S5120-EI下挂服务器ping不通网关(4)查看底层STP状态[SZ-FYB-0401-E08-H5120-W-01-diagnose]bcm11stg/showSTG1:contains4VLANs(1-2,185,999)Block:ge5,ge13-ge14,ge16-ge18Forward:ge0-ge4,ge6-ge12,ge15,ge19-ge23,xe,hgSTG2:contains13VLANs(300-312)Block:ge0-ge3,ge5,ge9,ge13-ge14,ge16-ge18,ge20-ge22Forward:ge4,ge6-ge8,ge10-ge12,ge15,ge19,ge23,xe,hgSTG3:contains0VLANsBlock:ge0-ge18,ge20-ge23Forward:ge19,xe,hgSTG4:contains0VLANsBlock:ge0-ge18,ge20-ge23Forward:ge19,xe,hg由此可以看出47口底层处于block状态,一旦有数据hash到此链路上,报文就无法出去,升级到R2208版本可以解决.
www.
h3c.
com81S5120-EI转发丢包(1)故障现象:发现服务器和58之间的通信概率存在丢包,怀疑丢包发生在S5120EIwww.
h3c.
com82S5120-EI转发丢包(2)原因分析:经过流统计和抓包发现,通过58ping服务器,ping100个报文的话会概率存在丢1~2个报文通过5120EI的调试信息可以看到丢包发生在5120EI的g1/0/32口,进一步分析发现g1/0/32口有大量的HOLD丢包,如下面红色的统计表明是丢包.
[H3C-diagnose]bcm11show/c/ge7RDBGC7.
ge7:0+0RDBGC8.
ge7:0+0HOLD.
ge7:123+12TDBGC0.
ge7:0+0TDBGC1.
ge7:0+0www.
h3c.
com83S5120-EI转发丢包(3)解决方案:HOLD丢包的含义是交换机端口超线速了(多个端口打一个端口或者快速的端口打慢速的端口都会有这个问题),从目前的5120EIg1/0/32端口上看存在大量的HOLD丢包,因此是存在某些时间段多个端口同时访问g1/0/32造成的堵塞,解决的办法是可以将用户关心的报文提升一下优先级(比如5),那么就可以尽量避免报文不丢包.
网络故障的应急处理流程与规范系统资源故障处理方法硬件接口故障处理方法转发异常问题处理方法其他常见故障处理方法常用基本维护命令目录www.
h3c.
com85VRRP故障处理-1故障现象:disvrrpintvlan721IPv4StandbyInformation:RunMode:LoadBalanceRunMethod:VirtualMACTotalnumberofvirtualroutersoninterfaceVlan721:1InterfaceVRIDStateRunAddressActivePriVlan7218Initialize15010.
135.
13.
10.
0.
0.
0www.
h3c.
com86VRRP故障处理-2原因分析:从VRRP的状态入手,对于Initialize状态,表示VRRP协议的初始化状态,含义是等待一个开始事件.
一直停留在这个状态,则表示其没有任何事件触发.
最常见的原因就是VLAN虚接口被shutdown了或者所属VLAN没有物理端口up[SZ-FYA-0402-G09-H5820-LD-04-Vlan-interface721]disthisinterfaceVlan-interface721ipaddress10.
136.
13.
2255.
255.
255.
192vrrpvrid8virtual-ip10.
135.
13.
1vrrpvrid8priority200www.
h3c.
com87S5120EIACL问题-1故障描述:在某局点变更时,将原来在接口下下发的packet-filter3000更改为3001在g1/0/1--g1/0/40接口下将packet-filter3000全部undo掉,后重新下发packet-filter3001,发现下面提示:command:interfaceGigabitEthernet1/0/1%Nov300:10:44:6732011HZ-DG-0204-C01-H5120-MSW-01SHELL/4/CMD:task:vt0ip:172.
16.
0.
194user:XXXXcommand:packet-filter3001inbound%Nov300:10:45:8622011HZ-DG-0204-C01-H5120-MSW-01PFLT/4/PFILTER:Error:ApplyingorrefreshingpacketfilterpolicytotheinterfaceGigabitEthernet1/0/1failedfornotenoughresource.
www.
h3c.
com88S5120EIACL问题-2具体配置如下:aclnumber3001descriptionServer-Securityrule0permittcpsource-portrange10251432rule5permittcpsource-portrange14351520rule10permittcpsource-portrange15223388rule15permittcpsource-portrange33905799rule20permittcpsource-portrange58015899rule25permittcpsource-portrange59018079rule30permittcpsource-portrange808135999rule35permittcpsource-portrange3600155999rule40permittcpsource-portgt56000rule45permitudpsource-portgt1025rule50permiticmprule55permittcpdestination-portrange3280033000rule60permittcpdestination-porteq30001rule65permittcpdestination-portrange19992001rule70permittcpdestination-portrange70017003rule75permittcpdestination-porteq32959rule80permittcpdestination-portrange90039004rule85permittcpsource-porteq8803rule90permittcpsource-portrange68316860rule95permittcpsource-portrange3280033000rule100permittcpsource-porteq2008rule105permittcpsource-portrange51285134rule110permittcpsource-porteq5555rule115permittcpdestination-portrange3000030003rule120permittcpdestination-porteq56660rule125permittcpdestination-porteqsmtprule130permittcpsource-portrange80018010rule140permittcpdestination-porteqwwwrule145permittcpsource-porteq2099rule150permittcpsource-porteq8443rule155permittcpsource-porteqwwwrule160permittcpsource-porteq443rule170permittcpsource-portrange52225225rule175permitudpsource-portrange50005300rule180permittcpdestination-porteq5555rule65534denyipwww.
h3c.
com89S5120EIACL问题-3原因分析:在ACL配置中有range/gt/lt/neq关键字的是占用range资源,交换芯片的资源只有16,比如acl3000配置9个,那么acl3001最多只能够配置7个了,其中range/gt/lt一条占用16个表项的一项,如果是neq则占用16个表项的两项.
由于硬件资源限制如果用户不减少range的条目,那么没有其他好的办法了.

而aclresource就是下面的资源,关键字不包含range/gt/lt/neq的都是占用acl资源,比如rule125permittcpdestination-porteqsmtp[H3C-diagnose]bcm10d/fp_range_checkFP_RANGE_CHECK.
ipipe0[0]:FP_RANGE_CHECK.
ipipe0[1]:FP_RANGE_CHECK.
ipipe0[2]:FP_RANGE_CHECK.
ipipe0[3]:FP_RANGE_CHECK.
ipipe0[4]:FP_RANGE_CHECK.
ipipe0[15]:www.
h3c.
com90端口无法镜像问题处理-1故障现象:在S5800-56C的流量做端口镜像给PC,配置如下:Intten1/0/52mirroring-group1发现PC的抓包软件上没有任何的数据报文S5800-56C分光器PCT1/0/52T1/0/51www.
h3c.
com91端口无法镜像问题处理-2原因分析:1、查看端口镜像配置无异常2、查看端口的状态,displayinterfaceintten1/0/52,端口也是正常的UP,也没有任何异常其他情况down3、查看displaystpbrief,发现端口1/0/52的状态为blocking状态4、由于当前的软件版本在STPblocking的状态下无法进行端口镜像,后续软件版本在此情况下可以正常的端口镜像www.
h3c.
com92Radius用户无法获得三级权限问题处理故障现象:某台S5100交换机上需要使用某个三级权限的账户进行信息收集工作,但是发现现有的配置在登录后无法获得三级权限,但是在ACS的radius上已经设置了H3C的字典,为何还无法登录呢原因分析:查看配置无异常,需要在radiusscheme模式下将server-type设置为extended模式就可以了.
www.
h3c.
com93环路问题排查-1故障描述:客户网络内小型机及x86服务器出现大面积网络连通性异常,2层互访和3层互访均有大量不通和丢包情况.
S9512E-1S9512E-2S5500EI-1S5500EI-2S5120EI-145464748www.
h3c.
com94环路问题排查-2原因分析:1.
使用displayinterface发现部分端口在故障时间点存在流量峰值.
GigabitEthernet1/0/1currentstate:UPPeakvalueofinput:43354557bytes/sec,at2012-12-1815:37:22可以确定网络故障是异常流量导致.
2.
进一步查看MAC地址漂移记录,发现故障时间点存在MAC地址漂移MacAddressVlanAggModPort->AggModPortCntLatestTimeDel34:40:b5:b2:42:1519106->10072012/12/1815:38:4136:6c:67:93:9a:1f31106->100142012/12/1815:38:410:5:b7:8:7d:39128106->100162012/12/1815:38:410:50:56:b9:79:c618106->100102012/12/1815:38:41查看MAC地址漂移的命令en_diagdebugl210mac/move_rec/show(1是槽位号,0是芯片号,一般两个芯片0和1)www.
h3c.
com95环路问题排查-3原因分析:3.
找出MAC地址漂移的端口MacAddressVlanAggModPort->AggModPortCntLatestTimeDel34:40:b5:b2:42:1519106->10072012/12/1815:38:41查看端口对应关系的命令为:en_diagdebugportmapping1(1是槽位号,用于查看非聚合对应关系)debugporttrunk-global1(1是槽位号,用于查看聚合对应关系)这里Agg=1Mod=0Port=6对应的聚合组为If=3c4b0388TG=6//这里对应port=6Agg=389//这个是16进制,对应着具体的聚合组号905ANum=2HKey=0x6Port:121000053100005根据这个信息发现MAC漂移发生在S5120EI下面的两个聚合组之间.
4.
根据找到的MAC地址漂移端口,进一步排查该端口下联的网络情况,找出环路原因.