Juniper-BRAS日常故障处理分析(2010年故障)(ppt文档).ppt

江 苏 达 科 信 息 科 技 有 限 公 司Juniper BRAS日常故障处理分析日常故障处理分析2010年故障江 苏 达 科 信 息 科 技 有 限 公 司大纲大纲1.常规故障汇总2.常见补丁汇总3.典型故障分析处理过程江 苏 达 科 信 息 科 技 有 限 公 司1.1.常规故障汇总常规故障汇总故障分类故障分类处理方法处理方法硬件故障更换硬件业务出错重新配置业务软件bug或错误导致异常打补丁、升级JUNOSe江 苏 达 科 信 息 科 技 有 限 公 司2.2.常见补丁汇总常见补丁汇总补丁代码补丁代码补丁用途补丁用途HF650防止做lag导致板卡重启HF651HF733防止LM10板卡内存异常增长HF840防止LM10板卡内存读写错误导致板卡重启HF1211防止LM10做为上行板卡无故断流HF1034HF840增强版，将忍耐阀值从5增大到50*所有补丁目前只适用于E320 8-2-4p0-16版本江 苏 达 科 信 息 科 技 有 限 公 司3.3.典型故障分析处理过程典型故障分析处理过程3.1 硬件故障3.2 业务出错3.3 软件bug或错误导致异常故障江 苏 达 科 信 息 科 技 有 限 公 司3.1 3.1 硬件故障硬件故障3.1.1 SRP板卡故障3.1.2 SFM板卡故障3.1.3 前卡故障3.1.4 风扇故障江 苏 达 科 信 息 科 技 有 限 公 司3.1.1 SRP3.1.1 SRP板卡故障板卡故障Case id：2010-0821-0082 张家港城中ERX1440 slot 7 SRP无故切换，发现SRP failed，采取更换slot 7 SRP板卡操作。出现此类故障首先会对当前配置进行备份，并将SCR文件及cnf文件备份至本机防止SRP文件cnf文件损坏带来更坏的影响。江 苏 达 科 信 息 科 技 有 限 公 司3.1.2 SFM3.1.2 SFM板卡故障板卡故障Case id：2010-1206-1027苏州城西E320-2 slot 6 与slot 13板卡连接报错，首先对slot 13 LM10业务板卡进行复位操作，检查log信息还是出现连接错误，最后采取重启slot 6 SFM操作恢复。Case id：2011-0224-1027重启SFM仍然报错，采取更换SFM操作后恢复江 苏 达 科 信 息 科 技 有 限 公 司3.1.3 3.1.3 前卡故障前卡故障Case id：2010-1107-0225 苏州园区E320-2 slot 15 LM 10板卡重启，首先搜集log信息、reboot.hty文件及dump文件，JTAC根据上述文件信息提出建议，若是很明显的内存读写错误直接更换LM10板卡，其他则采取先进行SRT板卡测试，测试正常不更换LM10板卡，出现SRT测试失败遍更换LM10板卡。江 苏 达 科 信 息 科 技 有 限 公 司3.1.4 3.1.4 风扇故障风扇故障Case id：2010-0928-0037 昆山千灯erx1440 查看风扇信息为fanwaring，由于风扇告警比较棘手直接采取风扇进行更换的操作，更换风扇erx需要在90秒内安装完成否则设备会自我保护导致设备重启，E320需要在60秒内完成更换。江 苏 达 科 信 息 科 技 有 限 公 司3.2 3.2 业务出错业务出错3.2.1 Lag配置失效3.2.2 Itv组播路由不均衡3.2.3 Wlan业务状态异常江 苏 达 科 信 息 科 技 有 限 公 司3.2.1 lag3.2.1 lag配置失效配置失效lag配置完成无法与其他厂家设备互通，采用对lag配置进行重做的方法解决删除及重新配置lag的顺序：1.删除物理接口上的lag配置2.删除lag端口中的配置3.删除lag端口4.重新配置lag配置江 苏 达 科 信 息 科 技 有 限 公 司3.2.2 Itv3.2.2 Itv组播路由不平衡组播路由不平衡需要重新配置igmp组配置，使BRAS重新下拉组播流量使流量重新均衡恢复顺序：1.将Itv域中的loopback0端口下的ip igmp组配置删除2.重新在loopback0中加入组配置3.Clear ip mroute*清除组播路由表江 苏 达 科 信 息 科 技 有 限 公 司3.2.3 Wlan3.2.3 Wlan业务异常状态业务异常状态Case id：2010-0826-0880 苏州南施街E320-2 Wlan域中用户可以获取IP地址但是无法打开网页，经排查portal转发正常，将故障用户踢掉重新获取IP地址后业务恢复。江 苏 达 科 信 息 科 技 有 限 公 司3.3 3.3 软件软件bugbug或错误导致异常故障或错误导致异常故障3.3.1 LM10做为上行卡无故断流3.3.2 板卡运行时间显示错误3.3.3 LM10板卡内存读写错误3.3.4 LM10板卡内存异常持续增长3.3.5 SRP不停切换江 苏 达 科 信 息 科 技 有 限 公 司3.3.1 LM103.3.1 LM10做为上行板卡无故断流做为上行板卡无故断流Case id：2010-1118-0845 城西E320-2 slot 13上行板卡出现断流现象，此bug需要HF1211补丁进行修复。此外还需要对slot 13板卡进行重启即可恢复。江 苏 达 科 信 息 科 技 有 限 公 司3.3.2 3.3.2 板卡运行时间显示错误板卡运行时间显示错误苏州闾邱坊ERX show version查看板卡信息SZ-LQF-B-1440-3#show verSystem Release:erx40_7-2-2p0-2.rel Partial Version:7.2.2 patch-0.2 BuildId 6508 (December 17,2006 11:15)System running for:57 days,5 hours,29 minutes,22 seconds (since THU JAN 06 2011 07:50:45 BEIJING)slot state type admin spare running release slot uptime -0 online GE-2 enabled -erx40_7-2-2p0-2.rel 47094d09h:34m:26s1online GE-2 enabled -erx40_7-2-2p0-2.rel 15d00h:53m:56s此故障为erx40_7-2版本bug需要升级JUNOSe才可以修复江 苏 达 科 信 息 科 技 有 限 公 司3.3.3 LM103.3.3 LM10板卡内存读写错误板卡内存读写错误Case id：2010-1107-0225 园区E320-2 slot 15 LM10板卡出现内存读写错误板卡重启，此bug采用HF840补丁进行修复。HF840忍耐阀值为5，HF1034忍耐阀值从5增大到50，HF1034目前没有在江苏电信中使用。江 苏 达 科 信 息 科 技 有 限 公 司3.3.4 LM103.3.4 LM10板卡内存异常持续增长板卡内存异常持续增长苏州陆慕E320-1 slot 2和slot 4内存占用率超过90%此bug为LM10板卡内存泄露导致内存利用率高，可以使用HF733补丁进行修复，修复后需要对LM10板卡进行重启将内存值释放。江 苏 达 科 信 息 科 技 有 限 公 司3.3.5 SRP3.3.5 SRP不停切换不停切换Case id：2010-1029-0056 中央门ERX1440-2 SRP不停的切换，这个故障为此JUNOSe版本的bug需要将JUNOSe升级至8-2-4p0-16来解决江 苏 达 科 信 息 科 技 有 限 公 司谢谢 谢谢