Crash信息排错(三)-PMPEs

1、Crash信息排错(二)PMPEs本文阐述导致CISCO路由器奇偶校验错误的原因，和如何排错。1. 识别一个奇偶校验错误内存奇偶校验错误产生在基于多通道接口处理器上，如：Cisco 4500/4700 Series RoutersCisco 7500 Series Routers (RSP1, RSP2, RSP4, RSP8, VIP2-10, VIP2-15,VIP2-20, VIP2-40, VIP2-50)Cisco 7000 Series Routers (RSP 7000)Cisco 7200 Series Routers (NPE-100, NPE-150, NPE-175, N

2、PE-200, NPE-225,NPE-300)Cisco 12000 Series In ternet Router下面是一些当检测到奇偶校验错误的时候，系统信息。在 show version命令显示：System restarted by processor memory parity error at PC 0x6014F7C0,address 0x0或System restarted by shared memory parity error at PC 0x60130F40在 con sole logs 或者 crash info 文件里：* Cache Error Excepti

3、on *Cache Err Reg = 0xa401a65adata referenee, primary cache, data field error , error on SysAD BusPC = 0xbfc17950, Cause = 0x0, Status Reg = 0x3040d007Error: primary data cache, fields: data, virtual addr 0x6058A000, physical addr(21:3) 0x18A000, vAddr(14:12)0x2000virtual address corresp onds to mai

4、n: data, cache word 0Low Data High Data Par Low Data High DataParL1 Data : 0:0xFEFFFEFE 0x65776179 0x13 1:0x20536572 0x766572200x892:0x646F6573 0x206E6F74 0x9C 3:0x20737570 0x706F72740xF8Low Data High Data Par Low Data High DataParMem Data : 0:0xFEFFFEFE 0x65776179 0x13 1:0x20536572 0x766572200x892:

5、0x646F6573 0x206E6F74 0x9C 3:0x20737570 0x706F72740xF8-* Shared Memory Parity Error *shared memory con trol register= 0xffe3error(s) reported for: CPU on byte(s): 0/1- %PAR-1-FATAL: Shared memory parity errorshared memory status register= 0xFFEFerror(s) reported for: CPU on byte(s): 0/1 2/3%RSP-3-ER

6、ROR: MD error 0000008000000200%RSP-3-ERROR: QA parity error (bytes 0:3) 02%RSP-3-ERR0R: MEMD parity error con diti on%RSP-2-QAERROR: reused or zero link error, write at addr 0100 (QA)log 22010000, data 00000000 00000000%RSP-3-RESTART: cbus complex- %RSP-3-ERROR: CyBus error 01%RSP-3-ERROR: read data

7、 parity%RSP-3-ERROR: read parity error (bytes 0:7) 20%RSP-3-ERROR: physical address (bits 20:15) 000000-%RSP-3-ERROR: MD error 00800080C000C000%RSP-3-ERROR: SRAM parity error (bytes 0:7) F0 %RSP-3-RESTART: cbus complex2. 软件奇偶校验错误和硬件奇偶校验错误的对比有两种不同类型的奇偶校验错误：软件奇偶校验错误这些错误发生在芯片的能量级改变(1或0),当被CPU调用，这些错误使 系

8、统进入CRASH，或者恢复掉系统。如果发生软件奇偶校验错误，不需要更换 主板或者其他部件。硬件奇偶校验错误这些错误发生在当芯片或主板出现损毁数据的错误的时候。如果出现硬件奇偶校验错误，需要重置或者更换影响的部件。当多奇偶校验错误发生在同一个地 址，则为一个硬件的奇偶校验错误。有很多复杂的案例很难鉴定。通常，当你看 到不只一个奇偶校验错误短期内发生在特殊的内存分区，可以考虑是一个硬件的奇偶校验错误。研究表明，软件奇偶校验错误比硬件奇偶校验错误高发10到100倍。因此CISCO强烈推荐在你更换硬件的时候等待观察下一次奇偶校验错误 这样减少对你的网络的冲击3. 排错方法路由器拥有不同位置的内存。理论

9、上，任何位置的内存都可以被奇偶校验错 误影响。但多数内存问题发生在DRAM （动态内存），或者SRAM上（共享内存）。 可以基于平台来判断哪些内存位置受到影响，并可以判断当重大奇偶校验错误发生的时候，你该更换什么部件。3.1 Cisco 4500 和 4700 平台在 Cisco 4500 和 4700 平台上，Cisco IOS?软件版本 12.2（10） and 12.2（10）T 以前无法得到Crash信息文件。有一种办法可以确定错误发生的位置， 就是察看con sole的log信息：restart reason（重启原因），并使用show version观察。3.1.1 DRAM上的奇

10、偶校验错误如果在CRASH后，你已经手工重新启动路由器，show version信息看上去 应该是这样的：System restarted by processor memory parity error at PC 0x601799C4, address 0x0System image file is flash:c4500-inr-mz.111-14.bin, booted via flash如果可以得到crash信息，或者con sole的log信息可以抓取，你可以看到类 似如下的信息显示：* Cache Error Excepti on *Cache Err Reg = 0xa0255

11、c61data referenee, primary cache, data field error , error on SysAD BusPC = 0xbfc0edc0, Cause = 0xb800, Status Reg = 0x34408007在DRAM上重复的发生奇偶校验错误，意味着机箱或者DRAM的问题。如果近期移动过机箱，或者任何的硬件改变，那么试着用重新安装DRAM来解决问题。否则更换DRAM来作为第一步排错方案。这应该可以解决奇偶校验错误。 如果路由器仍然Crash，需要更换机箱。3.1.2 SRAM上的奇偶校验错误如果在CRASH后，你已经手工重新启动路由器，show v

12、ersion信息看上去 应该是这样的：System restarted by shared memory parity error at PC 0x60130F40System image file is flash:c4500-inr-mz.111-14.bin, booted via flash如果可以得到crash信息，或者con sole的log信息可以抓取，你可以看到类 似如下的信息显示：* Shared Memory Parity Error *shared memory con trol register= 0xffe3error(s) reported for: CPU on

13、byte(s): 0/1或%PAR-1-FATAL: Shared memory parity errorshared memory status register= 0xFFEFerror(s) reported for: CPU on byte(s): 0/1 2/3或* Shared Memory Parity Error *shared memory con trol register= 0xffdferror(s) reported for: NIM1 on byte(s): 0/12/3注如果错误报告为CPU，则更换SRAM。如果错误报告为NIM（x），重新更换在（x）槽位的网络模

14、块。分配 给（x）槽位的SRAM可能会被影响到。如果这样重新更换 SRAM3.2 Route/Switch Processor (RSP), NetworkProcessing Engine (NPE), and Route Processor(RP)平台上在Cisco 4000系列平台上，问题可能发生在DRAM和SRAM上。问题也同 样可以由有缺陷板卡造成，例如(RP, RSP或NPE)。Cisco 7000和7500可以 报告奇偶校验错误产生于一个接口处理器的错误安装。检查crashi nfo文件，并在con sole的log信息显示如下之一的错误信息：3.2.1奇偶校验错误产生于DRAM

15、 或者SRAM ( MEMD)Error: primary data cache, fields: data, (SysAD)virtual addr 0x6058A000, physical addr(21:3) 0x18A000, vAddr(14:12) 0x2000virtual address corresp onds to main: data, cache word 0或Error: primary data cache, fields: data, SysADphy21:3 0x201880, va14:12 0x1000, addr 63E01880这些信息表明问题在RSP本

16、身，如果问题只出现一次，很可能是瞬间问题。3.2.2奇偶校验错误产生于SRAM%RSP-3-ERROR: MD error 0000008000000200%RSP-3-ERROR: QA parity error (bytes 0:3) 02%RSP-3-ERROR: MEMD parity error con diti on%RSP-2-QAERROR: reused or zero link error, write at addr 0100 (QA)log 22010000, data 00000000 00000000%RSP-3-RESTART: cbus complex或%RSP

17、-3-ERROR: CyBus error 01%RSP-3-ERROR: read data parity%RSP-3-ERR0R: read parity error (bytes 0:7) 20%RSP-3-ERROR: physical address (bits 20:15) 000000如果没有发现其他的，接口处理器在 SRAM写入的奇偶校验错误。那该问 题可能是SRAM本身。这样的话重新更换 RSP。如果存在另外一个奇偶校验错 误信息，那么问题可能是一个致命错误的板卡安装问题。文档参考链接：http:/www.cisco.eom/e n/US/customer/products/

18、hw/routers/ps341/products tech note09186a0080094793.shtml人过四十，已然不惑。我们听过别人的歌，也唱过自己的曲，但谁也逃不过岁月的审视，逃不过现实的残酷。如若，把心中的杂念抛开，苟且的日子里，其实也能无比诗意。借一些时光，寻一处宁静，听听花开，看看花落，翻一本爱读的书，悟一段哲人的赠言，原来，日升月落，一切还是那么美。洗不净的浮沉，留给雨天；悟不透的凡事，交给时间。很多时候，人生的遗憾，不是因为没有实现，而是沉于悲伤，错过了打开心结的时机。有人说工作忙、应酬多，哪有那么多的闲情逸致啊？记得鲁迅有句话:时间就像海绵里的水，只要挤总是有的。不明花语，却逢花季。一路行走，在渐行渐远的时光中，命运会给你一次次洗牌，但玩牌的始终是你自己。坦白的说，我们遇到困扰，经常会放大自己的苦，虐待自己，然后落个遍体鳞伤，可怜兮兮地向世界宣告：自己没救了！可是，那又怎样？因为，大多数人关心的都是自己。一个人在成年后，最畅快的事，莫过于经过一番努力后，重新认识自己，改变自己。学会了独自、沉默，不轻易诉说