Solved: 3560e crash after IOS upgrade from 12.2(35)SE2 to 15.2.SE5

peter.s.oh · ‎11-20-2013

Hi All

My 3560e crashed after IOS upgrade from 12.2(35)SE2 to 15.2.SE5. What am I doing wrong? Here is the crash debug info.

Switch#more crashinfo_1

Cisco IOS Software, C3560E Software (C3560E-UNIVERSALK9-M), Version 15.0(2)SE5, RELEASE SOFTWARE (fc1)

Technical Support: http://www.cisco.com/techsupport

Compiled Fri 25-Oct-13 12:57 by prod_rel_team

Debug Exception (Could be NULL pointer dereference) Exception (0x2000)!

SRR0 = 0x021FC258 SRR1 = 0x00029230 SRR2 = 0x02698C3C SRR3 = 0x00029230

ESR = 0x00000000 DEAR = 0x00000000 TSR = 0x84000000 DBSR = 0x10000000

CPU Register Context:

Vector = 0x00002000 PC = 0x02698C3C MSR = 0x00029230 CR = 0x24002042

LR = 0x02698BD8 CTR = 0x004CCE74 XER = 0x40000027

R0 = 0x02698BD8 R1 = 0x04B0F168 R2 = 0x00000000 R3 = 0x041AD2DC

R4 = 0x00000000 R5 = 0x00000000 R6 = 0x04B0F138 R7 = 0x04180000

R8 = 0x00029230 R9 = 0x04180000 R10 = 0x00029230 R11 = 0x00000000

R12 = 0x24002048 R13 = 0x00110000 R14 = 0x004F008C R15 = 0x00000000

R16 = 0x00000000 R17 = 0x00000000 R18 = 0x00000000 R19 = 0x00000000

R20 = 0x00000000 R21 = 0x00000000 R22 = 0x00000000 R23 = 0x00000000

R24 = 0x00000000 R25 = 0x00000000 R26 = 0x05306374 R27 = 0x020850EC

R28 = 0x0447B5EC R29 = 0x0374A118 R30 = 0x03D8D708 R31 = 0x00000000

Stack trace:

PC = 0x02698C3C, SP = 0x04B0F168

Frame 00: SP = 0x04B0F178 PC = 0x02698BD8

Frame 01: SP = 0x04B0F1A8 PC = 0x01C1ED94

Frame 02: SP = 0x04B0F1D0 PC = 0x027BCE98

Frame 03: SP = 0x04B0F200 PC = 0x020850F0

Frame 04: SP = 0x04B0F240 PC = 0x02015458

Frame 05: SP = 0x04B0F250 PC = 0x01C01DD4

Frame 06: SP = 0x04B0F270 PC = 0x01C01F94

Frame 07: SP = 0x04B0F288 PC = 0x01C020B0

Frame 08: SP = 0x04B0F2B8 PC = 0x004EFE94

Frame 09: SP = 0x04B0F3C0 PC = 0x004F00D4

Frame 10: SP = 0x04B0F3C8 PC = 0x02699EF8

Frame 11: SP = 0x00000000 PC = 0x0269464C

=====================================================================================================

Here is the output when it tries to load the IOS 15.2SE5

...done Initializing Flash.

done.

Loading "flash:/c3560e-universalk9-mz.150-2.SE5.bin"...@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@

File "flash:/c3560e-universalk9-mz.150-2.SE5.bin" uncompressed and installed, entry point: 0x3000

executing...

Restricted Rights Legend

Use, duplication, or disclosure by the Government is

subject to restrictions as set forth in subparagraph

(c) of the Commercial Computer Software - Restricted

Rights clause at FAR sec. 52.227-19 and subparagraph

(c) (1) (ii) of the Rights in Technical Data and Computer

Software clause at DFARS sec. 252.227-7013.

cisco Systems, Inc.

170 West Tasman Drive

San Jose, California 95134-1706

Cisco IOS Software, C3560E Software (C3560E-UNIVERSALK9-M), Version 15.0(2)SE5, RELEASE SOFTWARE (fc1)

Technical Support: http://www.cisco.com/techsupport

Compiled Fri 25-Oct-13 12:57 by prod_rel_team

HULC:Collect Entropy thread starting on box...

Initializing flashfs...

Using driver version 3 for media type 2

mifs[4]: 12 files, 1 directories

mifs[4]: Total bytes : 1835008

mifs[4]: Bytes used : 758272

mifs[4]: Bytes available : 1076736

mifs[4]: mifs fsck took 0 seconds.

mifs[4]: Initialization complete.

mifs[5]: 0 files, 1 directories

mifs[5]: Total bytes : 3932160

mifs[5]: Bytes used : 1024

mifs[5]: Bytes available : 3931136

mifs[5]: mifs fsck took 0 seconds.

mifs[5]: Initialization complete.

mifs[6]: 5 files, 1 directories

mifs[6]: Total bytes : 262144

mifs[6]: Bytes used : 9216

mifs[6]: Bytes available : 252928

mifs[6]: mifs fsck took 0 seconds.

mifs[6]: Initialization complete.

mifs[7]: 5 files, 1 directories

mifs[7]: Total bytes : 262144

mifs[7]: Bytes used : 9216

mifs[7]: Bytes available : 252928

mifs[7]: mifs fsck took 0 seconds.

mifs[7]: Initialization complete.

mifs[8]: 464 files, 10 directories

mifs[8]: Total bytes : 57409536

mifs[8]: Bytes used : 47053824

mifs[8]: Bytes available : 10355712

mifs[8]: mifs fsck took 0 seconds.

mifs[8]: Initialization complete.

...done Initializing flashfs.

Checking for Bootloader upgrade..

Boot Loader upgrade not required (Stage 2)

FIPS: Flash Key Check : Begin

FIPS: Flash Key Check : End, Not Found, FIPS Mode Not Enabled

POST: CPU MIC register Tests : Begin

POST: CPU MIC register Tests : End, Status Passed

POST: MA BIST : Begin

POST: MA BIST : End, Status Passed

POST: TCAM BIST : Begin

POST: TCAM BIST : End, Status Passed

POST: SF ASIC BIST : Begin

POST: SF ASIC BIST : End, Status Passed

POST: Switch Fabric Memory Tests : Begin

POST: Switch Fabric Memory Tests : End, Status Passed

POST: CPU MIC interface Loopback Tests : Begin

POST: CPU MIC interface Loopback Tests : End, Status Passed

POST: PortASIC RingLoopback Tests : Begin

POST: PortASIC RingLoopback Tests : End, Status Passed

extracting front_end/front_end_ucode_info (309 bytes)

Software version is different so extracting

the whole bundle

front_end/ (directory)

extracting front_end/fe_type_4 (78520 bytes)

extracting front_end/fe_type_3 (78520 bytes)

extracting front_end/fe_type_2 (78520 bytes)

extracting front_end/fe_type_5_0 (594412 bytes)

extracting front_end/fe_type_5_3 (84814 bytes)

extracting front_end/fe_type_5_2 (27086 bytes)

extracting front_end/fe_type_5_1 (359654 bytes)

extracting front_end/front_end_ucode_info (309 bytes)

extracting ucode_info (77 bytes)

% Info: subordinate ucode is already extracted.

validblock_diagnose, code = 12

current memory block, bp = 0x3FA6BE8,

memorypool type is Processor

data check, ptr = 0x3FA6C10

next memory block, bp = 0x3FB2E40,

memorypool type is Processor

data check, ptr = 0x3FB2E68

previous memory block, bp = 0x3F9F494,

memorypool type is Processor

data check, ptr = 0x3F9F4BC

========= Dump bp = 0x3FA6BE8 ======================

3FA6AE8: 0 0 0 0 0 0 0 0

3FA6B08: 0 0 0 0 0 0 0 0

3FA6B28: 0 0 0 0 0 0 0 0

3FA6B48: 0 0 0 0 0 0 0 0

3FA6B68: 0 0 0 0 0 0 0 0

3FA6B88: 0 0 0 0 0 0 0 0

3FA6BA8: 0 0 0 0 0 0 0 0

3FA6BC8: 0 0 0 0 0 0 0 FD0110DF

3FA6BE8: AB1234CD FFFE0000 0 3749454 208738C 3FB2E40 3F9F4A8 6118

3FA6C08: 0 2087478 DEADBEEF 2087478 0 D0D0D0D 447BA70 447BA6C

3FA6C28: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FA6C48: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FA6C68: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FA6C88: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FA6CA8: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FA6CC8: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

========= Dump bp->next = 0x3FB2E40 ======================

3FB2D40: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2D60: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2D80: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2DA0: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2DC0: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2DE0: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2E00: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2E20: D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D D0D0D0D

3FB2E40: AB1234CD 10000 1 4D93260 1C18308 3FB3060 3FA6BFC 800000FC

3FB2E60: 1 0 0 4DA97CC 4D93210 4AA5268 4D93210 8

3FB2E80: 8 28 28 8 0 0 0 20

3FB2EA0: 83 447B5EC 0 0 0 0 6D696673 2066696C

3FB2EC0: 655F6D61 70206200 3FB2EFC 3FB303C 0 0 0 3FB2EFC

3FB2EE0: 3FB2F24 3FB2F4C 3FB2F74 3FB2F9C 3FB2FC4 3FB2FEC 3FB3014 EF4321CD

3FB2F00: 0 0 0 0 0 0 0 0

3FB2F20: 0 EF4321CD 0 0 0 0 0 0

========== Dump bp->previous = 0x3F9F4A8 =====================

3F9F3A8: 1 2083F6C 30001 70E 0 1 3F9F3D4 3AA6B08

3F9F3C8: 56 1A1A1A1A 0 3F9F3E8 3AA6AE0 47 3F9F3FC 0

3F9F3E8: 3F9F410 3AA6AF4 45 3F9F424 0 3489A04 3832A64 3F9F430

3F9F408: 180004 383286C 0 0 1A 3F9F43C 0 3849508

3F9F428: 3832A70 3F9F44C FF000000 0 0 49CF18 0 0

3F9F448: 0 FF000000 0 0 C15C0515 C15C0515 1 0

3F9F468: 0 3832D74 1 0 0 2084854 30001 70F

3F9F488: 3832D84 0 0 AB1234CD 0 0 374943C 1C1C464

3F9F4A8: 3FA6BE8 530B958 80003B96 1 0 0 0 0

3F9F4C8: 0 0 0 0 0 0 0 0

3F9F4E8: 0 0 0 0 0 0 0 0

3F9F508: 0 0 0 0 0 0 0 0

3F9F528: 0 0 0 0 0 0 0 0

3F9F548: 0 0 0 0 0 0 0 0

3F9F568: 0 0 0 0 0 0 0 0

3F9F588: 0 0 0 0 0 0 0 0

============================================

%Software-forced reload

01:28:40 UTC Wed Mar 30 2011: Unexpected exception to CPUvector 2000, PC = 2698C3C

-Traceback= 0x2698C3Cz 0x2698BD8z 0x27BCE98z 0x20850F0z 0x2015458z 0x1C01DD4z 0x1C01F94z 0x1C020B0z 0x4EFE94z 0x4F00D4z 0x2699EF8z 0x269464Cz

Writing crashinfo to flash:/crashinfo_ext/crashinfo_ext_3

01:28:43 UTC Wed Mar 30 2011: Unexpected exception to CPUvector 2000, PC = 1C41554

-Traceback= 0x1C41554z 0x1C18280z 0x2699EF8z 0x269464Cz

=== Flushing messages (01:28:43 UTC Wed Mar 30 2011) ===

Buffered messages:

Queued messages:

Mar 30 01:28:43.263: %SYS-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.

*Mar 1 00:00:35.139: Read env variable - LICENSE_BOOT_LEVEL =

Mar 30 01:27:40.927: %IOS_LICENSE_IMAGE_APPLICATION-6-LICENSE_LEVEL: Module name = c3560e Next reboot level = ipbase and License = ipbase

Mar 30 01:28:40.243: %SYS-2-FREEFREE: Attempted to free unassigned memory at 3FA6C10, alloc 208738C, dealloc 2087478

-Traceback= 4E0750z 1C1ED74z 27BCE98z 20850F0z 2015458z 1C01DD4z 1C01F94z 1C020B0z 4EFE94z 4F00D4z 2699EF8z 269464Cz

Mar 30 01:28:40.243: %SYS-6-MTRACE: mallocfree: addr, pc

3FA6C10,20850EC 51B52C4,2087480 3FA6FB4,60005F46 3FA6C10,2087478

3FA6C10,208738C 3FA6C10,400001BE 51B52C4,20872F4 51B52C4,3000000E

Mar 30 01:28:40.243: %SYS-6-MTRACE: mallocfree: addr, pc

52F7298,5000A1E0 530B680,1C18468 53075B8,60002050 52F7298,50006118

53034F0,1C33C9C 53075B8,1C18468 52FF428,60002050 52F7298,50002050

Mar 30 01:28:40.243: %SYS-6-BLKINFO: Attempt to free a block that is in use blk 3FA6BE8, words 24856, alloc 208738C, Free, dealloc 2087478, rfcnt 0

-Traceback= 4E0750z 1C198BCz 1C1ED8Cz 27BCE98z 20850F0z 2015458z 1C01DD4z 1C01F94z 1C020B0z 4EFE94z 4F00D4z 2699EF8z 269464Cz

Mar 30 01:28:40.243: %SYS-6-MEMDUMP: 0x3FA6BE8: 0xAB1234CD 0xFFFE0000 0x0 0x3749454

Mar 30 01:28:40.243: %SYS-6-MEMDUMP: 0x3FA6BF8: 0x208738C 0x3FB2E40 0x3F9F4A8 0x6118

Mar 30 01:28:40.243: %SYS-6-MEMDUMP: 0x3FA6C08: 0x0 0x2087478 0x0 0x0

Cisco IOS Software, C3560E Software (C3560E-UNIVERSALK9-M), Version 15.0(2)SE5, RELEASE SOFTWARE (fc1)

Technical Support: http://www.cisco.com/techsupport

Compiled Fri 25-Oct-13 12:57 by prod_rel_team

Debug Exception (Could be NULL pointer dereference) Exception (0x2000)!

SRR0 = 0x021FC258 SRR1 = 0x00029230 SRR2 = 0x02698C3C SRR3 = 0x00029230

ESR = 0x00000000 DEAR = 0x00000000 TSR = 0x84000000 DBSR = 0x10000000

CPU Register Context:

Vector = 0x00002000 PC = 0x02698C3C MSR = 0x00029230 CR = 0x35003053

LR = 0x02698BD8 CTR = 0x004CCE74 XER = 0xC0000020

R0 = 0x02698BD8 R1 = 0x04AF6140 R2 = 0x00000000 R3 = 0x041AD2DC

R4 = 0x00000000 R5 = 0x00000000 R6 = 0x04AF6110 R7 = 0x04180000

R8 = 0x00029230 R9 = 0x04180000 R10 = 0x00029230 R11 = 0x00000000

R12 = 0x35003059 R13 = 0x00110000 R14 = 0x004F008C R15 = 0x00000000

R16 = 0x00000000 R17 = 0x00000000 R18 = 0x00000000 R19 = 0x00000000

R20 = 0x00000000 R21 = 0x00000000 R22 = 0x00000000 R23 = 0x00000000

R24 = 0x00000000 R25 = 0x00000000 R26 = 0x03FA6C10 R27 = 0x020850EC

R28 = 0x0447B5EC R29 = 0x0374A118 R30 = 0x03D8D708 R31 = 0x00000000

Stack trace:

PC = 0x02698C3C, SP = 0x04AF6140

Frame 00: SP = 0x04AF6150 PC = 0x02698BD8

Frame 01: SP = 0x04AF6180 PC = 0x01C1ED94

Frame 02: SP = 0x04AF61A8 PC = 0x027BCE98

Frame 03: SP = 0x04AF61D8 PC = 0x020850F0

Frame 04: SP = 0x04AF6218 PC = 0x02015458

Frame 05: SP = 0x04AF6228 PC = 0x01C01DD4

Frame 06: SP = 0x04AF6248 PC = 0x01C01F94

Frame 07: SP = 0x04AF6260 PC = 0x01C020B0

Frame 08: SP = 0x04AF6290 PC = 0x004EFE94

Frame 09: SP = 0x04AF6398 PC = 0x004F00D4

Frame 10: SP = 0x04AF63A0 PC = 0x02699EF8

Frame 11: SP = 0x00000000 PC = 0x0269464C

Switch uptime is 1 minute, 40 seconds

cisco WS-C3560E-24PD (PowerPC405) processor (revision C0) with 131072K bytes of memory.

Processor board ID CAT1106R1FP

Leo Laohoo · ‎11-20-2013

%Software-forced reload

Downgrade to 15.0(2)SE4 and stay there. Don't go to SE5.

View solution in original post

Sandeep Choudhary · ‎11-20-2013

HI Peter,

This is known bug in 3560 swicth:

This issue is documented in Cisco bug ID CSCsa72400.

Core issue

A Cisco Catalyst 3560 switch that runs Cisco IOS Software Release 12.2(20)SE4 or later reloads or resets with the Debug Exception (Could be NULL pointer dereference) Exception (0x2000)! error message.

This problem occurs when the Powered Device (PD) is detected or classified as an overcurrent class.

For more details please check this document:

https://supportforums.cisco.com/docs/DOC-4236

Hope it helsp.

Reagrds

Don't forget to rate helpful posts.

If you satisfied with the answer then please mark as answered.

Leo Laohoo · ‎11-20-2013

%Software-forced reload

Downgrade to 15.0(2)SE4 and stay there. Don't go to SE5.

peter.s.oh · ‎11-27-2013

Thanks everyone! I downgraded to

15.0(2)SE4 and switch seems OK now.

Leo Laohoo · ‎11-27-2013

Thanks for taking the time to rate our posts, Peter.