Re: Catalyst 3750X crashing on boot "Unexpected exception to CPUvector 200"

andrew.butterworth · ‎01-25-2021

I have a couple of Catalyst 3750X switches (WS-C3750X-48T-S) that have recently been decommissioned and I am planning to reuse them for some lab work.

The 1st one I booted up is in a boot loop, however I can boot to ROMMON. The 2nd one boots fine.

I think there is a hardware fault with the 1st one but wanted to check its not actually software or ROMMON variables that are causing the issue. They both had 12.2(55)SE1 IOS on them.

When it boots I see the following on the console

Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.
Initializing Flash...
mifs[2]: 10 files, 1 directories
mifs[2]: Total bytes : 2097152
mifs[2]: Bytes used : 612352
mifs[2]: Bytes available : 1484800
mifs[2]: mifs fsck took 1 seconds.
mifs[3]: 0 files, 1 directories
mifs[3]: Total bytes : 4194304
mifs[3]: Bytes used : 1024
mifs[3]: Bytes available : 4193280
mifs[3]: mifs fsck took 4 seconds.
mifs[4]: 5 files, 1 directories
mifs[4]: Total bytes : 524288
mifs[4]: Bytes used : 10240
mifs[4]: Bytes available : 514048
mifs[4]: mifs fsck took 1 seconds.
mifs[5]: 5 files, 1 directories
mifs[5]: Total bytes : 524288
mifs[5]: Bytes used : 10240
mifs[5]: Bytes available : 514048
mifs[5]: mifs fsck took 0 seconds.
mifs[6]: 443 files, 8 directories
mifs[6]: Total bytes : 57671680
mifs[6]: Bytes used : 34153472
mifs[6]: Bytes available : 23518208
mifs[6]: mifs fsck took 49 seconds.
...done Initializing Flash.
done.
Loading "flash:/c3750e-universalk9-mz.122-55.SE1/c3750e-universalk9-mz.122-55.SE1.bin"...@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
File "flash:/c3750e-universalk9-mz.122-55.SE1/c3750e-universalk9-mz.122-55.SE1.bin" uncompressed and installed, entry point: 0x3000
executing...

Restricted Rights Legend

Use, duplication, or disclosure by the Government is
subject to restrictions as set forth in subparagraph
(c) of the Commercial Computer Software - Restricted
Rights clause at FAR sec. 52.227-19 and subparagraph
(c) (1) (ii) of the Rights in Technical Data and Computer
Software clause at DFARS sec. 252.227-7013.

cisco Systems, Inc.
170 West Tasman Drive
San Jose, California 95134-1706



Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 12.2(55)SE1, RELEASE SOFTWARE (fc1)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2010 by Cisco Systems, Inc.
Compiled Thu 02-Dec-10 06:08 by prod_rel_team
Image text-base: 0x00003000, data-base: 0x02800000

Initializing flashfs...
Using driver version 1 for media type 2
mifs[3]: 10 files, 1 directories
mifs[3]: Total bytes : 2097152
mifs[3]: Bytes used : 612352
mifs[3]: Bytes available : 1484800
mifs[3]: mifs fsck took 0 seconds.
mifs[3]: Initialization complete.

mifs[4]: 0 files, 1 directories
mifs[4]: Total bytes : 4194304
mifs[4]: Bytes used : 1024
mifs[4]: Bytes available : 4193280
mifs[4]: mifs fsck took 0 seconds.
mifs[4]: Initialization complete.

mifs[5]: 5 files, 1 directories
mifs[5]: Total bytes : 524288
mifs[5]: Bytes used : 10240
mifs[5]: Bytes available : 514048
mifs[5]: mifs fsck took 0 seconds.
mifs[5]: Initialization complete.

mifs[6]: 5 files, 1 directories
mifs[6]: Total bytes : 524288
mifs[6]: Bytes used : 10240
mifs[6]: Bytes available : 514048
mifs[6]: mifs fsck took 0 seconds.
mifs[6]: Initialization complete.

mifs[7]: 443 files, 8 directories
mifs[7]: Total bytes : 57671680
mifs[7]: Bytes used : 34153472
mifs[7]: Bytes available : 23518208
mifs[7]: mifs fsck took 1 seconds.
mifs[7]: Initialization complete.

...done Initializing flashfs.

Checking for Bootloader upgrade.. not needed
POST: CPU MIC register Tests : Begin
POST: CPU MIC register Tests : End, Status Passed

POST: MA BIST : Begin
POST: MA BIST : End, Status Passed

POST: TCAM BIST : Begin
POST: TCAM BIST : End, Status Passed

POST: SF ASIC BIST : Begin
POST: SF ASIC BIST : End, Status Passed

POST: Switch Fabric Memory Tests : Begin
POST: Switch Fabric Memory Tests : End, Status Passed

POST: CPU MIC interface Loopback Tests : Begin
POST: CPU MIC interface Loopback Tests : End, Status Passed

POST: PortASIC RingLoopback Tests : Begin
POST: PortASIC RingLoopback Tests : End, Status Passed

extracting front_end/front_end_ucode_info (309 bytes)
Waiting for Stack Master Election...
POST: Thermal, Fan Tests : Begin
POST: Thermal, Fan Tests : End, Status Passed

POST: PortASIC Port Loopback Tests : Begin
POST: PortASIC Port Loopback Tests : End, Status Passed

POST: EMAC Loopback Tests : Begin
POST: EMAC Loopback Tests : End, Status Passed

Election Complete
Switch 1 booting as Master
Waiting for Port download...Complete



00:01:02 UTC Mon Mar 1 1993: Unexpected exception to CPUvector 300, PC = 137E9F8
-Traceback= 137E9F8 137C024 13793C4 150BBC4 19C7570 19C7518 19CD2F0 19CD608 19C7620 1390F20

Writing crashinfo to flash:/crashinfo_ext/crashinfo_ext_1

=== Flushing messages (00:01:04 UTC Mon Mar 1 1993) ===

Buffered messages:
Queued messages:
*Mar 1 00:01:04.214: %SYS-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.

*Mar 1 00:00:04.697: Read env variable - LICENSE_BOOT_LEVEL =
*Mar 1 00:00:07.549: %IOS_LICENSE_IMAGE_APPLICATION-6-LICENSE_LEVEL: Module name = c3750x Next reboot level = ipservices and License = ipservices
*Mar 1 00:01:00.045: %STACKMGR-4-SWITCH_ADDED: Switch 1 has been ADDED to the stack
*Mar 1 00:01:02.201: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan1, changed state to down
Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 12.2(55)SE1, RELEASE SOFTWARE (fc1)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2010 by Cisco Systems, Inc.
Compiled Thu 02-Dec-10 06:08 by prod_rel_team

Data Access Exception (0x0300)!
SRR0 = 0x0137E9F8 SRR1 = 0x00029230 SRR2 = 0x0132A2E0 SRR3 = 0x00029230
ESR = 0x00800000 DEAR = 0x00000000 TSR = 0x84000000 DBSR = 0x00000000

CPU Register Context:
Vector = 0x00000300 PC = 0x0137E9F8 MSR = 0x00029230 CR = 0x50000005
LR = 0x0137E920 CTR = 0x019CD7E4 XER = 0xE0000005
R0 = 0x00000000 R1 = 0x048012E0 R2 = 0x00000000 R3 = 0x00000000
R4 = 0x00000000 R5 = 0x00001000 R6 = 0x00000001 R7 = 0x00000003
R8 = 0x03BF6C70 R9 = 0x00000000 R10 = 0x00029230 R11 = 0x00010000
R12 = 0x30000003 R13 = 0x0B98279C R14 = 0x00000080 R15 = 0x00000000
R16 = 0x00000002 R17 = 0x00000000 R18 = 0x0469E944 R19 = 0x00000000
R20 = 0x00000000 R21 = 0x03AB5384 R22 = 0x00000001 R23 = 0x00000000
R24 = 0x00000000 R25 = 0x02D60000 R26 = 0x048012E8 R27 = 0x03A00000
R28 = 0x05588D20 R29 = 0x00000003 R30 = 0x00000001 R31 = 0x00000000

Stack trace:
PC = 0x0137E9F8, SP = 0x048012E0
Frame 00: SP = 0x04801310 PC = 0x0137E920
Frame 01: SP = 0x04801380 PC = 0x0137C024
Frame 02: SP = 0x048013A0 PC = 0x013793C4
Frame 03: SP = 0x048013B0 PC = 0x0150BBC4
Frame 04: SP = 0x03BF4794 PC = 0x019C7570
Frame 05: SP = 0x03BF47A4 PC = 0x019C7518
Frame 06: SP = 0x03BF47CC PC = 0x019CD2F0
Frame 07: SP = 0x03BF47D4 PC = 0x019CD608
Frame 08: SP = 0x03BF4820 PC = 0x019C7620
Frame 09: SP = 0x0469E7F8 PC = 0x01390F20
Frame 10: SP = 0x0469E828 PC = 0xFFFFFFFE
Frame 11: SP = 0x0469E840 PC = 0x01391194
Frame 12: SP = 0x0469E848 PC = 0x0138EE78
Frame 13: SP = 0x0469E880 PC = 0x01377F50
Frame 14: SP = 0x0469E908 PC = 0x01385AA4
Frame 15: SP = 0x0469E988 PC = 0x0138EA88

I couldn't find a USB stick that it would recognise from ROMMON so I copied the latest 15.2(4)E10 .bin image via XMODEM @ 115200Kbps to the root of the flash: and manually booted from it. It took a while as it went through the Front-end Microcode updates, however it completed these updates without issues and then rebooted as expected

% Front-end Microcode IMG MGR: HW image is upgraded. MCU reset causes the switch to reload

When it boots now I get the following on the console

Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.
Initializing Flash...
mifs[2]: 10 files, 1 directories
mifs[2]: Total bytes : 2097152
mifs[2]: Bytes used : 612352
mifs[2]: Bytes available : 1484800
mifs[2]: mifs fsck took 1 seconds.
mifs[3]: 0 files, 1 directories
mifs[3]: Total bytes : 4194304
mifs[3]: Bytes used : 1024
mifs[3]: Bytes available : 4193280
mifs[3]: mifs fsck took 4 seconds.
mifs[4]: 5 files, 1 directories
mifs[4]: Total bytes : 524288
mifs[4]: Bytes used : 10240
mifs[4]: Bytes available : 514048
mifs[4]: mifs fsck took 1 seconds.
mifs[5]: 5 files, 1 directories
mifs[5]: Total bytes : 524288
mifs[5]: Bytes used : 10240
mifs[5]: Bytes available : 514048
mifs[5]: mifs fsck took 0 seconds.
mifs[6]: 14 files, 3 directories
mifs[6]: Total bytes : 57671680
mifs[6]: Bytes used : 27764224
mifs[6]: Bytes available : 29907456
mifs[6]: mifs fsck took 45 seconds.
...done Initializing Flash.
done.
Loading "flash:/c3750e-universalk9-mz.152-4.E10.bin"...@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
File "flash:/c3750e-universalk9-mz.152-4.E10.bin" uncompressed and installed, entry point: 0x3000
executing...

Restricted Rights Legend

Use, duplication, or disclosure by the Government is
subject to restrictions as set forth in subparagraph
(c) of the Commercial Computer Software - Restricted
Rights clause at FAR sec. 52.227-19 and subparagraph
(c) (1) (ii) of the Rights in Technical Data and Computer
Software clause at DFARS sec. 252.227-7013.

cisco Systems, Inc.
170 West Tasman Drive
San Jose, California 95134-1706



Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 15.2(4)E10, RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2020 by Cisco Systems, Inc.
Compiled Tue 31-Mar-20 13:22 by prod_rel_team
Initializing flashfs...
Using driver version 4 for media type 1
Using driver version 4 for media type 2
mifs[6]: 10 files, 1 directories
mifs[6]: Total bytes : 2097152
mifs[6]: Bytes used : 612352
mifs[6]: Bytes available : 1484800
mifs[6]: mifs fsck took 1 seconds.
mifs[6]: Initialization complete.

mifs[7]: 0 files, 1 directories
mifs[7]: Total bytes : 4194304
mifs[7]: Bytes used : 1024
mifs[7]: Bytes available : 4193280
mifs[7]: mifs fsck took 0 seconds.
mifs[7]: Initialization complete.

mifs[8]: 5 files, 1 directories
mifs[8]: Total bytes : 524288
mifs[8]: Bytes used : 10240
mifs[8]: Bytes available : 514048
mifs[8]: mifs fsck took 0 seconds.
mifs[8]: Initialization complete.

mifs[9]: 5 files, 1 directories
mifs[9]: Total bytes : 524288
mifs[9]: Bytes used : 10240
mifs[9]: Bytes available : 514048
mifs[9]: mifs fsck took 1 seconds.
mifs[9]: Initialization complete.

mifs[10]: 14 files, 3 directories
mifs[10]: Total bytes : 57671680
mifs[10]: Bytes used : 27764224
mifs[10]: Bytes available : 29907456
mifs[10]: mifs fsck took 0 seconds.
mifs[10]: Initialization complete.

...done Initializing flashfs.
Checking for Bootloader upgrade..
Boot Loader upgrade not required (Stage 2)


FIPS: Flash Key Check : Begin
FIPS: Flash Key Check : End, Not Found, FIPS Mode Not Enabled

POST: CPU MIC register Tests : Begin
POST: CPU MIC register Tests : End, Status Passed

POST: MA BIST : Begin
POST: MA BIST : End, Status Passed

POST: TCAM BIST : Begin
POST: TCAM BIST : End, Status Passed

POST: SF ASIC BIST : Begin
POST: SF ASIC BIST : End, Status Passed

POST: Switch Fabric Memory Tests : Begin
POST: Switch Fabric Memory Tests : End, Status Passed

POST: CPU MIC interface Loopback Tests : Begin
POST: CPU MIC interface Loopback Tests : End, Status Passed

POST: PortASIC RingLoopback Tests : Begin
POST: PortASIC RingLoopback Tests : End, Status Passed

extracting front_end/front_end_ucode_info (309 bytes)
Waiting for Stack Master Election...
POST: Thermal, Fan Tests : Begin
POST: Thermal, Fan Tests : End, Status Passed

POST: PortASIC Port Loopback Tests : Begin
POST: PortASIC Port Loopback Tests : End, Status Passed

POST: PortASIC Macsec Loopback Tests : Begin
POST: PortASIC Macsec Loopback Tests : End, Status Passed

POST: EMAC Loopback Tests : Begin
POST: EMAC Loopback Tests : End, Status Passed

Election Complete
Switch 1 booting as Master
Waiting for Port download...Complete



00:01:23 UTC Mon Jan 2 2006: Unexpected exception to CPUvector 300, PC = 2735C8C
-Traceback= 0x2735C8Cz 0x2731900z 0x2731B44z 0x28BC1C4z 0x2D9F404z 0x2D9F3ACz 0x2DA4F40z 0x2DA50B8z 0x2D9F4B4z 0x270F288z 0x2744C38z 0x2742284z 0x27341DCz 0x273AF7Cz 0x27426D0z 0x27434C4z

Writing crashinfo to flash:/crashinfo_ext/crashinfo_ext_9

=== Flushing messages (00:01:25 UTC Mon Jan 2 2006) ===

Buffered messages:
Queued messages:
*Jan 2 00:01:25.396: %SYS-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.

*Mar 1 00:00:06.987: Read env variable - LICENSE_BOOT_LEVEL =
*Jan 2 00:00:06.366: %IOS_LICENSE_IMAGE_APPLICATION-6-LICENSE_LEVEL: Module name = c3750x Next reboot level = ipservices and License = ipservices
*Jan 2 00:01:18.693: %STACKMGR-4-SWITCH_ADDED: Switch 1 has been ADDED to the stack
*Jan 2 00:01:21.067: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan1, changed state to down
*Jan 2 00:01:21.067: %LINEPROTO-5-UPDOWN: Line protocol on Interface FastEthernet0, changed state to down
Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 15.2(4)E10, RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2020 by Cisco Systems, Inc.
Compiled Tue 31-Mar-20 13:22 by prod_rel_team

Data Access Exception (0x0300)!
SRR0 = 0x02735C8C SRR1 = 0x00029230 SRR2 = 0x03482DD0 SRR3 = 0x00029230
ESR = 0x00800000 DEAR = 0x00000000 TSR = 0x84000000 DBSR = 0x00000000

CPU Register Context:
Vector = 0x00000300 PC = 0x02735C8C MSR = 0x00029230 CR = 0x30053055
LR = 0x02735BD0 CTR = 0x02DA4D38 XER = 0xE0000007
R0 = 0x00000000 R1 = 0x06A1D0D8 R2 = 0x00000000 R3 = 0x00000000
R4 = 0x00050100 R5 = 0x00001000 R6 = 0x00000001 R7 = 0x052C0000
R8 = 0x00029230 R9 = 0x04620000 R10 = 0x00008000 R11 = 0x05870000
R12 = 0x30000053 R13 = 0x0B98279C R14 = 0x00000080 R15 = 0x067C83EC
R16 = 0x04622B64 R17 = 0x04622B18 R18 = 0x04622B40 R19 = 0x06A1D124
R20 = 0x00000000 R21 = 0x00000000 R22 = 0x00001000 R23 = 0x00000001
R24 = 0x07BD50A8 R25 = 0x04623484 R26 = 0x00000000 R27 = 0x046234C4
R28 = 0x06A1D0E3 R29 = 0x07BD5130 R30 = 0x00000001 R31 = 0x00000000

Stack trace:
PC = 0x02735C8C, SP = 0x06A1D0D8
Frame 00: SP = 0x06A1D110 PC = 0x02735BD0
Frame 01: SP = 0x06A1D188 PC = 0x02731900
Frame 02: SP = 0x06A1D1B0 PC = 0x02731B44
Frame 03: SP = 0x06A1D1D0 PC = 0x028BC1C4
Frame 04: SP = 0x05AEFBE8 PC = 0x02D9F404
Frame 05: SP = 0x05AEFBF8 PC = 0x02D9F3AC
Frame 06: SP = 0x05AEFC28 PC = 0x02DA4F40
Frame 07: SP = 0x05AEFC38 PC = 0x02DA50B8
Frame 08: SP = 0x05AEFC84 PC = 0x02D9F4B4
Frame 09: SP = 0x067C82B8 PC = 0x0270F288
Frame 10: SP = 0x067C82F8 PC = 0x02744C38
Frame 11: SP = 0x067C8300 PC = 0x02742284
Frame 12: SP = 0x067C8340 PC = 0x027341DC
Frame 13: SP = 0x067C83D8 PC = 0x0273AF7C
Frame 14: SP = 0x067C8460 PC = 0x027426D0
Frame 15: SP = 0x067C8470 PC = 0x027434C4


Switch uptime is 1 minute, 35 seconds

cisco WS-C3750X-48 (PowerPC405) processor (revision B0) with 262144K bytes of memory.
Processor board ID FDO1514Z066



00:01:28 UTC Mon Jan 2 2006: Unexpected exception to CPUvector 200, PC = 2F2BB70
-Traceback= 0x2F2BB70z 0x30BF2C4z

Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 15.2(4)E10, RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2020 by Cisco Systems, Inc.
Compiled Tue 31-Mar-20 13:22 by prod_rel_team

Data Access Exception (0x0300)!
SRR0 = 0x02735C8C SRR1 = 0x00029230 SRR2 = 0x03482DD0 SRR3 = 0x00029230
ESR = 0x00800000 DEAR = 0x00000000 TSR = 0x84000000 DBSR = 0x00000000

CPU Register Context:
Vector = 0x00000300 PC = 0x02735C8C MSR = 0x00029230 CR = 0x30053055
LR = 0x02735BD0 CTR = 0x02DA4D38 XER = 0xE0000007
R0 = 0x00000000 R1 = 0x06A1D0D8 R2 = 0x00000000 R3 = 0x00000000
R4 = 0x00050100 R5 = 0x00001000 R6 = 0x00000001 R7 = 0x052C0000
R8 = 0x00029230 R9 = 0x04620000 R10 = 0x00008000 R11 = 0x05870000
R12 = 0x30000053 R13 = 0x0B98279C R14 = 0x00000080 R15 = 0x067C83EC
R16 = 0x04622B64 R17 = 0x04622B18 R18 = 0x04622B40 R19 = 0x06A1D124
R20 = 0x00000000 R21 = 0x00000000 R22 = 0x00001000 R23 = 0x00000001
R24 = 0x07BD50A8 R25 = 0x04623484 R26 = 0x00000000 R27 = 0x046234C4
R28 = 0x06A1D0E3 R29 = 0x07BD5130 R30 = 0x00000001 R31 = 0x00000000

Stack trace:
PC = 0x02735C8C, SP = 0x06A1D0D8
Frame 00: SP = 0x06A1D110 PC = 0x02735BD0
Frame 01: SP = 0x06A1D188 PC = 0x02731900
Frame 02: SP = 0x06A1D1B0 PC = 0x02731B44
Frame 03: SP = 0x06A1D1D0 PC = 0x028BC1C4
Frame 04: SP = 0x05AEFBE8 PC = 0x02D9F404
Frame 05: SP = 0x05AEFBF8 PC = 0x02D9F3AC
Frame 06: SP = 0x05AEFC28 PC = 0x02DA4F40
Frame 07: SP = 0x05AEFC38 PC = 0x02DA50B8
Frame 08: SP = 0x05AEFC84 PC = 0x02D9F4B4
Frame 09: SP = 0x067C82B8 PC = 0x0270F288
Frame 10: SP = 0x067C82F8 PC = 0x02744C38
Frame 11: SP = 0x067C8300 PC = 0x02742284
Frame 12: SP = 0x067C8340 PC = 0x027341DC
Frame 13: SP = 0x067C83D8 PC = 0x0273AF7C
Frame 14: SP = 0x067C8460 PC = 0x027426D0
Frame 15: SP = 0x067C8470 PC = 0x027434C4


Switch uptime is 1 minute, 38 seconds

cisco WS-C3750X-48 (PowerPC405) processor (revision B0) with 262144K bytes of memory.
Processor board ID FDO1514Z066


Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.

I don't see this line on other switches " ERR: USB device not responding, giving up (status=0) " so wondered if there is something in this? FIPS or some other ROMMON setting?

Leo Laohoo · ‎01-25-2021

Are there any NM attached?

andrew.butterworth · ‎01-25-2021

There was a C3KX-NM-10G installed, however I have removed this and there is no difference in the boot behaviour.

I think if anything its this error message about the USB device that appears with the 1st boot messages on the console as I don't see this on other switches.

Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

  ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.

Leo Laohoo · ‎01-25-2021

@andrew.butterworth wrote:
I have a couple of Catalyst 3750X switches (WS-C3750X-48T-S) that have recently been decommissioned and I am planning to reuse them for some lab work.

Pop the lid.
Remove the DRAMs and clean the ends.

Pop them back in.

andrew.butterworth · ‎01-25-2021

There aren't any DIMMs or anything else that might come loose. This has come out of a very clean DC so is almost immaculate inside.

Leo Laohoo · ‎01-25-2021

@andrew.butterworth wrote:
Writing crashinfo to flash:/crashinfo_ext/crashinfo_ext_9

If you can boot the switch into ROMMON can you have a look if there is still room in the flash?

marce1000 · ‎01-25-2021

- Check current software version being used, use a gold-starred or advisory release, if applicable and or feasible , check if the problem persists afterwards.

M.

-- Each morning when I wake up and look into the mirror I always say ' Why am I so brilliant ? '
When the mirror will then always repond to me with ' The only thing that exceeds your brilliance is your beauty! '

andrew.butterworth · ‎01-25-2021

15.2(4)E10 is the current Gold Star release, however it happened with the previous 12.2(55)SE1 image as well so this is either a hardware fault or something low level set in ROMMON or something?

balaji.bandi · ‎01-25-2021

thats good servicing unit, May be cisco dont like or you lost warranty if open the unit.

if hardware issue now you opened - you need bin it i guess for now.

BB

***** Rate All Helpful Responses *****

How to Ask The Cisco Community for Help

andrew.butterworth · ‎01-25-2021

These are EoL devices that I want to reuse in a lab. Warranty etc is not a concern.

I am just trying to resurrect this switch as there is obviously some life in it as it boots to ROMMON OK and I can interact with it. It fails when it boots the IOS image so I am trying to determine if its just a software or ROMMON/Environment variable that's causing the issue.

balaji.bandi · ‎01-25-2021

Try old version and see if that works :

12.2.55-SE12

BB

***** Rate All Helpful Responses *****

How to Ask The Cisco Community for Help

andrew.butterworth · ‎01-25-2021

Just copied the 12.2(55)SE12 Universal image to the flash via ROMMON and set this as the boot string (set BOOT c3750e-universalk9-mz.122-55.SE12.bin) then manually rebooted it. 1st boot causes the microcode to get reprogrammed so takes a while and then it reboots. After that though it fails again at the same point and reboots.

I am fairly sure this is a hardware fault, however the one thing that eludes me is this USB Error on boot?

% Front-end Microcode IMG MGR: HW image is upgraded. MCU reset causes the switch to reload

Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

  ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.
Initializing Flash...
mifs[2]: 10 files, 1 directories
mifs[2]: Total bytes     :    2097152
mifs[2]: Bytes used      :     612352
mifs[2]: Bytes available :    1484800
mifs[2]: mifs fsck took 1 seconds.
mifs[3]: 0 files, 1 directories
mifs[3]: Total bytes     :    4194304
mifs[3]: Bytes used      :       1024
mifs[3]: Bytes available :    4193280
mifs[3]: mifs fsck took 4 seconds.
mifs[4]: 5 files, 1 directories
mifs[4]: Total bytes     :     524288
mifs[4]: Bytes used      :      10240
mifs[4]: Bytes available :     514048
mifs[4]: mifs fsck took 1 seconds.
mifs[5]: 5 files, 1 directories
mifs[5]: Total bytes     :     524288
mifs[5]: Bytes used      :      10240
mifs[5]: Bytes available :     514048
mifs[5]: mifs fsck took 0 seconds.
mifs[6]: 18 files, 3 directories
mifs[6]: Total bytes     :   57671680
mifs[6]: Bytes used      :   43025408
mifs[6]: Bytes available :   14646272
mifs[6]: mifs fsck took 45 seconds.
...done Initializing Flash.
done.
Loading "flash:/c3750e-universalk9-mz.122-55.SE12.bin"...@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
File "flash:/c3750e-universalk9-mz.122-55.SE12.bin" uncompressed and installed, entry point: 0x3000
executing...

              Restricted Rights Legend

Use, duplication, or disclosure by the Government is
subject to restrictions as set forth in subparagraph
(c) of the Commercial Computer Software - Restricted
Rights clause at FAR sec. 52.227-19 and subparagraph
(c) (1) (ii) of the Rights in Technical Data and Computer
Software clause at DFARS sec. 252.227-7013.

           cisco Systems, Inc.
           170 West Tasman Drive
           San Jose, California 95134-1706



Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 12.2(55)SE12, RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2017 by Cisco Systems, Inc.
Compiled Thu 28-Sep-17 01:04 by prod_rel_team
Image text-base: 0x00003000, data-base: 0x02800000

Initializing flashfs...
Using driver version 1 for media type 2
mifs[3]: 10 files, 1 directories
mifs[3]: Total bytes     : 2097152
mifs[3]: Bytes used      : 612352
mifs[3]: Bytes available : 1484800
mifs[3]: mifs fsck took 1 seconds.
mifs[3]: Initialization complete.

mifs[4]: 0 files, 1 directories
mifs[4]: Total bytes     : 4194304
mifs[4]: Bytes used      : 1024
mifs[4]: Bytes available : 4193280
mifs[4]: mifs fsck took 0 seconds.
mifs[4]: Initialization complete.

mifs[5]: 5 files, 1 directories
mifs[5]: Total bytes     : 524288
mifs[5]: Bytes used      : 10240
mifs[5]: Bytes available : 514048
mifs[5]: mifs fsck took 0 seconds.
mifs[5]: Initialization complete.

mifs[6]: 5 files, 1 directories
mifs[6]: Total bytes     : 524288
mifs[6]: Bytes used      : 10240
mifs[6]: Bytes available : 514048
mifs[6]: mifs fsck took 1 seconds.
mifs[6]: Initialization complete.

mifs[7]: 18 files, 3 directories
mifs[7]: Total bytes     : 57671680
mifs[7]: Bytes used      : 43025408
mifs[7]: Bytes available : 14646272
mifs[7]: mifs fsck took 0 seconds.
mifs[7]: Initialization complete.

...done Initializing flashfs.
Checking for Bootloader upgrade.. not needed

POST: CPU MIC register Tests : Begin
POST: CPU MIC register Tests : End, Status Passed

POST: MA BIST : Begin
POST: MA BIST : End, Status Passed

POST: TCAM BIST : Begin
POST: TCAM BIST : End, Status Passed

POST: SF ASIC BIST : Begin
POST: SF ASIC BIST : End, Status Passed

POST: Switch Fabric Memory Tests : Begin
POST: Switch Fabric Memory Tests : End, Status Passed

POST: CPU MIC interface Loopback Tests : Begin
POST: CPU MIC interface Loopback Tests : End, Status Passed

POST: PortASIC RingLoopback Tests : Begin
POST: PortASIC RingLoopback Tests : End, Status Passed

extracting front_end/front_end_ucode_info (309 bytes)
Waiting for Stack Master Election...
POST: Thermal, Fan Tests : Begin
POST: Thermal, Fan Tests : End, Status Passed

POST: PortASIC Port Loopback Tests : Begin
POST: PortASIC Port Loopback Tests : End, Status Passed

POST: EMAC Loopback Tests : Begin
POST: EMAC Loopback Tests : End, Status Passed

Election Complete
Switch 1 booting as Master
Waiting for Port download...Complete



 00:01:03 UTC Mon Mar 1 1993: Unexpected exception to CPUvector 300, PC = 13858B8
-Traceback= 13858B8 1382EE4 1380284 1513E08 19DF018 19DEFC0 19E4DD8 19E50F0 19DF0C8 1397E68

Writing crashinfo to flash:/crashinfo_ext/crashinfo_ext_11

=== Flushing messages (00:01:04 UTC Mon Mar 1 1993) ===

Buffered messages:
Queued messages:
*Mar  1 00:01:04.592: %SYS-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.

*Mar  1 00:00:04.949: Read env variable - LICENSE_BOOT_LEVEL =
*Mar  1 00:00:07.927: %IOS_LICENSE_IMAGE_APPLICATION-6-LICENSE_LEVEL: Module name = c3750x Next reboot level = ipservices and License = ipservices
*Mar  1 00:01:00.037: %STACKMGR-4-SWITCH_ADDED: Switch 1 has been ADDED to the stack
*Mar  1 00:01:02.428: %LINEPROTO-5-UPDOWN: Line protocol on Interface Vlan1, changed state to down
*Mar  1 00:01:02.830: %SMI-5-CLIENT:  Smart Install Client feature is enabled. It is recommended to disable the Smart Install feature when it is not actively used. To disable feature execute 'no vstack' in configuration mode
Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 12.2(55)SE12, RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2017 by Cisco Systems, Inc.
Compiled Thu 28-Sep-17 01:04 by prod_rel_team

Data Access Exception (0x0300)!
SRR0 = 0x013858B8  SRR1 = 0x00029230  SRR2 = 0x00D481AC  SRR3 = 0x00029230
ESR = 0x00800000  DEAR = 0x00000000  TSR = 0x84000000  DBSR = 0x00000000

CPU Register Context:
Vector = 0x00000300  PC = 0x013858B8  MSR = 0x00029230  CR = 0x50000005
LR = 0x013857E0  CTR = 0x019E52CC  XER = 0xE0000007
R0 = 0x00000000  R1 = 0x04829F70  R2 = 0x00000000  R3 = 0x00000000
R4 = 0x00000000  R5 = 0x00001000  R6 = 0x00000001  R7 = 0x00000003
R8 = 0x03C09410  R9 = 0x00000000  R10 = 0x00029230  R11 = 0x00010000
R12 = 0x30000003  R13 = 0x0B98279C  R14 = 0x00000080  R15 = 0x00000000
R16 = 0x00000002  R17 = 0x00000000  R18 = 0x046A7144  R19 = 0x00000000
R20 = 0x00000000  R21 = 0x03AC701C  R22 = 0x00000001  R23 = 0x00000000
R24 = 0x00000000  R25 = 0x02D60000  R26 = 0x04829F78  R27 = 0x03A10000
R28 = 0x055CB45C  R29 = 0x00000003  R30 = 0x00000001  R31 = 0x00000000

Stack trace:
PC = 0x013858B8, SP = 0x04829F70
Frame 00: SP = 0x04829FA0    PC = 0x013857E0
Frame 01: SP = 0x0482A010    PC = 0x01382EE4
Frame 02: SP = 0x0482A030    PC = 0x01380284
Frame 03: SP = 0x0482A040    PC = 0x01513E08
Frame 04: SP = 0x03C06F34    PC = 0x019DF018
Frame 05: SP = 0x03C06F44    PC = 0x019DEFC0
Frame 06: SP = 0x03C06F6C    PC = 0x019E4DD8
Frame 07: SP = 0x03C06F74    PC = 0x019E50F0
Frame 08: SP = 0x03C06FC0    PC = 0x019DF0C8
Frame 09: SP = 0x046A6FF8    PC = 0x01397E68
Frame 10: SP = 0x046A7028    PC = 0xFFFFFFFE
Frame 11: SP = 0x046A7040    PC = 0x01398054
Frame 12: SP = 0x046A7048    PC = 0x01395D38
Frame 13: SP = 0x046A7080    PC = 0x0137EE10
Frame 14: SP = 0x046A7108    PC = 0x0138C964
Frame 15: SP = 0x046A7188    PC = 0x01395948


Switch uptime is 1 minute, 7 seconds

cisco WS-C3750X-48 (PowerPC405) processor (revision B0) with 262144K bytes of memory.
Processor board ID FDO1514Z066



 00:01:08 UTC Mon Mar 1 1993: Unexpected exception to CPUvector 200, PC = 1B4C93C
-Traceback= 1B4C93C 1D6D084

Cisco IOS Software, C3750E Software (C3750E-UNIVERSALK9-M), Version 12.2(55)SE12, RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2017 by Cisco Systems, Inc.
Compiled Thu 28-Sep-17 01:04 by prod_rel_team

Data Access Exception (0x0300)!
SRR0 = 0x013858B8  SRR1 = 0x00029230  SRR2 = 0x00D481AC  SRR3 = 0x00029230
ESR = 0x00800000  DEAR = 0x00000000  TSR = 0x84000000  DBSR = 0x00000000

CPU Register Context:
Vector = 0x00000300  PC = 0x013858B8  MSR = 0x00029230  CR = 0x50000005
LR = 0x013857E0  CTR = 0x019E52CC  XER = 0xE0000007
R0 = 0x00000000  R1 = 0x04829F70  R2 = 0x00000000  R3 = 0x00000000
R4 = 0x00000000  R5 = 0x00001000  R6 = 0x00000001  R7 = 0x00000003
R8 = 0x03C09410  R9 = 0x00000000  R10 = 0x00029230  R11 = 0x00010000
R12 = 0x30000003  R13 = 0x0B98279C  R14 = 0x00000080  R15 = 0x00000000
R16 = 0x00000002  R17 = 0x00000000  R18 = 0x046A7144  R19 = 0x00000000
R20 = 0x00000000  R21 = 0x03AC701C  R22 = 0x00000001  R23 = 0x00000000
R24 = 0x00000000  R25 = 0x02D60000  R26 = 0x04829F78  R27 = 0x03A10000
R28 = 0x055CB45C  R29 = 0x00000003  R30 = 0x00000001  R31 = 0x00000000

Stack trace:
PC = 0x013858B8, SP = 0x04829F70
Frame 00: SP = 0x04829FA0    PC = 0x013857E0
Frame 01: SP = 0x0482A010    PC = 0x01382EE4
Frame 02: SP = 0x0482A030    PC = 0x01380284
Frame 03: SP = 0x0482A040    PC = 0x01513E08
Frame 04: SP = 0x03C06F34    PC = 0x019DF018
Frame 05: SP = 0x03C06F44    PC = 0x019DEFC0
Frame 06: SP = 0x03C06F6C    PC = 0x019E4DD8
Frame 07: SP = 0x03C06F74    PC = 0x019E50F0
Frame 08: SP = 0x03C06FC0    PC = 0x019DF0C8
Frame 09: SP = 0x046A6FF8    PC = 0x01397E68
Frame 10: SP = 0x046A7028    PC = 0xFFFFFFFE
Frame 11: SP = 0x046A7040    PC = 0x01398054
Frame 12: SP = 0x046A7048    PC = 0x01395D38
Frame 13: SP = 0x046A7080    PC = 0x0137EE10
Frame 14: SP = 0x046A7108    PC = 0x0138C964
Frame 15: SP = 0x046A7188    PC = 0x01395948


Switch uptime is 1 minute, 10 seconds

cisco WS-C3750X-48 (PowerPC405) processor (revision B0) with 262144K bytes of memory.
Processor board ID FDO1514Z066


Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

  ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.
Initializing Flash...

Leo Laohoo · ‎01-25-2021

ERR: USB device not responding, giving up (status=0)

I have an idea what this is: What method are you using to console into the switch? Are you connected to the "original" console port or the micro-USB console port?

andrew.butterworth · ‎01-26-2021

I am using the 'original' serial console.

I have just managed to find a Mini-USB and I get the same thing:

Using driver version 1 for media type 2
Base ethernet MAC Address: e8:b7:48:19:94:80
Xmodem file system is available.

  ERR: USB device not responding, giving up (status=0)
The password-recovery mechanism is enabled.
Initializing Flash...

And the same two exceptions:

 00:01:03 UTC Mon Mar 1 1993: Unexpected exception to CPUvector 300, PC = 13858B8
-Traceback= 13858B8 1382EE4 1380284 1513E08 19DF018 19DEFC0 19E4DD8 19E50F0 19DF0C8 1361C34 19E52F0 1361CF4 1397E70 1398054 1395D38 137EE10

Writing crashinfo to flash:/crashinfo_ext/crashinfo_ext_14

 00:01:08 UTC Mon Mar 1 1993: Unexpected exception to CPUvector 200, PC = 1B4C93C
-Traceback= 1B4C93C 1D6D084

I think its definitely a hardware fault - probably memory?

balaji.bandi · ‎01-25-2021

still not sure - due to below i suspect some issue with hardware.

00:01:03 UTC Mon Mar 1 1993: Unexpected exception to CPUvector 300, PC = 13858B8

BB

***** Rate All Helpful Responses *****

How to Ask The Cisco Community for Help