Cisco WS-C3650-24TS IOS=3.7.4E : very high CPU load

[romainkerleroux]

I get a switch in production - model WS-C3650-24TS (24p + 4sfp) with the following configuration :

- ios = 03.07.04E

- only 4 SFP uplinks connected to the network (4 optical fiber links Gbps)

- all 24 downlink ports are not used (notconnect)

- uptime almost 5 years (never restarted so far)

"show proc cpu history" displays abnormal average cpu load (last 60min, last 72h...) nearly 90-100%

The ethernet traffic going through the 4 uplinks is quite important but no trafic on the 24 downlinks on the other hand !

Where does this high cpu load come from ?

Is it only a system bug (memory/cpu saturation) ? known issue with this IOS release ?

Should I restart (reload or poweroff-on) the switch to get this cpu load disappear for a while ?

Is there any IOS upgrade available to correct this ?

May be this issue has been encountered on other switch models ?

Thanks for your reply !

[Jerome Tissieres · Accepted solution]

Oui, il y a des nouvelles versions disponibles pour ce switch, regarde ici: https://software.cisco.com/download/home/284846093/type/282046477/release/Gibraltar-16.12.5b

Mais dans tous les cas, une charge CPU comme celle-ci n'est pas normale. Mais cela peut venir de tellement de choses qu'il faut procéder par élimination.  

1. Pour le 3650 il y a ce bug: https://www.cisco.com/c/en/us/support/docs/field-notices/641/fn64191.html
   Donc un upgrade a minimum 3.6.6E or 3.7.5E semble nécessaire.
2. Si cela persiste, il y a cette "check-list": https://www.cisco.com/c/en/us/td/docs/switches/lan/catalyst3750/software/troubleshooting/cpu_util.html
   Elle est pour les 3750 mais cela peut t'aider.

J'espère que cela peut t'aider.

Cordialement,

Jerome

[romainkerleroux]

MERCI Jérôme !

Ce que j'ai fait : redémarrage (power off - on) du swich et depuis la CPU load

est à environ.... 10% !!! et ce sur les 4 processeurs (0 à 3)....

sachant que le trafic est toujours le même.

Donc effectivement si ce phénomène réapparait, upgrade envisagé.

J'ai pensé à le remplacer par un C2960X mais pas de double-alim dessus...

Cordialement.