No relevant resource is found in the selected language.

This site uses cookies. By continuing to browse the site you are agreeing to our use of cookies. Read our privacy policy>

Reminder

To have a better experience, please upgrade your IE browser.

upgrade

CPU high problem of LPU board because of MAC address be removed periodically

Publication Date:  2012-07-27 Views:  133 Downloads:  0
Issue Description
There are some cup high alarms of slot8 of CX600. But the service is normal.
Nov  3 2010 08:39:59 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:33:02 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:32:10 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:25:21 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:21:51 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:14:58 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:11:28 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:04:31 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:03:41 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Alarm Information
Nov  3 2010 08:39:59 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:33:02 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:32:10 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:25:21 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:21:51 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:14:58 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:11:28 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Nov  3 2010 08:04:31 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Lower than threshold.
Nov  3 2010 08:03:41 EH60WMOD01 % SRM/4/CPUMEMALARM(l):-Slot=8; Board 8  CPU usage is  Upper than threshold.
Handling Process
1.Checking the cpu high task. There are two cpu high task which named PES and MACL. PES is used to transfer the packets to CPU. MACL is used to learn mac address.
[EH60WMOD01-hidecmd]disp cpu slot 8
CPU Usage Stat. Cycle: 60 (Second)
CPU Usage            : 99% Max: 100%
CPU Usage Stat. Time : 2010-11-04  12:19:46
CPU Usage Stat. Tick : 0x27cda(CPU Tick High) 0x48cea013(CPU Tick Low)
Actual Stat. Cycle   : 0x0(CPU Tick High) 0x77f655b0(CPU Tick Low)
......
 PES            38%               0/2da9cef3 
MACL            26%               0/1f465f82
2.After capture packets on device, we confirm there are lots of packets be sent to CPU which the mac address is 001E-490D-6CC1.
3.When cpu usage is high and we checked the mac address table, we found one mac address 001E-490D-6CC1 can not be generated into mac address table at all times.
[EH60WMOD01-hidecmd]display mac-address 001E-490D-6CC1
[EH60WMOD01-hidecmd]display pe-entry 8 0 mac fid 8 001E-490D-6CC1
MAC Table Display Error[155]
<EH60WMOD01>display health
Slot          CPU Usage  Memory Usage(Used/Total)
----------------------------------------------------
9 MPU(Master)  15%           16%  312MB/1901MB
1 LPU          14%           46%  429MB/917MB
7 LPU          14%           46%  430MB/917MB
8 LPU          99%           46%  429MB/917MB
10 MPU(Slave)    9%           16%  305MB/1901MB
4.When the mac address 001E-490D-6CC can be generated into mac address table normally, then cpu becomes normal.
[EH60WMOD01-hidecmd]display health
Slot          CPU Usage  Memory Usage(Used/Total)
----------------------------------------------------
9 MPU(Master)  15%           16%  312MB/1901MB
1 LPU          14%           46%  429MB/917MB
7 LPU          14%           46%  430MB/917MB
8 LPU          17%           46%  429MB/917MB
10 MPU(Slave)    9%           16%  305MB/1901MB
Root Cause
Because of one module which charge for handle mac address is broken, so one mac address will be removed per minutes. Then system will fresh the mac address. During this time, the new mac table can not be assigned to forwarding engine because of hardware problem. It lead to lots of MAC learning packets be went to CPU and CPU usage becomes high. 
Because of the service is forwarded in layer 2 network. The service will be forwarded by broadcast even there is no mac address table for service. So the service can be forwarded normally.
Suggestions
The problem be solved by change the board.

END