主控板数据库异常下发错误的配置数据导致复用段倒换业务中断

发布时间:  2012-12-14 浏览次数:  96 下载次数:  0
问题描述
北京时间18日19:00,约旦客户现网ABIDA CITY与MAAN BSC网元之间光纤由于修路被挖断,复用段倒换后200站业务中断。
处理过程

1、北京时间18日19:10左右,19:45客户修复光纤,所有业务全部恢复。

2、根据返回的数据分析,发现­9-59网元在ABIDA CITY与MAAN BSC网元之间断纤倒换时本该处于穿通态的,但是实际­9-59网元却处于IDLE态,导致业务中断。

 3、当现场重新停启复用段协议时,发现9-59网元东西向为SF,网元处于孤立状态,进一步查询线路单板MSP使能状态为未使能,这将导致线路不上报K字节,复用段协议认为东西向处于SF,所以进入孤立状态。

:optp:8,0,9b,1,08,b1,1,0

@@@@@@@@@@@@@@@@@ Message from 0x0009003b (9.0.59 589883) @@@@@@@@@@@@@@@@@@

Optp cmd : 08b1                                                                 

01 00 00         //8板线路复用段未使能                                         

 Total records :1                                                              

#9-59:test123 [9-59 Swaimah                   ][][2012-01-18 20:46:14+02:00]>

:optp:b,0,9b,1,08,b1,1,0

Optp cmd : 08b1                                                                 

01 00 00        //11板线路复用段未使能                                         

 Total records :1                                                             

#9-59:test123 [9-59 Swaimah               ][][2012-01-18 20:46:21+02:00]>

4、通过分析线路黑匣子,线路单板MSP使能状态为未使能的异常状态原因是之前主控数据库异常时,主机给线路单板下发了异常的复用段配置。

8-SLOT-n4sl64单板:

TIME:2012-1-14 4:47:50 0xA9 08 EE 01 00 00 //主控设置单板光口属性为非MSP

7-SLOT-n4sl64单板:
TIME:2012-1-14 4:47:50 0xA9 08 EE 01 00 00 //主控设置单板光口属性为非MSP

5、通过恢复正常主控板数据库后,软复位交叉单板和线路单板,主控板会把正确的配置重新下发到单板,然后进行各环的复用段倒换测试,倒换状态正常,业务无中断。

综上分析,复用段倒换异常业务中断是因为单板侧的配置数据异常,而单板侧的配置数据异常原因是主控板数据库异常下发错误的配置数据。

根因
业务中断原因是断纤MSP倒换时9-59网元复用段状态异常,这个异常是因为线路板上的复用段配置异常导致的。而线路板的配置异常要追溯到上周六该网元升级时,因为预警问题导致的数据库异常。在修复该数据库异常时,未进行清库下载,只对主控板进行了数据库恢复操作,仅仅修复了主控数据库异常而线路板上的复用段配置异常并未得到修复,导致复用段倒换时状态异常,保护未生效,造成业务中断。
解决方案
 

根本解决方案:数据库异常时,进行清库下载。

紧急恢复措施:在主控板数据库已经修复完成情况下,软复位线路板和交叉板。

END