MSCBSC 移动通信论坛
搜索
登录注册
网络优化工程师招聘专栏 4G/LTE通信工程师最新职位列表 通信实习生/应届生招聘职位

  • 阅读:19538
  • 回复:44
IOG的RPV故障导致频繁小启的故障处理
mscbschlr
原始天尊
鎵嬫満鍙风爜宸查獙璇


 发短消息    关注Ta 

C友·铁杆勋章   公益·慈善勋章   管理·贡献勋章   纪念勋章·论坛周年庆   财富勋章·财运连连   财富勋章·大富豪   纪念勋章·奥运年   纪念勋章·猪年纪念   C友·活跃勋章   纪念勋章·五周年   财富勋章·财神   财富勋章·富甲一方   纪念勋章·十周年  
积分 138733
帖子 2070
威望 1328006 个
礼品券 102 个
专家指数 121
注册 2006-9-1
专业方向  ERICSSON交换
来自 广东
回答问题数 0
回答被采纳数 0
回答采纳率 0%
 
发表于 2006-11-27 21:51:15  只看楼主 
DGEMSC由于硬件故障而频繁发生自动小启,甚至大启。下面介绍一下在处理此故障过程中的一点经验。
此故障最早是出现“COMMON CHARGING OUTPUT ERROR”的告警,且是瞬时的,出了告警后很快又会消失。根据以往经验,出现这种告警经常是由于用于储存计费文件信息的几个SIZE如466,600和601的CHVIEW BLOCK出现拥塞引起的,于是要求值班人员扩这几个SIZE。很快值班人员反映这几个SIZE扩到最大了,但仍然偶尔有这个告警出现,可见问题不在SIZE拥塞上。
第二天,DGEMSC开始出现自动小启,原因为“PROGRAM HANDLING ERROR”,且重启的幅度很频繁,有时候会上升到自动大启甚至RELOAD。用SYELP指令查看,每次重启之前错误值都为0,结合SYRIP指令打印重启的EVENT LOG,可知重启是由于交换机的硬件错误引起的。
从DIRCP指令打印CP的EVENT LOG,可以看出RP1,5,6都有出错。根据爱立信工程师的建议,首先更换了POWC板(CP33的POWC板R2C一下都有隐患,许多时候硬件错误都是由于POWC板引起,而且POWC板也会参与处理RP到CP的信号),但是没有效果,CP仍然频繁的出现重启。
重新检查交换局的各种状态,偶然的用EXSLP指令检查IOG的LINK的状态,发觉SPG1的LINK1工作不稳定,有时是WO,有时是ABL,这一下就基本知道出现“COMMON CHARGING OUTPUT ERROR”告警的原因了。因为串行RP BUS是两边RP BUS轮流作为ACTIVE边的,二IOG的LINK实际上就是第一条RP BUS,当LINK1为主用边的时候,若ABL的时间过长就会影响计费文件的生成(此时计费文件存放在CP的内存中),从而出现告警。用IMALP指令查看IOG的告警就完全证实这种推测:
IMMCT:SPG=1;
:IMALP:NODE=A,FRDATE=040724;
ORDERED
:END;
EXECUTED
< SPS EVENT LOG
SPGNODEFR DATEFR TIMETO DATETO TIMEMINCODMAXCOD
1 A2004-07-240000002004-08-112246231 9999
*** OBSERVATION O1/22004-07-28185313
IOP SLOGAN NOT DEFINED
CODESPGNODEUNITINFO
55071 ARPVDR.AC2RPV DUMP FAILED(4078)
ADD INFO:
Open main file error
*** OBSERVATION O1/22004-07-28185313
IOP SLOGAN NOT DEFINED
CODESPGNODEUNITINFO
55001 ARPVDR CP-SP link disconnected
ADD INFO:
TRANSCODE IDNO
04649
SENDER :
REGION NODE UNITIDNO
017RPVDR.AC2 4649
*** OBSERVATION O1/22004-07-28185426
IOP SLOGAN NOT DEFINED
CODESPGNODEUNITINFO
55001 ARPVDR CP-SP link disconnected
ADD INFO:
TRANSCODE IDNO
04636
SENDER :
REGION NODE UNITIDNO
017RPVDR.AC2 4636
*** OBSERVATION CEASINGO1/22004-07-28185433
IOP SLOGAN NOT DEFINED
CODESPGNODEUNITINFO
55001 ARPVDR CP-SP link connected
ADD INFO:
TRANSCODE IDNO
04668
SENDER :
REGION NODE UNITIDNO
017RPVDR.AC2 4668
*** OBSERVATION O1/22004-07-28185439
IOP SLOGAN NOT DEFINED
CODESPGNODEUNITINFO
55001 ARPVDR CP-SP link disconnected
ADD INFO:
TRANSCODE IDNO
04636
SENDER :
REGION NODE UNITIDNO
017RPVDR.AC2 4636
从以上的LOG可以看出,每隔几秒就出现一次“CP-SP link disconnected”的告警。到此时,故障原因已经非常清楚了,是由于RP BUS的工作不稳定引起的,在CP中,负责RP BUS工作的有POWC,SPU和RPIRS板,首先更换SPU,更换后再用IMALP检查IOG的告警,仍然有上述告警出现。再更换第一块RPIRS板后问题仍然存在,可见问题不在CP上,所以需要更换IOG上RPV2,即IOG跟CP连接的RP。由于工作不稳定的是SPG1的LINK1,所以直接更换NODE B的RPV2板,更换后再查看LINK的状态和IOG的告警,状态正常,问题得到解决。从这次故障中,有以下几点经验值得总结:
在故障过程中,曾经由于无法生成计费文件而导致计费停止的故障,值班人员按照经验打开SPG0上的计费文件,但由于在打开前没有检查清楚,结果打开的仍然是SPG1上的TTFILE,然后再打开SPG0上的文件结果计费文件仍然无法生成,在把SPG1上的TTFILE全部关闭后才正常生成计费文件。根据以往的经验,同时打开两个TTFILE是可以正常生成计费信息的,从这次操作可以看出,同时打开三个TTFILE有可能导致不能正常生成计费信息。所以以后若出现SPG1故障要打开SPG0的TTFILE时,一定要确认清楚要打开的TTFILE是在SPG0上。
在知道故障原因是由于SPG1的LINK1不稳定造成时,应该及时人工闭塞这条LINK,这样做能避免CP的RESTART,当时有可能能够避免出现计费生成错误的告警,从而避免上文提到的计费停止的故障。
串行RP BUS中,一个简单的RP故障都很有可能影响到CP的稳定运行,这在以往的多次故障中都得到验证,必须加以重视。而在处理这次故障中,使用IMALP指令检查IOG的EVENT则是发现故障原因的重要工具,尤其是更换完硬件以后,我们无法即时判断CP是否仍然会发生重启,而从此EVENT LOG则可以即时发现CP与IOG的连接是否正常,从而判断更换硬件后故障是否消除。

查看积分策略说明
附件下载列表:
2006-11-27 21:51:15  下载次数: 23
IOG的RPV故障导致频繁小启的故障处理(东莞).rar (5.34 KB)
扫码关注5G通信官方公众号,免费领取以下5G精品资料
  • 1、回复“YD5GAI”免费领取《中国移动:5G网络AI应用典型场景技术解决方案白皮书
  • 2、回复“5G6G”免费领取《5G_6G毫米波测试技术白皮书-2022_03-21
  • 3、回复“YD6G”免费领取《中国移动:6G至简无线接入网白皮书
  • 4、回复“LTBPS”免费领取《《中国联通5G终端白皮书》
  • 5、回复“ZGDX”免费领取《中国电信5G NTN技术白皮书
  • 6、回复“TXSB”免费领取《通信设备安装工程施工工艺图解
  • 7、回复“YDSL”免费领取《中国移动算力并网白皮书
  • 8、回复“5GX3”免费领取《 R16 23501-g60 5G的系统架构1
  • 对本帖内容的看法? 我要点评


    作者的更多帖子




     
    [充值威望,立即自动到帐] [VIP贵宾权限+威望套餐] 另有大量优惠赠送活动,请光临充值中心
    充值拥有大量的威望和最高的下载权限,下载站内资料无忧
    mscbschlr
    原始天尊
    鎵嬫満鍙风爜宸查獙璇


     发短消息    关注Ta 

    C友·铁杆勋章   公益·慈善勋章   管理·贡献勋章   纪念勋章·论坛周年庆   财富勋章·财运连连   财富勋章·大富豪   纪念勋章·奥运年   纪念勋章·猪年纪念   C友·活跃勋章   纪念勋章·五周年   财富勋章·财神   财富勋章·富甲一方   纪念勋章·十周年  
    积分 138733
    帖子 2070
    威望 1328006 个
    礼品券 102 个
    专家指数 121
    注册 2006-9-1
    专业方向  ERICSSON交换
    来自 广东
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2006-11-27 21:54:50  只看楼主 
    技术问题,回答得专家指数,快速升级
    附件中的内容我贴出来,当然威望多的朋友也可下载后再看!

    对本帖内容的看法? 我要点评





     
    [立即成为VIP会员,百万通信专业资料立即下载,支付宝、微信付款,简单、快速!]
    VICKY
    论坛元老
    鎵嬫満鍙风爜宸查獙璇


     发短消息    关注Ta 

    积分 26498
    帖子 888
    威望 207452 个
    礼品券 8 个
    专家指数 31
    注册 2006-8-10
    专业方向  无线
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2007-01-25 17:01:21 
    好资料啊。谢谢楼主了

    对本帖内容的看法? 我要点评

     
    最新通信职位:广东通信人才网 | 北京通信人才网 | 上海通信人才网 | 南京通信人才网 | 西安通信人才网 | 重庆通信人才网 | 中国通信人才网
    逆风
    论坛元老



     发短消息    关注Ta 

    积分 21469
    帖子 686
    威望 3046 个
    礼品券 0 个
    专家指数 0
    注册 2006-8-9
    专业方向 
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2007-01-29 22:03:32 
    涨见识,涨学识,呵呵

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料
    hhc840511
    论坛元老



     发短消息    关注Ta 

    积分 18022
    帖子 563
    威望 8741 个
    礼品券 0 个
    专家指数 -121
    注册 2007-5-4
    专业方向 
    来自 赤峰
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2007-06-17 13:04:00  QQ
    谢谢分享
    谢谢分享

    对本帖内容的看法? 我要点评

     
    最新通信职位:广东通信人才网 | 北京通信人才网 | 上海通信人才网 | 南京通信人才网 | 西安通信人才网 | 重庆通信人才网 | 中国通信人才网
    angusdana
    银牌会员
    鎵嬫満鍙风爜宸查獙璇


     发短消息    关注Ta 

    积分 2566
    帖子 367
    威望 4480 个
    礼品券 0 个
    专家指数 8
    注册 2008-10-27
    专业方向  网优
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2008-10-27 16:19:44 
    为什么?威望。。。

    对本帖内容的看法? 我要点评

     
    [2分钟拥有VIP权限和充足威望,可下载站内任何资料] [快速找到一份高薪的通信行业职位]
    AYOU
    金牌会员



     发短消息    关注Ta 

    公益·慈善勋章  
    积分 6921
    帖子 149
    威望 5482 个
    礼品券 8 个
    专家指数 6
    注册 2007-3-18
    专业方向 
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2008-10-27 19:22:57 
    谢谢分享,学习了

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料
    FG2010
    中级会员



     发短消息    关注Ta 

    积分 957
    帖子 118
    威望 40 个
    礼品券 0 个
    专家指数 0
    注册 2008-3-13
    专业方向 
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2008-12-12 00:52:40 
    先顶一下~~~~~~~

    对本帖内容的看法? 我要点评

     
    [2分钟拥有VIP权限和充足威望,可下载站内任何资料] [快速找到一份高薪的通信行业职位]
    wsy310779905
    钻石会员
    鎵嬫満鍙风爜宸查獙璇


     发短消息    关注Ta 

    积分 13477
    帖子 665
    威望 13176 个
    礼品券 8 个
    专家指数 -214
    注册 2008-8-24
    专业方向  无线网络优化
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2008-12-14 21:19:15  QQ
    :lol :lol

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料
    刀剑笑
    银牌会员



     发短消息    关注Ta 

    积分 4220
    帖子 194
    威望 337 个
    礼品券 0 个
    专家指数 0
    注册 2008-11-23
    专业方向  移动通信
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2008-12-18 08:52:39 
    涨见识,涨学识,呵呵

    对本帖内容的看法? 我要点评

     
    [2分钟拥有VIP权限和充足威望,可下载站内任何资料] [快速找到一份高薪的通信行业职位]
    zhaolingfeng88
    银牌会员



     发短消息    关注Ta 

    积分 4290
    帖子 313
    威望 895 个
    礼品券 0 个
    专家指数 0
    注册 2008-11-12
    专业方向  wangyou
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2008-12-20 16:25:10 
    楼主的精神太可贵了,不过能省点威望我就不用下载了....

    对本帖内容的看法? 我要点评

     
    [2分钟拥有VIP权限和充足威望,可下载站内任何资料] [快速找到一份高薪的通信行业职位]
    cai17
    论坛元老
    鎵嬫満鍙风爜宸查獙璇


     发短消息    关注Ta 

    积分 16510
    帖子 1003
    威望 3442 个
    礼品券 5 个
    专家指数 21
    注册 2006-5-9
    专业方向  网络优化
    来自 广东
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2009-02-09 00:11:40  QQ
    学习~~~~~~~~~~~~~

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料
    cp0201
    银牌会员



     发短消息    关注Ta 

    积分 4203
    帖子 242
    威望 8654 个
    礼品券 0 个
    专家指数 3
    注册 2008-4-2
    专业方向 
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2009-02-22 11:07:36 
    谢谢楼主分享!~~~~~谢谢楼主分享!~~~~~谢谢楼主分享!~~~~~

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料
    lyp462
    论坛元老
    鎵嬫満鍙风爜宸查獙璇


     发短消息    关注Ta 

    积分 17357
    帖子 884
    威望 29086 个
    礼品券 5 个
    专家指数 62
    注册 2008-7-13
    专业方向  通信工程
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2009-05-28 11:36:30 
    下载了,谢谢楼主分享。

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料
    santiago2006
    银牌会员



     发短消息    关注Ta 

    积分 4280
    帖子 672
    威望 2481 个
    礼品券 0 个
    专家指数 -261
    注册 2008-7-30
    专业方向  通信
    回答问题数 0
    回答被采纳数 0
    回答采纳率 0%
     
    发表于 2009-05-30 09:47:25 
    涨见识,涨学识,呵呵

    对本帖内容的看法? 我要点评

     
    热点: 通信招聘职位 | 网络优化全集 | WCDMA精品 | TD-SCDMA学习资料 | EVDO | MGW媒体网关资料

    快速回复主题    
    标题
    内容
     上传资料请点左侧【添加附件】

    (勾选中文件为要删除文件)


    当前时区 GMT+8, 现在时间是 2026-04-25 06:54:42
    渝ICP备11001752号  Copyright @ 2006-2016 mscbsc.com  本站统一服务邮箱:mscbsc@163.com

    Processed in 0.747270 second(s), 35 queries , Gzip enabled
    TOP
    清除 Cookies - 联系我们 - 移动通信网 - 移动通信论坛 - 通信招聘网 - Archiver