搜索
登录
注册
网络优化工程师招聘专栏
4G/LTE通信工程师最新职位列表
通信实习生/应届生招聘职位
MSCBSC 移动通信论坛
»
我的通信生涯
» 我做C-Check的一次惨痛教训，望C友们不要步我后尘！-写在3.15.前的痛苦回忆【原创】
讨论帖
资料帖
投票帖
悬赏帖
57
1/4
1
2
3
4
››
阅读：
7573
回复：
56
关注楼主
我做C-Check的一次惨痛教训，望C友们不要步我后尘！-写在3.15.前的痛苦回忆【原创】
西关老王
资深元老
发短消息
关注Ta
积分 35310
帖子 3312
威望 12054 个
礼品券 10 个
专家指数 78
注册 2008-11-12
专业方向 移动通信，编程开发
来自 广州
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#1
大
中
小
使用道具
发表于 2009-03-14 23:32:03
只看楼主
我做C-Check的一次惨痛教训，望C友们不要步我后尘！-写在3.15.前的痛苦回忆【原创】
2008
年
3
月
15
日
(
星期六
)
，是我
5
年职业生涯中最灰暗的日子，因为前一天
(14
日
)
我犯了一个低级而严重的错误，致使大批用户无法正常起呼，引发了大批量的投诉，适逢当天是
3.15.
消费者维权日，引起了某市移动公司高层的关注和通报批评。
一年后的今天回忆起当天的情景，依然历历在目、记忆忧新。如今痛定思痛，这几天一直对这件事情作深刻的反思，现在把我的亲身经历和经验教训拿出来和大家分享，希望广大
C
友在做类似工作时引以为戒，切勿步我后尘。
事情要从
14
号说起。那天我为全网做了一个
C-Check(
一致性检查
)
，发现某
MSC
下有小区
A
出现
FAULT CODE 88
告警（该告警代码是
CORRESPONDING INTERNAL CELL IS MISSING
），表示该
MSC
下的
INTERNAL CELL
里没有
A
这个小区。检查该
MSC
下所带
BSC
发现没有
A
该小区数据，检查近段时间的话务统计，也没有该小区的统计，因此我就判断为该小区是该
MSC
下的冗余垃圾数据，因此作出删除处理。
删除该小区几小时后（晚上
8
、
9
点左右），客服陆续接到一个小区
B
覆盖范围内的用户投诉（该小区
B
和我刚刚删除的小区
A
名字非常相近，就差最后一个字母），均表示无法拨打电话，客服均以网络升级为由敷衍过去。到了第二天早上（
3.15.
），客服又接到很多同样的投诉，他们感觉不妙，立即将该情况通报出去，我马上赶往
OMC
机房。我已经开始怀疑可能是由于数据原因造成的，马上查昨天删除的那个小区的数据，根据那个小区的名字
A
在相邻
BSC
和
MSC
里面查遍所有与它相关的数据，结果什么都查不到。
因为小区
B
是重点小区，覆盖面广，话务量高，今天又适逢是
3.15.
消费者维权日，所以这件事很快就引起了公司高层领导的重视，多个部门的经理纷纷打电话过来追问事情的进展，我们部门领导也亲自过来询问和指导，我的心情就像热锅上的蚂蚁，焦躁不安。但尽管如此，此时的我并没有惊慌，因为根据昨天和今天查到的关于那个小区
A
的结果，都可以证明那个小区确实是冗余数据。
接着，我马上检查小区
B
的数据，当我检查到
MSC
数据时，居然发现该小区
B
竟然没有在
MSC
里面定义数据，我的天啊！！差点晕倒过去
……
我立即把情况上报领导，并立即补定义所有的小区数据。不久后，用户反映已恢复使用正常，确认问题出在那个删除了的“冗余垃圾小区”。
事后我才发现这两个不同名的小区有这样的特点：小区
A
在
MSC
里面的小区参数和小区
B
在
BSC
里面的参数完全一致（包括
CGI
）。估计是由于
A
命名不规范，在
BSC
上更名为
B
，但
MSC
上未作更名，造成同一
CGI
但
MSC
与
BSC
命名不符的情况。所以，在删除所谓的冗余垃圾小区
A
之前不会出现用户投诉，因为
MS
通过小区
B
起呼，在
BSC
上能对应上
B
的小区数据，在
MSC
上又能根据
CGI
找到相对应的小区
A
，然后再通过
MSC
完成后面的呼叫流程；但是，在删除了小区
A
之后，由于再也无法从
MSC
找到
CGI
相对应的小区数据，所以引起了起呼失败
(
切换正常
)
。这历时将近
20
小时的重大故障，使我学会并总结了以下三方面的经验教训
:
1
、做网优工作，特别是直接对网络数据进行操作时要头脑清醒、细心分析，即使对有些看似垃圾数据的删除，也要搞清楚这些数据存在的原因以及它背后的联系。因为“存在就有它的道理”，既然垃圾数据存在了一段时间，网络都没有出现什么异常，就肯定有它存在的理由和价值，其背后可能隐藏着另外一个错误
(
负负得正
)
，如果贸然把它删除了，很可能会引发另外一个由于数据丢失而引起的错误，否则这个垃圾数据就没有一直存在的理由。事实也证明了，在本次
C-Check
中，另一个故障代码就提示了有一个小区
B
的数据在
MSC
里面没有定义，如果当时我先把这个小区数据补定义上去，然后再删除所谓的冗余小区就不会出事。所以在网优中对现网垃圾数据的删除要慎之又慎，特别是运行已久的网络，除了割接，真正的垃圾数据并不多。
2
、网络数据在正常情况下是总成对出现的，比如
MSC
和
BSC
数据，我们删除或者定义某些数据的时候，应该联想到它们在其他什么地方
(
如
MSC
或
BSC
或外局等
BSC)
存在它的另一个副本，我们删除或者定义这些数据的时候
,
就应该检查这些关联的交换局数据是否正常
;
但是，在查看这些小区数据的时候，不应该只看它的小区名，而忽略它的
CGI
，因为前者只是一个标识符号，后者才是网络上小区的唯一识别，它才是网络行为的主体。
3
、即使两个表面上毫不相关的现象
(
如
C-Check
中的各个告警
)
，它们背后其实可能都有某种关系，这种关系在正常情况下不能表现出来，只有在某种几率很小的异常情况、特定条件下，才能体现他们的关联，但是我们又不可能去遍历这些极端的异常，所以只能把所有的情况都假象为异常，把死老虎当真老虎打，制定一些流程，先把可能会导致严重错误的漏洞补上，再删除多余的东西。在
C-Check
中先补充定义好遗漏的数据，然后再删除冗余垃圾数据，这样就可以暂时不用理会补定和删除的数据之间有什么联系，首先确保数据的一致。按这个流程执行，估计发生意外错误的几率将会大大减少。
4
、要学会使用和编写一些好的工具，简化、减少重复工作和提高工作效率，更重要的是通过这些软件、工具防止一些低级错误的发生。
扫码关注5G通信官方公众号,免费领取以下5G精品资料
1、回复“
YD5GAI
”免费领取《
中国移动：5G网络AI应用典型场景技术解决方案白皮书
》
2、回复“
5G6G
”免费领取《
5G_6G毫米波测试技术白皮书-2022_03-21
》
3、回复“
YD6G
”免费领取《
中国移动：6G至简无线接入网白皮书
》
4、回复“
LTBPS
”免费领取《
《中国联通5G终端白皮书》
》
5、回复“
ZGDX
”免费领取《
中国电信5G NTN技术白皮书
》
6、回复“
TXSB
”免费领取《
通信设备安装工程施工工艺图解
》
7、回复“
YDSL
”免费领取《
中国移动算力并网白皮书
》
8、回复“
5GX3
”免费领取《
R16 23501-g60 5G的系统架构1
》
共获得 4 次点评
我要点评
aiffier
专家指数 +10 , 威望 +10 个
· 讲的很透彻的，受益匪浅。支持楼主
详细..
发表与：2009-6-9 23:46:40
mansfield
威望 +10 个
· 谢谢分享
详细..
发表与：2009-5-22 17:00:57
jbs314
专家指数 +3
· 我很赞同
详细..
发表与：2009-3-15 18:43:37
tigermarx
威望 +30 个
· 原创内容
详细..
发表与：2009-3-15 13:26:07
[
充值威望，立即自动到帐
] [
VIP贵宾权限+威望套餐
] 另有大量优惠赠送活动，请光临充值中心
充值拥有大量的威望和最高的下载权限，下载站内资料无忧
seawolf.deng
版主
发短消息
关注Ta
积分 50694
帖子 2148
威望 316300 个
礼品券 1215 个
专家指数 342
注册 2007-11-10
专业方向 无线优化
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#2
大
中
小
使用道具
发表于 2009-03-14 23:47:25
技术问题，回答得专家指数，快速升级
也不修补一下吗？
在线,33天前提问
有没有4G切换相关的文档？
在线,63天前提问
室分面试问题
在线,228天前提问
乱码怎么发信息啊？
在线,263天前提问
怎么注册会员
在线,327天前提问
这是怎么问题？
在线,364天前提问
咋们的网站论坛怎么登不了，续签没有办法继续
在线,413天前提问
现在还有资料卖吗
在线,422天前提问
这个论坛没有办法查看发的帖子的阅读量吗
在线,451天前提问
微信号绑定错误怎么办
在线,474天前提问
这个纸质版，怎么买啊
在线,482天前提问
联通的手机不能访问论坛，解释论坛的地址是加拿大地.
在线,500天前提问
有没有做基站覆盖仿真的软件？
在线,528天前提问
技术创新与市场策略的调整，将成为决定企业能否在全.
在线,531天前提问
终端熄屏进入 Idle 态？
在线,541天前提问
有些资料能帮忙找吗
在线,559天前提问
学习了，谢谢楼主的分享
对本帖内容的看法？
我要点评
时间仍在,是我们飞逝!----seawolf.deng
[
立即成为VIP会员，百万通信专业资料立即下载，支付宝、微信付款，简单、快速！
]
sky3angel
论坛元老
发短消息
关注Ta
积分 21885
帖子 1302
威望 105589 个
礼品券 18 个
专家指数 95
注册 2008-12-10
专业方向 网络优化
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#3
大
中
小
使用道具
发表于 2009-03-14 23:48:18
经验教训是最宝贵的财富
对本帖内容的看法？
我要点评
最新通信职位：
广东通信人才网
|
北京通信人才网
|
上海通信人才网
|
南京通信人才网
|
西安通信人才网
|
重庆通信人才网
|
中国通信人才网
zgx-07988
资深元老
发短消息
关注Ta
积分 38610
帖子 2889
威望 149545 个
礼品券 28 个
专家指数 285
注册 2009-2-18
专业方向 网优工程师
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#4
大
中
小
使用道具
发表于 2009-03-14 23:50:56
嗯
一致性检查要非常的小心！~
对本帖内容的看法？
我要点评
学习是个肯定-否定-肯定循环进行的过程
热点：
通信招聘职位
|
网络优化全集
|
WCDMA精品
|
TD-SCDMA学习资料
|
EVDO
|
MGW媒体网关资料
俪萱
中级会员
发短消息
关注Ta
积分 751
帖子 50
威望 317 个
礼品券 0 个
专家指数 1
注册 2009-2-18
专业方向 网优
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#5
大
中
小
使用道具
发表于 2009-03-14 23:57:01
看来以后做一致性检查时，得小心再小心啦~~呵呵，又得到一次经验
对本帖内容的看法？
我要点评
最新通信职位：
广东通信人才网
|
北京通信人才网
|
上海通信人才网
|
南京通信人才网
|
西安通信人才网
|
重庆通信人才网
|
中国通信人才网
henryyang88
钻石会员
发短消息
关注Ta
积分 14920
帖子 332
威望 462656 个
礼品券 5 个
专家指数 22
注册 2008-4-2
专业方向 网络优化、项目管理
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#6
大
中
小
使用道具
发表于 2009-03-15 00:13:00
对本帖内容的看法？
我要点评
[
2分钟拥有VIP权限和充足威望，可下载站内任何资料
] [
快速找到一份高薪的通信行业职位
]
unicom_fj
VIP会员
发短消息
关注Ta
积分 158975
帖子 19406
威望 3646078 个
礼品券 54 个
专家指数 433
注册 2006-10-27
专业方向 IT
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#7
大
中
小
使用道具
发表于 2009-03-15 00:19:26
了解了，谢谢！！！
对本帖内容的看法？
我要点评
热点：
通信招聘职位
|
网络优化全集
|
WCDMA精品
|
TD-SCDMA学习资料
|
EVDO
|
MGW媒体网关资料
jia200384
银牌会员
发短消息
关注Ta
积分 3231
帖子 270
威望 3735 个
礼品券 0 个
专家指数 9
注册 2008-12-11
专业方向 通信工程
来自 shan dong
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#8
大
中
小
使用道具
发表于 2009-03-15 00:28:47
谢谢楼主分享
对本帖内容的看法？
我要点评
[
2分钟拥有VIP权限和充足威望，可下载站内任何资料
] [
快速找到一份高薪的通信行业职位
]
520520
金牌会员
发短消息
关注Ta
积分 8736
帖子 254
威望 817 个
礼品券 0 个
专家指数 29
注册 2008-10-12
专业方向 网维
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#9
大
中
小
使用道具
发表于 2009-03-15 07:01:01
谢谢楼主分享 。。。。。。
对本帖内容的看法？
我要点评
[
2分钟拥有VIP权限和充足威望，可下载站内任何资料
] [
快速找到一份高薪的通信行业职位
]
sg19851013
银牌会员
发短消息
关注Ta
积分 3957
帖子 59
威望 16288 个
礼品券 15 个
专家指数 0
注册 2007-11-4
专业方向 工程建设
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#10
大
中
小
使用道具
发表于 2009-03-15 11:16:00
谢谢楼主分享经验
对本帖内容的看法？
我要点评
[
2分钟拥有VIP权限和充足威望，可下载站内任何资料
] [
快速找到一份高薪的通信行业职位
]
shanwf95
金牌会员
发短消息
关注Ta
积分 9757
帖子 163
威望 257804 个
礼品券 15 个
专家指数 -33
注册 2008-5-12
专业方向 网规网优
来自 杭州
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#11
大
中
小
使用道具
发表于 2009-03-15 17:02:28
教训比较惨痛,经验比较宝贵.
对本帖内容的看法？
我要点评
单
[
2分钟拥有VIP权限和充足威望，可下载站内任何资料
] [
快速找到一份高薪的通信行业职位
]
lhaifeng
银牌会员
发短消息
关注Ta
积分 4209
帖子 126
威望 1159 个
礼品券 8 个
专家指数 1
注册 2009-3-5
专业方向 优化
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#12
大
中
小
使用道具
发表于 2009-03-15 18:11:08
谢谢
对本帖内容的看法？
我要点评
热点：
通信招聘职位
|
网络优化全集
|
WCDMA精品
|
TD-SCDMA学习资料
|
EVDO
|
MGW媒体网关资料
knife007
论坛元老
发短消息
关注Ta
积分 27783
帖子 703
威望 1797 个
礼品券 28 个
专家指数 66
注册 2008-6-24
专业方向 网优
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#13
大
中
小
使用道具
发表于 2009-03-15 21:40:39
主要是里面的工作态度值得我们借鉴
对本帖内容的看法？
我要点评
[
2分钟拥有VIP权限和充足威望，可下载站内任何资料
] [
快速找到一份高薪的通信行业职位
]
chf161
钻石会员
发短消息
关注Ta
积分 10996
帖子 574
威望 17768 个
礼品券 20 个
专家指数 27
注册 2007-11-11
专业方向 无线网络优化&OPS编程
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#14
大
中
小
使用道具
发表于 2009-03-26 16:08:19
看来以后我删数据一定要小心啊
对本帖内容的看法？
我要点评
热点：
通信招聘职位
|
网络优化全集
|
WCDMA精品
|
TD-SCDMA学习资料
|
EVDO
|
MGW媒体网关资料
易岚
金牌会员
发短消息
关注Ta
积分 6824
帖子 960
威望 7061 个
礼品券 43 个
专家指数 40
注册 2009-3-16
专业方向 无线工程师
回答问题数
0
回答被采纳数
0
回答采纳率
0%
#15
大
中
小
使用道具
发表于 2009-03-26 17:03:49
谢谢楼主呵呵！！！
对本帖内容的看法？
我要点评
热点：
通信招聘职位
|
网络优化全集
|
WCDMA精品
|
TD-SCDMA学习资料
|
EVDO
|
MGW媒体网关资料
57
1/4
1
2
3
4
››
讨论帖
资料帖
投票帖
悬赏帖
快速回复主题
标题
内容
上传资料请点左侧【添加附件】
您即将访问其它网站
关闭
您即将访问的地址是其它网站的内容，MSCBSC将不再对其安全性和可靠性负责，请自行判断是否继续前往
继续访问
取消访问，关闭
当前时区 GMT+8, 现在时间是 2026-04-07 08:21:43
渝ICP备11001752号
Copyright @ 2006-2016 mscbsc.com
本站统一服务邮箱：mscbsc@163.com
Processed in 1.118599 second(s), 42 queries , Gzip enabled
TOP
清除 Cookies
-
联系我们
-
移动通信网
-
移动通信论坛
-
通信招聘网
-
Archiver
关注楼主