1 用户投诉场景分类
问题大类 | 问题小类 | 用户投诉现象 |
注册阶段 | 5G SA注册失败 | 终端没有5G信号 |
数据业务 | 数据业务异常 | 无法访问互联网业务 |
用户体验差 | 视频卡顿花屏,网页打开慢 |
语音业务 | 用户主叫异常 | 用户拨打电话回落到23G |
用户被叫异常 | 用户被叫无法接通 |
通话异常中断 | 用户通话中掉话 |
语音感知问题 | 用户通话过程中单通、双不通、语音断续、杂音、串话等 |
计费业务 | 计费异常 | 用户反馈多扣费 |
漫游用户 | 漫入用户业务异常 | 漫入用户终端没有5G信号 |
漫入用户不能上网 |
2 注册阶段
2.1 5G SA注册失败
2.1.1 基本思路
如果是个别5G SA终端用户投诉不能在5G网络注册,建议按照 排查终端设置 -> 排查无线5G信号覆盖 -> 排查UDM签约 –> 排查5GC的顺序进行排障。
如果是大量5G SA终端用户同时投诉不能在5G网络注册,建议按照 排查5GC–> 排查无线5G信号覆盖 –> 排查承载和传输 -> 排查UDM签约 -> 排查终端设置的顺序进行排障。
2.1.2 参考知识
初始注册流程如下,详细的流程介绍请参考《中国联通南部大区5GC信令分析参考手册_v1.0》文档的初始注册流程章节。
2.1.3 投诉现象:终端没有5G信号
2.1.3.1 投诉现象
个别使用5G SA终端的用户投诉终端上网络标识非5G。
2.1.3.2 处理步骤
排查终端设置:检查终端如下设置是否正确。
(1) 终端上是否打开5G SA开关
(2) 终端上是否设定强制选择非5G网络
排查无线5G信号覆盖:
(1) 向投诉用户确认之前在投诉区域是否可以注册到5G
排查UDM签约信息:在UDM上检查用户是否已经签约5G,查询方法请参考用户签约查询/修改章节。
排查5GC:
(1) 在投诉用户可能注册的所有AMF上,基于用户的IMSI/MSISDN创建用户跟踪。
创建方法请参考建立消息跟踪章节
(2) AMF上用户跟踪创建好之后,请投诉用户在终端上先打开5G开关的前提下,先切换到飞行模式,再取消飞行模式。检查AMF的用户跟踪是否跟踪到用户的初始注册请求消息。如果未跟踪到,请求无线侧协助排查;如果可以跟踪到初始注册请求消息但是注册流程未成功结束,例如AMF给终端回复Registration Reject消息,则需要对比初始注册标准流程,找到流程故障点。
3 数据业务
3.1 数据业务异常
3.1.1 基本思路
建议按照如下顺序进行排查:
1、 排查UPF转发是否正常;
是 =>2
否 =>5
2、 排查UDM/PCF开户和签约数据是否正确;
否 =>3
是 =>4
3、 UDM/PCF修正签约数据后,是否恢复;
是 =>结束
否 =>4
4、 UPF创建跟踪分析定界,根据定界结果,联合gNodeB/数通等周边网元分析;
5、 按照采集UPF“业务问题场景”信息与用户跟踪,联系华为工程师处理;
3.1.2 参考知识
用户面转发路径如下:
用户面业务转发,依赖于下面网元的端到端配合:
UE | gNodeB | UDM | PCF | UPF | SMF | CHF |
√ | √ | √ | √ | √ | √ | √ |
任何一个网元节点配置缺失,都会导致数据业务异常执行。
3.1.3.1 投诉现象
终端显示5G信号,但无法使用数据业务,上网打不开页面。
3.1.3.2 处理步骤
UPF排查:
1、多网元对比分析
1) 如果只有一台UDG出现问题,其他均无问题,则基本为该UDG自身问题,或者该UDG的路由组网问题。
2) 如果多台UDG均出现问题,而且故障限制在部分小区、gNodeB范围,则基本为无线问题。
3) 如果多台UDG均出现问题,同时只有个别SMF或PCF出现异常指标、告警,则可以考虑基本为SMF、PCF问题。
4) 如果gNodeB、UDG、SMF、PCF等均出现链路异常告警,则基本为传输问题。
2、查看UPF是否存在KPI指标异常
观察UDG的数据面整机指标下降情况,关注的指标如下表。
维度 | 故障关注指标 |
整机 | 5G SA流量观察 | 用户平面UPF接收的上行用户面报文千字节数 |
用户平面UPF接收的下行用户面报文千字节数 |
整机流量观察 | 用户平面整机平均吞吐量 |
转发成功率观察 | 用户平面上行转发成功率 |
用户平面下行转发成功率 |
3、查看UPF是否存在异常告警
排查问题发生时间段内,UDG上是否有新增告警,如果有新增异常告警则基本为该原因导致,根据告警处理指导进行故障恢复。
4、Ping命令测试
l 在UDG上Ping直连设备IP地址,判断UDG自身报文转发是否正常。例如直连对端IP是10.10.12.3。
IP PING: IPVERSION =IPv4, VPNNAME="Givpnname",
SOURCEIPV4ADDRESS="172.16.8.128", DESTIPV4ADDRESS="10.10.12.3";
如果Ping通,可以证明UDG可以将报文发送到对端。
如果Ping不通,可能是对端路由设备有问题。
l 在UDG上Ping DNS地址以及公共DNS 8.8.8.8(该地址是Google提供的免费DNS服务器的IP地址),判断DNS是否正常,以及UDG到internet路径是否正常。
举例:
定义interface loopback10地址为10.195.255.254(从IPV4地址池中获取)
ADD INTERFACE:IFNAME="LoopBack10", IFDESCR="pingtest";
ADD IPBINDVPN:IFNAME="LoopBack10",VRFNAME="VRF_Internet";
ADD IFIPV4ADDRESS: IFNAME="LoopBack10", IFIPADDR="10.195.255.254", SUBNETMASK="255.255.255.255";
PING: IPVERSION =IPv4, VPNNAME="Givpnname",
SOURCEIPV4ADDRESS ="10.195.255.254", DESTIPV4ADDRESS ="8.8.8.8";
UDM/PCF排查:
l 在UDM上检查用户是否已经签约5G,查询方法请参考用户签约查询/修改章节。
l 在PCF上检查用户是否签约限速策略,查询方法请参考PCF签约章节。
5、TCP质量打点
根据异常用户IMSI信息,在UPF侧创建用户质量跟踪,将跟踪结果返回华为工程师,通过OMStar_PS工具进行解析,定界是否为UPF自身丢包,或UPF左侧/右侧问题导致。
用户跟踪抓包
如果是其他UDP类业务速率低,或者前面的手段都不能定界时,需要对单用户进行测试抓包。在UDG的EOR入口、出口 ,路由器,RAN侧等多个点同时抓包,抓取报文后进行报文流回放或者多点抓包对比分析,以界定问题故障点。
3.2 用户体验差
3.2.1 基本思路
建议按照如下顺序进行排查:
1、排查UDM/PCF开户和签约数据是否正确;
否 =>2
是 =>3
2、UDM/PCF修正签约数据后,是否恢复;
是 =>结束
否 =>3
3、排查UPF转发是否正常;
是 =>4
否 =>5
4、根据UPF侧分析定界结果,联合gNodeB/数通等周边网元排查分析;
5、按照采集UPF“业务问题场景”信息与用户跟踪,联系华为工程师处理;
3.2.2 参考知识
用户面转发路径如下:
用户面业务转发,依赖于下面网元的端到端配合:
UE | gNodeB | UDM | PCF | UPF | SMF | CHF |
√ | √ | √ | √ | √ | √ | √ |
任何一个网元节点配置缺失,都会导致数据业务异常执行。
3.2.3 投诉现象:视频卡顿花屏,网页打开慢
3.2.3.1 投诉现象
数传业务质量差发生时整机流量可能无异常,一般运营商会接到部分终端用户投诉业务体验差(速率慢,视频卡顿花屏,部分业务无法访问,一些网站时好时坏)等。常见的数传质量差场景有:
l 网页打开时间长
l 视频播放卡顿、花屏
l 上传、下载速率低
l SpeedTest测试结果差
一旦此类问题发生,对于PS网关设备来说必须快速进行数传定界:是UDG自身问题,还是无线侧问题,亦或是SGi/Gi、N6侧问题。
3.2.3.2 处理步骤
UDM/PCF排查:
l 在UDM上检查用户是否已经签约5G,查询方法请参考用户签约查询/修改章节。
l 在PCF上检查用户是否签约限速策略,查询方法请参考PCF签约章节。
排查QoS瓶颈
l 在SMF侧排查用户会话创建QoS参数,是否符合预期;
示例:
查询类型为IMSI,IMSI为46003130100001,PDUSESIONID 为6,无线网络类型为5G,QFI为5的会话QoS信息:
DSP SESSIONQOSINFO: QUERYTYPE=IMSI, IMSI="46003130100001", WLNETWKTYPE=NW5G, PDUSESSIONID=6, QFI=5;
UPF排查:
1、Ping命令测试
l 在UDG上Ping直连设备IP地址,判断UDG自身报文转发是否正常。例如直连对端IP是10.10.12.3。
IP PING: IPVERSION =IPv4, VPNNAME="Givpnname",
SOURCEIPV4ADDRESS="172.16.8.128", DESTIPV4ADDRESS="10.10.12.3";
如果Ping通,可以证明UDG可以将报文发送到对端。
如果Ping不通,可能是对端路由设备有问题。
l 在UDG上Ping DNS地址以及公共DNS 8.8.8.8(该地址是Google提供的免费DNS服务器的IP地址),判断到internet的时延是否正常。
举例:
定义interface loopback10地址为10.195.255.254
ADD INTERFACE:IFNAME="LoopBack10", IFDESCR="pingtest";
ADD IPBINDVPN:IFNAME="LoopBack10",VRFNAME="VRF_Internet";
ADD IFIPV4ADDRESS: IFNAME="LoopBack10", IFIPADDR="10.195.255.254", SUBNETMASK="255.255.255.255";
IP PING: IPVERSION =IPv4, VPNNAME="VRF_Internet” , SOURCEIPV4ADDRESS ="10.195.255.254", DESTIPV4ADDRESS ="8.8.8.8";
2、TCP质量打点
根据异常用户IMSI信息,在UPF侧创建用户质量跟踪,将跟踪结果返回华为工程师,通过OMStar_PS工具进行解析,定界是否为UPF自身丢包,或UPF左侧/右侧问题导致。
3、用户跟踪抓包
如果是其他UDP类业务速率低,或者前面的手段都不能定界时,需要对单用户进行测试抓包。在UDG的EOR入口、出口 ,路由器,RAN侧等多个点同时抓包,抓取报文后进行报文流回放或者多点抓包对比分析,以界定问题故障点。
4 语音业务
4.1 用户主叫异常
4.1.1 基本思路
建议按照如下顺序进行排查:
1、根据TOP异常用户跟踪,排查5GC侧业务流程处理是否正常;
否 =>2
是 =>3
2、对照业务处理流程,确认5GC网元处理异常失败点,处理后是否恢复;
否 =>8
是 =>结束
3、排查EPC侧业务流程处理是否正常;
否 =>4
是 =>5
4、确认EPC网元处理异常失败点,处理后是否恢复;
否 =>8
是 =>结束
5、通过用户跟踪,确认UPF转发是否正常;
否 =>8
是 =>7
6、处理UPF转发异常,是否恢复;
否 =>8
是 =>结束
6、 IMS域判断是否存在异常;
否 =>8
是 =>联合IMS域分析处理
8、按照采集设备配置/告警/用户跟踪,联系华为工程师处理;
4.1.2 参考知识
EPS FB流程如下,详细的流程介绍请参考《中国联通南部大区5GC信令分析参考手册_v1.0》文档的EPS FB流程章节。
EPS FB依赖于下面网元的端到端配合:
UE | gNodeB/ eNodeB | AMF | SMF | PCF | UPF | MME | SGW | IMS |
√ | √ | √ | √ | √ | √ | √ | √ | √ |
任何一个网元节点配置缺失,都会导致语音业务异常执行。
4.1.3 投诉现象:用户拨打电话回落到2G3G
4.1.3.1 投诉现象
用户主叫回落23G,语音呼叫接续时间长,终端无5G标识。
常见的失败场景有:
l AMF/SMF/PCF业务处理异常;
l MME/SGW业务处理异常;
l UPF转发异常;
l IMS域业务处理异常;
l eNodeB/gNodeB信号差或处理异常
l 终端异常