当前位置:首页 >> 机械/仪表 >>

Gb over IP 紧急故障处理手册


Gb Over Ip 改造后紧急故障处理手册

V 1.0

Gb Over Ip 紧急故障处理指引

(核心网络维护室) 核心网络维护室)

版本
V 1.0

修订内容
根据爱立信提供的手册梳理形成故障处理指引手册,BSC 侧需要完善 指令和操作步骤

/>
修订人
张兵战

共 16 页 未经许可,不得外传!



1



张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

目录
目录.............................................................................................................2 一 、 说明.................................................................................................3 二 、 Gb 口全阻故障的可能性...............................................................3 三 、 紧急排障操作 ................................................................................4 1、 业务全阻的现象及告警关注 .....................................................4 2、 部分全阻的现象及告警关注 .....................................................4 3、 BSC 侧的紧急排障操作 .............................................................5 4、 LAN SWITCH 侧的紧急排障操作 ............................................6 四 、 GB over IP 应急处理 .....................................................................8 1、 LAN SWITCH 上联 CE 的端口吊死.........................................8 2、 LAN SWITCH 端口闪断或者链路闪断...................................9 3、 【斟酌是否需要翻译】Connection between BSC and LS has problem ...............................................................................................12 4、 【斟酌是否需要翻译】Some LIPs are missing ......................14 5、 【斟酌是否需要翻译】GPRS Traffic is abnormal in some cells 14 五 、 故障处理流程简化指引 ..............................................................15 1、 【需要补充】BSC 侧: ...........................................................15 2、 LS&CE 侧:..............................................................................15

共 16 页 未经许可,不得外传!



2



张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

一 、 说明

本文档主要针对 Gb Over Ip 改造后 BSC 出现 GB 口业务全阻或者部 分全阻时的应急处理流程,以便维护工程师快速恢复业务

二 、 Gb 口全阻故障的可能性

LS(01、02)上联 CE (01、02)端口同时 down 或者下联 BSC 的端口同时 down——该情况概率较低,且原因很容易判 断:通过 show port conf 可以查看端口 up、down 状态,处理 办法相对明确 (查看 switch 本身硬件是否有故障, 查看传输链 路质量) 。 BSC 侧接口单板同时故障——该情况概率较低, 且原因很容易 发现:BSC 侧由单板告警, 处理办法相对明确 (紧急更换 BSC 接口单板) 。 LS(01、02)上联 CE(01、02)物理状态正常,但三层 down, 此种情况为最大隐患点,因为在现有的方案中 LS 无法检测到 三层故障, 应当重点关注——通过中断物理链路的方式触发物 理层故障,进而让 LS 实行业务倒换。 LS 下联 BSC 物理状态正常,但三层 down,该情况已经测试 过,BSC 会触发主备倒换。不会引起上述第三点的隐患。
共 16 页 未经许可,不得外传! 第 3 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

三 、 紧急排障操作

1、 、

业务全阻的现象及告警关注

BSC 侧: 出 现 A1 级 别 告 警 “RADIO TRANSMISSION IP GB

INTERFACE FAULT”,可能原因为“NO ACTIVE RIP” 或者 “NS-ALIVE TIME OUT”。 RRINP 显示 GB 口在 NS 层没有激活, 同时获取不到 SGSN 侧 的业务 IP 地址 RIP 或者 RIP 状态为 NO OPERATIONAL。 RRBVP 显示所有小区的 BVCI 状态没有激活。 SGSN 侧: SGSN 发现不到 BSC 侧的业务 IP 地址 RIP,无告警。 2、 、 部分全阻的现象及告警关注

BSC: : 出 现 A2 级 别 告 警 INTERFACE FAULT” RRINP 显示 GB 口在 NS 层已经被激活, 但是部分 RIP 状态为 NO OPERATIONAL。 RRBVP 显示部分小区的 BVCI 状态没有激活
共 16 页 未经许可,不得外传! 第 4 页 张兵战

“RADIO TRANSMISSION IP GB

Gb Over Ip 改造后紧急故障处理手册

V 1.0

SGSN 侧: SGSN 只看到 BSC 侧部分的业务 IP 地址 RIP,出现 Major 告 警“Less than 70% remote IP end-points available for NSEI 1811 (网元标示) ” 3、 、 BSC 侧的紧急排障操作

相关告警信息, 查看 GB IP 相关告警信息,注意是否存在 A1 级别的告警 ALLIP; 查看 PCU RP 的状态 EXRPP:RP=ALL; 查看 GB 口状态 RRGWP; RRPPP:APL=GBI; RRAPP:APL=GBI; RRAPP:APL=IPS; RRAPP:IPADDR=ALL; RRIPP:IPADDR=ALL; RRINP:NSEI=ALL; RRBVP:NSEI=ALL; 查看小区状态
共 16 页 未经许可,不得外传! 第 5 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

RLCRP:CELL=ALL; RLGRP:CELL=ALL; RLBDP:CELL=ALL; RLGSP:CELL=ALL; RLDEP:CELL=ALL; 确认 LS 到 BSC 的通信是否正常 DUMP; IFCONFIG; ETHIF; ping (LS1,LS2,SGSN) end; 4、 、 LAN SWITCH 侧的紧急排障操作

查看 LS 的所有端口状态 show port info show port conf 检查 LS1、LS2 到 CE、SGSN 的通信是否出现故障 、 、 ping CE ping SGSN from LS
共 16 页 未经许可,不得外传! 第 页 张兵战

6

Gb Over Ip 改造后紧急故障处理手册

V 1.0

检查 LS 到达 SGSN 的路径是否异常 traceroute SGSN from LS 如果 ping 和 traceroute 均没异常, 则可以排除 LS 出局链路 故障。 如果能 ping 通 SGSN,而不能 traceroute SGSN,则可选择 traceroute 其他的 SGSN (如:10.129.160.1) 以确认 GB 业务 是由对应的 CE 出局的 (不能 traceroute 对应的 SGSN 有可 能是 SGSN 的软件版本不允许路由追踪而导致) 确认 LS 到 BSC 的通信是否正常 ①. 清除 iparp 信息:clear iparp ②. 检查 LS 下联 BSC 的链路是否正常:LS#ping BSC ③. 3.3 检查当前 BSC 业务 IP 是否从本 LS 出局 (查看 BSC 的业务 IP 是从互联端口 3 学习到的,还是从 7-24、50 端口学习到的):LS#show iparp 检查 LS 的路由指向是否异常 show iproute 检查端口统计信息 show ports <portlist> config #查看端口配置 show ports <portlist> rxerrors #查看端口是否存在错误接 收报文
共 16 页 未经许可,不得外传! 第 7 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

show ports <portlist> txerrors #查看端口是否存在错误发 送报文 show ports <portlist> status #查看端口实时收发报文状态

四 、 GB over IP 应急处理

前提:BSC 的 GB 口状态异常,业务完全阻断或部分阻断。 1、 、 LAN SWITCH 上联 CE 的端口吊死

BSC 侧的现象 出现 A1 级别告警 “RADIO TRANSMISSION IP GB INTERFACE FAULT”, 可能原因为“NO ACTIVE RIP” 或 者“NS-ALIVE TIME OUT”。 RRINP 显示 GB 口在 NS 层没有激活, 同时获取不到 SGSN 侧 的 业 务 IP 地 址 RIP 或 者 RIP 状 态 为 NO OPERATIONAL。 RRBVP 显示所有小区的 BVCI 状态没有激活 LAN SWITCH 侧的现象 LS 上联 CE 的端口是 UP 的,但是从 LS Ping 不通 CE, 同时发现该端口数据收发流量均为 0 应急方案 在上联 CE 侧关闭下联到 LS 的端口
共 16 页 未经许可,不得外传! 第 8 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

[local]SE800#config Enter configuration commands, one per line, 'end' to exit [local]SE800(config)#port ethernet 12/1 [local]SE800(config-port)#shutdown [local]SE800(config-port)#commit Transaction committed. [local]SE800(config-port)#end 在 LS 侧关闭上联 CE 的端口 LS1#disable port 49 LS1# save Y 现场操作:断开 LS 对应的端口连接 2、 、 LAN SWITCH 端口闪断或者链路闪断

LS 与 CE 互联经过光波分设备时(广州不存在此现象) 互联经过光波分设备时(广州不存在此现象) LS 上联 CE 链路故障,此时会影响业务。 链路故障,此时会影响业务 会影响业务。 BSC 侧的现象 出现 A2 级别告警 “RADIO TRANSMISSION IP GB INTERFACE FAULT”
共 16 页 未经许可,不得外传! 第 页 张兵战

9

Gb Over Ip 改造后紧急故障处理手册

V 1.0

RRINP 显示 GB 口在 NS 层已经被激活,但是部分 RIP 状态为 NO OPERATIONAL。 RRBVP 显示部分小区的 BVCI 状态没有激活 LAN SWITCH 侧的现象 LS 与 CE 无告警 LS 下联 BSC 链路单边故障 链路单边 单边故障 BSC 侧的现象 出现 A3 级别告警 “RADIO TRANSMISSION IP GATEWAY FAULT” 业务会自动倒换至备用边,业务不受影响 LAN SWITCH 侧的现象 LS 与 CE 出现端口 down 告警, 此时业务不受影响; LS 下联 BSC 链路双边故障 BSC 侧的现象 出现 A2 级别告警 “RADIO TRANSMISSION IP GATEWAY FAULT” 此时该 RPP 单板业务全阻,RRBVP 显示小区的 BVCI 状态没有激活 LAN SWITCH 侧的现象 LS 与 CE 出现端口 down 告警。
共 16 页 未经许可,不得外传! 第 10 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

LS 与 CE 互联不经过光波分设备时 互联不经过 不经过光波分设备时 LS 上联 CE 链路故障,不会影响业务。 链路故障,不会影响业务。 影响业务 BSC 侧的现象 出现 A2 级别告警 “RADIO TRANSMISSION IP GB INTERFACE FAULT” RRINP 显示 GB 口在 NS 层已经被激活,但是部分 RIP 状态为 NO OPERATIONAL。 RRBVP 显示部分小区的 BVCI 状态没有激活 LAN SWITCH 侧的现象 LS 与 CE 出现端口 down 告警 LS 下联 BSC 链路故障,此时业务不受影响 链路故障, BSC 侧的现象 LS 下联 BSC 链路单边故障 BSC 侧的现象 出现 A3 级别告警 “RADIO TRANSMISSION IP GATEWAY FAULT” 业务会自动倒换至备用边,业务不受影响 LAN SWITCH 侧的现象 LS 与 CE 出现端口 down 告警, 此时业务不受影响; LS 下联 BSC 链路双边故障
共 16 页 未经许可,不得外传! 第 11 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

BSC 侧的现象 出现 A2 级别告警 “RADIO TRANSMISSION IP GATEWAY FAULT” 此时该 RPP 单板业务全阻,RRBVP 显示小区的 BVCI 状态没有激活 LAN SWITCH 侧的现象 LS 与 CE 出现端口 down 告警。 应急方案 若经过光波分系统:则预处理办法与 端口吊死处理方式一致 若不经过光波分系统,则为链路故障,需要紧急更换传输线缆 3、 、 斟酌是否需要翻译】 【斟酌是否需要翻译】Connection between BSC and

LS has problem
Error Symptoms and Troubleshooting Findings Alarm “RADIO TRANSMISSION IP GATEWAY FAULT” is received. And BSC loses some local IP. Recovery Actions PCU with RPP: 1. Check physical cable between BSC and LS. If the cable has problem, then replace the faulty cable. 2. Check physical ports in EPSB. If faulty HW of RPP is suspected, then replace the faulty EPSB. 3. Check if Ethernet connection is working. If the state of RPP Ethernet interface is down, then do a RPP restart. terdi:rp=xx;
共 16 页 未经许可,不得外传! 第 12 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

ETHIF; IFCONFIG; ping (LS1,LS2) end; From LS, ping BSC #ping <ip address of IPS B/A> from <ip address of IPS A/B> 4. Check whether there are some error events in RPP. Block and de-block the RPP should be try first. If it does not help, then the faulty HW of RPP is suspected, we should replace the RPP. BLRPI:RP RP=< RPP>; BLRPE:RP RP=< RPP>; EXRPP:RP=<RPP>; DIRRP:RP=<RPP>; 5. Check whether there are some error events in RPP. Block and de-block the RPP should be try first. If it does not help, then the faulty HW of RPP is suspected, we should replace the RPP.

PCU with GARP2: 1. Check physical cable between BSC and LS. If the cable has problem, then replace the faulty cable. 2. Check physical ports in SCB-RP. Block and de-block the RPP should be try first. If faulty HW of SCB-RP is suspected, then replace the faulty SCB-RP. BLRPI:RP RP=< SCB-RP >; BLRPE:RP RP=< SCB-RP >; EXRPP:RP=< SCB-RP >; DIRRP:RP=< SCB-RP >; 3. Check if Ethernet connection is working. If the state of RPP Ethernet interface is down, then do a RPP restart. terdi:rp=xx; ETHIF; IFCONFIG; ping (LS1,LS2) end; From LS, ping BSC
共 16 页 未经许可,不得外传! 第 13 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

#ping <ip address of IPS B/A> from <ip address of IPS A/B> 4. Check whether there are some error events in GARP2. If faulty HW of GARP2 is suspected, we should replace the GARP2. BLRPI:RP RP=<GARP2>; BLRPE:RP RP=<GARP2>; EXRPP:RP=<GARP2>; DIRRP:RP=<GARP2>;

4、 、

【斟酌是否需要翻译】Some LIPs are missing 斟酌是否需要翻译】

Error Symptoms and Troubleshooting Findings Gb over IP down then disconnect cable between LS1 and RP, recovered. Then connect the cable back. Later disconnect the cable between LS2 and RP and connect back, 5 LIP missing. Recovery Actions Do RP rank small restart in BSC to recover the system. SYREI:RANK=SMALL,EXPL=OTHER,RPRANK=COMPL;

5、 、

【 斟酌是否需要翻译】 GPRS Traffic is abnormal in 斟酌是否需要翻译 】

some cells
Error Symptoms and Troubleshooting Findings Command RRBVP shows some cells' BVCSTATE in CONFIG/ABL state. Then A2 alarm “RADIO TRANSMISSION IP GB INTERFACE FAULT”, the reason is "PROTOCOL COMMUNICATION FAILURE" raise. Recovery Actions 1. If the state of NS layer is PASSIVE, then deactivates and activates the NS layer separately: RRINC:NSEI=nsei,NSSTATE=PASSIVE; RRINC:NSEI= nsei,NSSTATE=ACTIVE; Check if the state of NS layer becomes ACTIVE and the BVCI state of cells become ACTIVE: RRINP:NSEI=ALL; RRBVP:NSEI=ALL;

2. If the state of NS layer is ACTIVE, then deactivates and activates support for GPRS in the specified cell.
共 16 页 未经许可,不得外传! 第 14 页 张兵战

Gb Over Ip 改造后紧急故障处理手册

V 1.0

RLGSE:CELL=cell; RLGSI:CELL=cell; If the BVCI state is not active or stable then cold restart the RPP or GARP2: RLGRP:CELL=cell; TERDI:RP=<GPH_RPs> ; /RESTART COLD; END; If this does not help, then check whether there are some error events in related RP. If faulty HW of RP is suspected, we should block the faulty RP BLRPI:RP RP=rp; EXRPP:RP=<GARP2>; DIRRP:RP=<GARP2>;

五 、 故障处理流程简化指引

1、 、 2、 、

【需要补充】BSC 侧: 需要补充】
LS&CE 侧:

先检查 Lanswitch 设备本身运行状态是否有异常, show switch;show port info ;show port 判断是否为物理链路故障或设备硬件故障。 config 若无异常,则可基本定位为三层故障: 检查 Lanswitch 设备至 BSC 的端口信息,判断当 前 BSC 业务主用边是哪一台 Lanswitch 设备和判 断故障链路;并检查路由。 【选做, 故障分析使用】 Lanswitch 侧 ping SGSN 从 的业务地址,BSC 的业务地址,Lanswitch 的互联 地址,是否能 ping 通,如果某一侧 ping 不通, 则可判断该侧有故障。 【选做,故障分析使用】如果能 ping 通,则从 Lanswitch 侧 trace SGSN 的业务地址和 BSC 的业 务地址,检查当前业务所经由的设备,间接判断 故障链路, 【选做,故障分析使用】并在上联 CE 侧查看 Lanswitch 接入端口的丢包及信息进行验证
共 16 页 未经许可,不得外传! 第 15 页 张兵战

show port state;Show iproute;show iparp; show port re;show port tx

ping cont 100 X.X.X.X(SGSN/BSC 业务地址) from X.X.X.X(Lanswitch vlan 地址)

trace cont 100 X.X.X.X(SGSN/BSC 业务地址) from X.X.X.X(Lanswitch vlan 地址)

Gb Over Ip 改造后紧急故障处理手册

V 1.0

断开故障链路,将业务切换至正常上即可。 若故障没有恢复, 则断开 BSC 至主用边 Lanswitch 的链路,触发 BSC 倒边(步骤 2) 若上述操作均为修复故障,则需要将故障链路所 在 Lanswitch 设备进行重启 重启 Lanswitch 设备 reboot

共 16 页 未经许可,不得外传!



16



张兵战


相关文章:
Gb over IP 紧急故障处理手册
Gb over IP 紧急故障处理手册_机械/仪表_工程科技_专业资料。Gb over IP 紧急故障处理手册 Gb Over Ip 改造后紧急故障处理手册 V 1.0 Gb Over Ip 紧急故障...
GSM 紧急故障处理手册
GSM 紧急故障处理手册_信息与通信_工程科技_专业资料。今日推荐 157...Gb over IP 紧急故障处理... 16页 免费 HXD1C机车应急故障处理手... 18页...
Gb_over_I P维护手册
关键词:爱立信IP化 1/2 相关文档推荐 Gb over IP 紧急故障处理手... 16页...Gb over IP 维护手册 详细版) (详细版) 1、BSC 侧相关指令 、 相关指令 1...
中山监控Gb_over_I P维护手册(详细版)
中山监控Gb_over_I P维护手册(详细版)_信息与通信_工程科技_专业资料。Gb over...Gb over IP 紧急故障处理... 16页 免费 GB口日常维护手册 28页 2下载券 ...
Gb over IP技术
Gb over IP技术_信息与通信_工程科技_专业资料。希望跟大家分享~Gb over IP 技术在移动网络中的应用 1 引言 承载网络采用 IP 技术是今后电信网络的重要发展趋势...
Gb over IP实施方案探讨
Gb over IP 技术原理 31页 1财富值 Gb over IP 紧急故障处理手... 16页 ...如要投诉违规内容,请到百度文库投诉中心;如要提出功能问题或意见建议,请点击此处...
浅探Gb Over IP局NSE选择对端IP的机制
浅探Gb Over IP 局 NSE 选择对端 IP 的机制 一、研究背景 某市 Gb over IP 局 DGM23BE 曾出现部分小区数据业务故障,爱立信 BSC 工程师分析认为是 SGSN 回...
GB Over IP配置指导书
GB Over IP配置指导书_信息与通信_工程科技_专业资料。GBIP化改造配置指导书GB OVER IP 数据配置 目 录 1 Gb Over IP 介绍 ......
GB OVER IP改造过的BSC扩PCU注意事项
GB OVER IP改造过的BSC扩PCU注意事项_信息与通信_工程科技_专业资料。GB OVER...Gb over IP 紧急故障处理... 16页 免费 Gb_over_I P维护手册 13页 免费 ...
质量提升类BSC告警指导手册v2
故障处理方法如下: 用 CEC 命令闭锁该电路时隙,并检查 BSC 和 TC 的传输,...在安装包含 ESB 软件更新的 CD 补丁,GBoverIP 的改造,或割接工 程过程中产生...
更多相关标签:
紧急故障处理流程图 | 配电故障紧急抢修单 | 紧急故障处理预案 | 紧急故障 | 电梯故障紧急预案 | 办税服务厅紧急故障 | 紧急手册 | 槽罐车紧急切断阀故障 |