广州本地传输网重大故障应急预案Word文档格式.docx
《广州本地传输网重大故障应急预案Word文档格式.docx》由会员分享，可在线阅读，更多相关《广州本地传输网重大故障应急预案Word文档格式.docx（18页珍藏版）》请在冰豆网上搜索。
一类故障：
接入环系统中断、同时引起15个或以上GSM900小区中断的故障；
干线、骨干层和汇聚层SDH传输设备622M或以上速率的端口告警；
干线、骨干层和汇聚层SDH传输设备带业务的155M端口告警；
国际局配套的传输设备影响业务的故障；
国际电路故障；
重要基站或重要业务（例如专线）的电路故障；
干线、骨干或主干光缆超过6纤以上（含6纤）纤芯中断的故障；
导致网管监控功能失效的网管故障
引起精品小区中断的传输故障；
二类故障：
同时引起9～14个GSM900小区中断的故障；
国际局配套传输设备不影响业务的故障；
网元与网管连接失效告警；
导致10个以上2M局间电路同时中断的故障；
干线、骨干或主干光缆6芯以下纤芯同时中断的故障；
48芯接入光缆全阻；
汇聚机房的环境告警
三类故障：
干线、骨干层和汇聚层SDH传输设备不带业务的155M端口告警；
12芯接入光缆全阻
带业务的接入点故障
四类故障：
其他传输故障
2、传输故障通报和处理时限
一类传输故障：
值班人员在接报后5分钟内电话通知传输室网络设备经理与传输室副经理，然后按照应急预案进行抢修。
1小时故障没有解决由传输室副经理上报传输室经理，同时监控室电话上报网络部传输主管，2小时故障没有解决由传输室经理上报网维中心经理,同时网络部传输主管上报网络部传输室经理。
故障修复后电话通知传输室网络设备经理与传输室副经理，如果故障已经上报到网络部则同时也应该电话通知网络部传输主管。
故障修复后一个工作日内写出故障报告。
一类传输故障设备故障必须在3小时内处理完毕，线路故障在5小时内处理完毕。
二类传输故障：
值班人员在接报后立即投入故障修复，如果在1.5小时内未能修复故障，必须马上电话通知传输室网络设备经理与传输室副经理，3小时没有修复由传输室副经理上报传输室经理,同时监控室电话上报网络部传输主管，5小时故障没有解决由传输室经理上报网维中心经理，同时网络部传输主管上报网络部传输室经理。
二类传输设备故障必须在6小时修复，线路故障8小时修复。
三类传输故障：
值班人员在接报后立即投入故障修复，如果在5小时内未能修复故障，必须马上电话通知传输室网络设备经理与传输室副经理，10小时故障没有修复由传输室副经理上报传输室经理,同时由监控室电话上报网络部传输主管，24小时故障没有解决由传输室经理上报网维中心经理，同时网络部传输主管上报上报网络部传输室经理。
三类传输故障必须在24小时修复。
四类传输故障：
值班人员在接报后立即投入故障修复，如果在24小时内未能修复故障，必须马上电话通知传输室网络设备经理与传输室副经理。
四类传输故障必须在48小时修复。
特殊情况，监控室可以越级上报。
三、传输设备重大故障的处理
1、重大故障处理说明
●根据传输监控手册，出现下列情况时监控室值班人员应该马上通知传输室值班工程师，同时应检查网管中告警、性能、倒换等数据，并将这些数据和现场故障现象记录下来并通报传输室值班工程师。
A、骨干层、汇聚层的线路光板、交叉板和其他155M速率以上的板件上出现的告警，必须在故障产生的10分钟内通知传输室维护人员。
B、对于骨干层、汇聚层和接入层的2M支路板上面出现的告警，监控室需要根据业务影响程度来判断是否需要电话报障。
例如是否重要的链路等等，对于这类故障主要跟随业务层面的故障处理时限以及报障时限。
C、对于接入层的光接口板上面产生的告警，如果该点已经有业务存在，则需要通过电话在30分钟内报障给传输室维护人员。
D、其他监控值班人员人为需要马上通知传输室维护人员的事件，也需要通过电话及时通知传输室维护人员
●监控室在把故障通报传输室后，故障处理指挥工作由传输室接手，除非传输室工程师通知进行相应操作，否则监控室值班人员不应再在网管上面进行任何与故障处理有关的操作。
●传输室值班工程师或监控室值班人员在判断故障为重大故障后，应该及时向双方值班人员通报，并由监控室负责向上级通报。
●传输室故障处理负责人必须在故障处理中心指挥（传输室值班现场）
●故障处理过程中由故障处理负责人通过电话进行指挥，电话联系方式以会议电话为主。
●所有传输室维护人员必须开通三方通话和呼叫等待功能，在故障处理过程中，故障处理中心的来电必须优先接听。
●传输室故障处理负责人必须在到达处理中心15分钟内判断故障影响的传输系统以及初步的故障修复时间，并通报资源组组长。
资源组组长根据情况与业务部门进行协商，并决定是否采取电路调度方式进行抢通。
●故障抢修由故障处理负责人负责指挥，业务调度由资源组组长（或调度负责人）负责指挥。
但是人员的安排一般以首先满足故障抢修为主，调度为副，特殊情况除外。
●如果故障现象比较难以定位，请马上通知厂家，并将故障现象、前期处理过程记录以及告警和性能报表等信息反馈给厂家。
厂家维护工程师应该马上出发赶赴现场协助处理。
●每个骨干和汇聚机房必须配备以下抢修设施：
A、光源和光功率计，5米测试尾纤2条
B、20米调度尾纤20条；
法兰头20个；
7dBm固定光衰5个；
酒精一瓶、棉花一包、压缩空气2瓶；
各种类型的光接口转换接头一批；
根据机房设备而定的特殊光纤一批
C、工具包一个（内有各式螺丝刀等）
D、LCT连线（根据机房设备类型而定相应的连线类型）
E、做PCM电缆头工具包（根据机房设施而定做头工具类型）一个
F、调度电缆（长度根据机房大小）20条（仅在骨干机房配）
●故障处理负责人在派出抢修人员时候必须明确所需携带的仪表、工具以及备用板件。
●
2、故障分析指导（华为设备各种常见告警及其基本处理指导）
●T-ALOS（2M接口模拟信号丢失）：
当2M接口收不到对端（交换机、基站）送来的信号时，就会有该告警上报。
在实际中，一般是由于该2M端口对应的DDF架位上的环路塞松了或没有接实际业务所造成。
基本处理指导：
根据上报T-ALOS的2M端口查出其DDF架位资料，让机房执勤人员检查该架位的环路塞是否正常，如果有业务则将其放直，无业务则环路。
●AU-AIS、TU-AIS:
该告警是SDH中AU或TU两种指针的AIS（AlarmIndicateSignal），一般是由于上游站点该通道上有更严重的告警（如LOS）而下插AIS告警。
沿该通道信号流由远至近对通道逐段环回，从而定位故障，要注意尽量做到只对该通道环回，而不要将该通道所在的更高级别的通道做环回而影响到其他正常的业务。
●R-LOS（再生段信号丢失）：
当SDH光口（155M、622M、2.5G）收不到光或收光很低时会上报R-LOS告警。
一般由于光缆、光纤断，对端光板发光模块、本端光板收光模块不正常所造成。
需由维护人员或代维人员到现场，检查光板的收发光是否正常，如果能判断是光板问题则直接更换光板。
如果不是设备问题，则向线路代维公司（长迅公司）报障，通知其检查线路正常与否（设备与线路的检查也可以同步进行）。
●R-LOF（再生段祯丢失）：
在产生R-LOS时会接着产生R-LOF，但如果只有R-LOF而没有R-LOS时，一般是由于时钟板提取时钟不稳所造成。
检查设备的时钟板，如果判断是时钟板有故障，则对其进行更换。
●DATA-DIFFER（保护数据不一致）：
设备如果配有PQ1板的电保护功能，则需要对工作PQ1板的数据进行保存，而保存的数据放在EIPC板上。
当对工作板进行了操作（如环路，端口的开关）后，设备会检测到实际数据与保护数据不一致而上报该告警。
对EIPC板进行数据保存。
●PS（保护倒换告警）：
华为SDH设备提供了多种保护倒换，包括复用段的环路或链路保护，电支路板的保护。
当有保护倒换发生时，交叉板就会上报PS告警。
检查当前设备发生了什么倒换，再通知维护人员做相应的检查工作。
3、应急方案
●备品备件应急
现在广州本地网华为传输设备的备板全部集中在西德胜，由传输室统一调度。
现有设备上的常用单板均有至少一块备板。
而不常用的单板，如EIPC，IPSW，E75S等，可以在二干长长中继的备板中借用。
广州本地接入网已经有几套155H设备作为备件，并且分发到各个代维公司手上，如果不够用可以向工程中心提出申请，调用工程件。
目前，我们本地传输网在用设备的硬件保护是比较强的，各种业务板，如XCS，S16，SD4，PQ1以及部分SQ1都在设备上有备份板，这也给我们提供了抢修的缓冲时间，并能基本保证实际业务不受影响。
四、传输线路重大故障的处理
1、故障处理指引
1、当怀疑线路有故障时，请监控室值班人员马上通知传输室值班工程师，并把详细故障现象以及网管上的相关告警描述清晰。
2、传输室值班人员在通知的同时应该主动询问网管告警信息，并马上开始考虑应急调度方案，以抢通业务为首要目的。
3、在不确定是设备故障还是线路故障的时候，需要马上通知两类代维人员和维护人员出发抢修。
4、调度方案首先考虑进行光纤的调度，其次是高次群电路的调度，确实没有办法才进行2M电路的调度
2、应急方案
1、西德胜－番禺
西德胜－番禺目前共有两条同路由的光缆，分别是本地96芯G.652光缆，一干96芯G.655光缆，本地网骨干环西德胜到番禺和广番一系统使用本地接入光缆作为第二路由来保护，如果一条光缆中断引起业务中断的可能性很小。
如果出现当本地网光缆中断使业务中断时；
如果一干的光缆中断，可以尝试用本地光缆进行调通，但是由于色散的影响未必能够调通业务。
也可以通过西德胜－西华－经典居－钟村－塘步西－富华的路由调通光缆，不过该路由在富华出局约1.5KM为同路由，如果该段路由的管道中断，则广番第一、第二路由均将中断。
应对方法是：
1、在中断处直接放缆熔接在用纤芯；
2、将丹山－钟村接入主干光缆延伸到世纪城基站，再通过城区接入光缆恢复。
2、西德胜－从化
西德胜－从化有一条中继光缆，为48芯的本地中继652光缆光缆，如果由于光缆中断导致业务中断时（由于西德胜－从化系统使用了一对电信光纤作为备用因为光缆断而导致业务中断的情形很少出现），可以利用西德胜－黄石－太和－太平－青云的路由调通光缆。
但该光缆和中继光缆同路由，如果在太平－青云之间全部中断，应对方法是：
1、尽快熔通在用纤芯；
2、利用青云－人和－太平路由调通，需3点派人调纤。
如果在太平－西德胜之间全部中断，应对方法是：
1、利用西德胜－花都－从化系统进行2M的调度，尽量保证业务不全阻；
2、尽快熔通在用纤芯；
3、利用长距光板，走西德胜－花都－花山－人和－青云，需5点派人调纤，并在西德胜、青云更换长距光板。
3、西德胜－增城
西德胜－增城目前有两条同路由的光缆，分别是本地96芯652光缆和二干的48芯655光缆。
两条光缆可以互为备份，但是由于色散的问题未必可以调通。
西德胜－增城第二路由光缆已经完成施工，可以提供备份路由，目前本地西德胜－荔乡的骨干环均已经完全优化为物理环，如果两条缆都中断也不会影响本地业务。
4、西德胜－花都
西德胜－花都目前有两条同路由的光缆，分别是本地48芯652光缆和一干84芯655光缆。
目前本地的骨干环系统均已经利用西德胜－黄石－太平－花山－公益的路由完成了优化，因此如果两条光缆都中断，本地网的业务不会影响，对于二干可以可以利用西德胜－黄石－江村－花都的接入光缆调通，如果三条全部中断，应对方法是：
2、利用长距光板，通过西德胜－太和－太平－花山－公益路由调通，需5点派人调纤，同时西德胜、公益需更换长距光板；
3、通过西德胜－花都－从化系统进行2M的调度，尽量保证业务不全阻。
（西德胜－花都2系统主用在本地光缆上，备用使用了电信的光纤，比较有保障。
）
5、西德胜－大沙东
西德胜－大沙东目前有两条共用电力管道的光缆，分别是本地96芯的652和144芯652光缆。
其中144芯的光缆在润粤全进全出后到大沙东，96芯光缆润粤全进全出后在体育东分接到体育东、大沙东和客村。
另外还有一条西德胜－润粤－科学城－黄埔－大沙东的路由。
目前在大沙东的3个骨干环均已经完全优化为物理环，由于光缆中断引起业务中断的可能性已经很小了，如果出现3条光缆均中断的情况，目前的应对方法是：
1、利用骨干环2进行2M调度，尽量保证业务不全阻；
2、尽快熔通在用纤芯。
（大沙东机房已经搬迁）
6、西德胜－石井
西德胜－石井是本地的48芯652光缆，骨干环2西德胜－石井段已经使用同铁通置换的两芯光纤，由于光缆中断引起业务中断的可能性很小。
（石井本地网机房已经搬迁）
7、西德胜－海印苑－东晓－客村
这一段是本地96芯652光缆。
其中任何一段出现中断都可以通过西德胜－润粤－客村或西德胜－西华－经典居－客村的纤芯调通。
8、西德胜－黄石－西德胜
西德胜－黄石－西德胜是本地108芯的652光缆环，安全性较高，但是如果在西德胜出局到下塘西与广源路口处出现中断就只能等待修复了。
9、西德胜－沙河－润粤
可以通过西德胜－润粤的96芯或144芯光缆进行调度。
10、西德胜－西华－西德胜
西德胜到西华间目前是本地48芯652光缆环，安全性较高，如果全部出现问题可以利用西德胜－润粤－西华的路由来调度。
11、西华－经典居－新港西
该汇聚环光缆路由为一个物理环，分别使用西华－经典居、经典居－新港西、新港西－宝岗路－光复中－西华三段不同路由的光缆，如果出现一段光缆中断不会引起业务中断。
12、西华－光复中
西华到光复中为一条144芯的光缆，如果该段光缆中断可以利用西华－西德胜－海印苑－光复中的路由和西华－红棉苑－宝岗路－光复中的路由调通光缆
13、西华－红棉苑
西华－红棉苑为一条96芯光缆，，如果光缆中断可以利用西华－光复中－宝岗路－红棉苑的路由调通光缆。
14、西德胜－庄头
西德胜－庄头目前使用西德胜－西华－光复中－宝岗路－庄头的光缆，如果西德胜－西华段中断可以利用西德胜－西华第二路由调通，西华－光复中段可以利用西德胜－海印苑－光复中路由调通，如果光复中－宝岗路中断可以利用西德胜－西华－经典居－新港西－宝岗路或西德胜－红棉苑－宝岗路调通，宝岗路－庄头中断可以利用西德胜－西华－经典居－庄头的光缆调通；
（庄头机房已经搬迁）
15、西华－庄头
西华－庄头段目前使用西华－经典居－庄头段光缆，如果西华－经典居段中断可以利用西华－润粤－客村－经典居的光缆调通，如果经典居－庄头段光缆可以利用西华－经典居－新港西－宝岗路－庄头的光缆调通。
16、西德胜－科学城
西德胜－科学城目前有西德胜－广汕路－科学城的12芯光缆，西德胜－润粤－科学城的12芯光缆，以及西德胜－润粤－珠江新城－科学城的96芯光缆，该三条光缆可以互为保护路由。
路由的安全性很高。
四、传输系统重大故障应急预案
1、启用本预案的原则是：
出现重大故障时先遵循重大故障处理流程进行处理，如无法及时恢复业务时，应首先判定是线路引起故障还是系统引起故障，如为线路引起故障，则先启用线路重大故障应急预案，如仍未及时恢复业务，则启动本应急预案。
2、大故障发生后未能及时得到恢复的情况下，将启动对重要的业务电路进行紧急调度，紧急调度的电路原则如下：
1）紧急调度受本次故障影响的信令电路，保障业务端局的信令业务的正常疏通。
该部分电路是指端局至LSTP、HLR的信令电路。
2）紧急调度受本次故障影响的重要局向的话务电路，使话务能够部分甚至全部的疏通。
该部分电路是指端局至TR、GW、MTM1的电路。
3）在紧急电路调度时，首先满足信令电路的资源，然后在抢通话务电路。
3、在紧急电路调度时，需要考虑传输的资源情况和通路组织情况，要首先考虑调度备份直达路由上的电路，然后再考虑迂回路由的情况，这样才能完成高效的完成业务抢通的要求，具体的路由分析情况见下表：
节点1
节点2
直达路由
迂回路由
路由段1
转接点
路由段2
西德胜
西华
骨干环1
骨干环14
骨干环15
骨干环22
骨干环23
骨干环24
骨干环26
番禺富华
骨干环7
骨干环13
科学城
体育东16楼
骨干环17
较场西
骨干环3
番禺东城
骨干环8
骨干环16
从化青云
骨干环4
骨干环10
花都公益
骨干环5
增城荔乡
骨干环9
骨干环18
骨干环1－骨干环16
骨干环22－骨干环8
骨干环15－骨干环8
骨干环15－骨干环16
骨干环24－骨干环8
骨干环11
骨干环2－骨干环3
骨干环30
骨干环1－骨干环10
骨干环1－骨干环11
骨干环1－骨干环14
骨干环1－骨干环9
骨干环1－骨干环18
骨干环12
骨干环24－骨干环8
骨干环24－骨干环16
骨干环22－骨干环14
骨干环15－骨干环14
骨干环15－骨干环23
骨干环22－骨干环18
骨干环2－骨干环14
骨干22
4、操作应按如下原则进行：
1）所需调通电路数量不大的情况下，在支路板端口允许情况下，完成通道配置后，直接利用机房故障应急跳线进行电路跳通；
2）电路数量较大时，且原支路板工作正常，可通过调度155M或以上接口备板来完成两个系统之间的调通。
3）必要时通过增加支路板，并利用故障应急跳线进行电路跳通。
4）汇聚环的电路应急操作也可参考上述三种做法，以确保业务的及时抢通。
五、一干、二干传输设备重大故障处理流程
一干和二干的监控第一责任人是省网维，而且广州公司没有一干的传输监控终端。
所以，对于一干和二干传输故障，我们主要是配合为主。
a）监控室值班人员接受省公司的故障通报
b）监控室值班人员马上将故障情况以及省公司联系电话通知传输室值班手机（传输室传输网络值班手机：
136*******）
c）传输室技术人员进行故障处理
d）故障处理结束后，
升级会员 