MSCPOOL解决方案应急预案
应急预案-上海通信段MSC设备应急预案 精品
编号：上铁电专-共用-04-001-20XX数字移动通信系统MSC设备应急预案上海通信段上海高铁通信车间20XX年2月一、编制依据1.《上海通信段应急处置管理实施细则》（上通信调[20XX]230号）；2.《上海铁路局关于进一步规范路局应急处置指挥体系建设的通知》（上铁运[20XX]283号）；3.《上海通信段铁路通信障碍（故障）管理实施细则》（上通信调发[20XX]89号）二、系统整体介绍上海GSM-R机房MSC基于西门子EWSD平台。
所有寄存器功能，都是由软件来实现的。
在硬件设计方面，许多重要部件都设置了冗余备份，主要体现在0侧与1侧互为备份。
目前MSC网络应用情况：与北京核心网、武汉核心网的MSC/VLR、HLRi、SCP相连，与虹桥BSC、京沪高BSC、南京BSC、温州BSC、阜阳BSC、合肥BSC、杭州BSC各局向、FAS等相连，实现了上海局下所有GSM-R客专线的GSM-R核心交换、网内移动号码的鉴权、铁路专用的位置寻址、功能寻址、调度台与GSM-R移动终端的通信等功能。
三、应急预案内容1.故障等级（一、二、三级）1)一级：设备宕机、与一个或多个TMSC局向中断、与某STP的信令能力中断、突发话务量造成上海MSC负荷过高的设备过载控制、智能业务中断、与专网（PSTN）的互联互通故障、与FAS系统局向全部中断、HLRi系统故障、与BSC系统局向全部中断、与RBC机房互联全部中断、与北京武汉互联电路全部中断。
2)二级：MSC个别进程或数据吊死、对某局向中继部分中断。
3)三级：单板故障（影响业务）2.关键项：汇报、登销记1)当虹桥GSM-R工区发现局管内GSM-R系统MSC设备发生障碍（故障）时，应在五分钟之内汇报段调度、车间主任、网调工区，并通知相关设备维护车间网调工区。
2)车间主任在接到汇报后，立即组织人员赶赴虹桥GSM-R工区，负责组织指挥处理、信息汇报、障碍（故障）分析等。
3)虹桥GSM-R工区负责障碍（故障）的指挥处理、过程信息汇报、处理报告的撰写等。
MSC POOL容灾机制分析
MSC POOL容灾机制分析【摘要】MSC Pool是一种新的核心网组网方式。
本文简单介绍了MSC Pool的组网优点、容灾的机制原理，重点阐述了在单局故障下的主被叫业务容灾。
MSC Pool不仅提高了核心网的可靠性,也有效地提高了核心网络资源的利用率。
【关键词】MSC POOL;MSCS;容灾0.前言MSC Pool是一种新的核心网组网方式，这种组网模式打破了R4阶段一个MGW只能连接到一个服务MSC Server（以下简称MSCS）的限制。
在MSC Pool 组网中，一个MGW可以连接到多个服务MSCS上，由这多个服务MSCS共同组成一个资源池，为所管理的MGW提供服务。
与传统的网络相比，MSC Pool 组网具有以下几个优点：（1）负荷分担：在MSCS间分担网络负荷，提升整个核心网资源利用率，节省设备投资。
（2）容灾：实现MSCS级的容灾备份。
（3）减少局间位置更新，降低C/D接口信令流量，提供了MSC Server的容量增益。
（4）减少局间切换，降低掉话率，提高用户通话质量。
1.MSC POOL容灾机制概述在MSC POOL中，MSCS的容灾机制主要有两种，一种为集中备份，即POOL 内各个MSCS的用户数据备份到同一个指定的MSCS上；另一种为链式备份，即各MSCS间成链式备份，如MSCS A备份MSCS B，MSCS B备份MSCS C,MSCS C 备份MSCS A。
由于集中备份方式对备份局配置、容量等要求较高，所以在现网中多采用链式备份。
在MSC POOL组网过程中，需要特别关注MSC POOL内各局的用户数，原则上需要保证单个MSCS宕机时，POOL内其他各局的空闲容量能够容纳该局服务的用户，从而避免POOL内用户容量不足造成的MSCS宕机的连锁反应。
2.MSC POOL中重要术语概述（1）NNSF（NAS node selection Function）：即非接入层节点选择功能，用于为一个MS选择服务的MSC Server节点。
MSCPOOL解决方案应急预案
MSOFTX3000&UMG8900 MSCPOOL 应急指导书1 概述1.1 目的MSOFTX3000＆UMG8900产品在MSCPOOL组网时，可能会因为POOL中的某个网元单点故障或承载网故障导致整个POOL范围内业务受到影响，这种情况发生时造成的后果将比单MSC组网时更为严重.本文专门针对MSC POOL组网情况制定应急处理措施.1.2 使用对象一线用服人员；二线用服人员；MSOFTX3000&UMG产品开发、维护人员。
1.3 MSCPOOL组网时故障处理的基本思想针对以上POOL组网的特点，在对POOL网络进行故障处理时，需要：1）树立全局观,从网络层面观察问题现象，尽量从网管上进行话统和告警信息收集和分析；若网管上的信息不全,则需要尽快使用信息收集工具并行收集POOL内所有MSC Server的信息；2）通过对POOL内所有MSC Server和MGW网元上的告警和话统进行综合分析，来界定故障网元（也包括故障的承载网路径）并进行故障隔离；3)了解POOL组网情况下网元间的信令消息广播和重传机制,必要时切断广播路径；4)对IP承载网的Qos质量检查手段、承载网平面倒换方法充分掌握；5)对SIGTRAN链路在承载网质量下降或中断时的处理机制、外在表现和定位手段充分了解。
POOL组网下，事故处理总流程：关键点：1）明确POOL网络级组网方案；2）故障网元或故障承载网路径的定界；1.4 POOL组网时网络维护所需提前准备的工作1.4.1 准备并配置好M2000网管注：M2000的V200R008版本需要安装专门的RPS模块才能支持POOL性能统计功能;因此M2000的版本使用V200R009C00版本更合适.1.4.2 获取MSC POOL组网图和MSCPOOL规划数据方法1：从M2000上查看MSCPOOL网络拓扑在M2000上一般已经设置了MSC POOL的网络拓扑关系，从M2000上可以直观的查看POOL中各种网元(MSC和MGW）的数量;且可以查询简单的MSC POOL的全局规划数据,如CN-ID、NRI、NullNRI、以及CN—ID与NRI的对应关系等配置信息.(仅能收集到最简单的拓扑关系，网管上可能尚未配置）方法2：从网规网设文档中查看MSCPOOL网络拓扑（网规网设文档可能无法及时获取，网规网设文档中的信息可能不是最新）；方法3：咨询一线人员，临时获取网络拓扑（速度慢,准确度低）;方法4：手工从数据库获取MSCPOOL的网络组网情况（效率低,速度慢);1.4.3 在M2000上设置实时监控在M2000上，可以创建MSCPOOL实时监控任务来查看POOL的实时运行状态，具体方法：通过选择“维护> Pool操作维护”菜单,打开“Pool操作维护”界面.在导航树中选中要监控的MSC Pool，右键选择“实时监控”.下面是在M2000上创建的MSC POOL实时监控的输出结果图例：1.4.4 在M2000上查询MSC POOL话统注意：在M2000上查询MSCPOOL的话统前提是已经使用M2000在POOL内各网元上已经登记所依赖的话统任务.在网元上所需要预先登记的话统任务如下表所示:在M2000上,可以通过“Performance-〉Query Result”菜单项开启话统查询导航树，导航树种会列出POOL支持的话统任务，通过右键菜单即可开始进行话统结果查询。
通信系统MSC设备应急预案
汇报人：日期:CATALOGUE目录•引言•应急预案概述•通信系统MSC设备故障识别和判断•应急响应和处置措施•安全防护和预防措施•培训、演练和宣传教育•结论和建议引言目的背景目的和背景MSC 应急预案定义和术语适用范围本应急预案适用于通信系统MSC设备发生各类突发事件，包括设备故障、自然灾害、网络攻击等。
限制本应急预案仅针对通信系统MSC设备，其他设备或系统的应急处理请参考相关预案。
适用范围和限制应急预案概述应急预案的制定原则和方法制定原则科学、规范、快速、简便、实用、操作性强。
制定方法依据风险评估、事故类型、历史经验、相关法规和标准，制定相应的应急预案。
应急预案的启动条件和流程启动条件启动流程应急预案的执行步骤和责任人执行步骤1. 报警：发现故障或紧急情况时，立即向应急指挥中心报告。
2. 核实：应急指挥中心核实情况，确定应急响应等级。
应急预案的执行步骤和责任人030201在应急结束后，进行总结反馈，完善应急预案。
责任人应急指挥中心负责指挥协调，各应急小组负责具体执行。
6. 反馈应急预案的执行步骤和责任人VS03通信系统MSC设备故障识别和判断网管告警性能指标下降或异常，如CPU使用率过高，内存占用过多等。
性能指标人工巡检应急响应和处置措施协调机制建立应急响应的协调机制，包括信息报告、决策支持、资源调配等。
组织架构明确应急响应的领导、协调、执行和支援小组，制定各小组的职责和权限。
紧急联系建立紧急联系渠道，确保各小组之间的信息传递及时、准确。
应急响应的组织和协调机制故障诊断备份设备修复故障安全性考虑MSC设备故障的处置措施应急响应的评估和总结安全防护和预防措施MSC设备的安全防护措施为MSC设备配置先进的防火墙，以防止未经授权的访问和数据泄露。
防火墙设置加密通信访问控制安全审计使用加密技术确保MSC设备之间的通信安全，防止数据被篡改或窃听。
设置严格的访问控制策略，限制只有授权人员才能访问MSC设备。
船舶应急预案
船舶应急预案一、应急预案目的。
船舶应急预案的目的是为了在船舶遇到突发事件或危险情况时，能够迅速、有效地采取措施，保障船员和船舶的安全，最大限度地减少损失。
二、应急预案内容。
1. 突发事件应急响应流程。
当船舶遇到火灾、泄漏、碰撞等突发事件时，船舶应急预案要求船员立即启动应急响应流程，包括向船舶管理部门报告、启动应急设备、组织船员进行应急演练等。
2. 船员应急处置措施。
船舶应急预案要求船员在遇到突发事件时，要根据具体情况迅速采取相应的处置措施，包括疏散船员、扑灭火灾、封堵泄漏等，确保船舶安全。
3. 应急设备和物资准备。
船舶应急预案要求船舶配备应急设备和物资，包括灭火器、救生衣、救生艇等，确保在突发事件发生时能够及时使用。
4. 应急演练和培训。
船舶应急预案要求定期组织船员进行应急演练和培训，提高船员的应急处置能力和应变能力，确保在突发事件发生时能够迅速、有效地应对。
5. 应急通讯和联络。
船舶应急预案要求船舶配备应急通讯设备，确保与船舶管理部门和其他船舶保持联络，及时报告和接收信息，协调应急处置工作。
三、应急预案执行。
当船舶遇到突发事件时，船舶应急预案要求船员按照预案流程和要求迅速、有序地执行应急处置措施，确保船员和船舶的安全。
四、应急预案修订和完善。
船舶应急预案要求定期进行评估和修订，根据船舶实际情况和突发事件的特点，不断完善和提高应急预案的实施效果。
五、应急预案宣传和培训。
船舶应急预案要求船舶管理部门对船员进行应急预案宣传和培训，提高船员的应急意识和应急处置能力。
六、应急预案监督和检查。
船舶应急预案要求船舶管理部门对船舶的应急预案进行监督和检查，确保预案的有效性和可操作性。
同时，要求船舶管理部门和船员定期进行应急演练，以检验应急预案的可行性和有效性。
以上即为船舶应急预案的基本内容，希望船员和船舶管理部门能够认真执行，确保船舶安全。
4、中国移动重大故障应急预案指导分册
CM-IMS设备重大故障应急预案中国移动集团公司发布二零一零年六月前言为切实保障网络安全，避免重大故障发生，落实刘爱力副总裁““低成本”绝不能以牺牲网络质量为代价，绝不是设备采购、网络建设、容灾备份、维护人员等方面低品质下的低成本”，应“纠正由于认识不足而导致的质量保障资源的投入不足”重要指示。
网络安全是电信企业正常运营的核心，是保证网络品质和保障客户利益的基础。
为提升网络安全，特制定本容灾备份指导手册。
参与编写人员张彬管益文叶健景技楼剑帅第一部分核心网容灾 (6)1.核心网容灾意义、原则、实施策略 (6)1.1核心网容灾意义 (6)1.2核心网容灾总体原则 (6)1.3核心网容灾实施策略 (6)2.核心网容灾人员保障及职责分工 (7)3.核心网容灾总体要求 (7)3.1核心网容灾资源管理要求 (8)3.2核心网容灾传输方面要求 (8)3.3核心网容灾割接时限要求 (8)3.4核心网容灾人员配备及能力提升 (9)3.5核心网容灾演练要求 (9)3.6其他 (9)4．容灾备份方案及主要流程 (9)4.1 MSC/MSC Server容灾备份方案 (9)4.1.1 MSC POOL容灾备份方案 (9)4.1.1.1容灾资源需求 (10)4.1.1.2应急数据制作 (10)4.1.1.3应急资料要求 (10)4.1.1.4 容灾操作 (10)4.1.2 MSC Server N + 1非实时容灾备份方案 (11)4.1.3 MGW割接容灾备份方案 (12)4.1.3.1 容灾资源需求 (12)4.1.3.2 应急数据制作 (12)4.1.3.3 应急资料要求 (13)4.1.3.4 容灾操作 (13)4.1.4 BSC/RNC割接容灾备份方案 (14)4.1.4.1 容灾资源需求 (14)4.1.4.2 应急数据制作和定义 (14)4.1.4.3 应急资料要求 (15)4.1.4.4 容灾操作 (16)4.2 MGW容灾备份方案 (16)4.2.1 MSC POOL容灾备份方案 (16)4.2.1.1 容灾资源需求 (16)4.2.1.2 应急数据配置 (17)4.2.1.3 应急资料要求 (17)4.2.1.4 容灾操作 (17)4.2.2 BSC（RNC）割接容灾备份方案 (18)4.3 HLR容灾备份方案 (18)4.3.1 HLR的1 + 1实时容灾备份方案 (18)4.3.1．1 容灾资源需求 (18)4.3.1．2 容灾准备要求 (18)4．3.1．3 容灾步骤 (19)4.3.2 HLR的N + 1动态容灾备份方案 (19)4.3.2.1 容灾资源需求 (19)4.3.1.2 容灾准备要求 (19)4．3.1．3 容灾步骤 (20)4.3.3 HLR的N + 1静态容灾备份方案 (20)4.3.2.1 容灾资源需求 (21)4.3.1.2 容灾准备要求 (21)4．3.1.3 容灾步骤 (21)第二部分无线网容灾 (23)1.无线网容灾意义、原则、实施策略 (23)1.1无线网容灾意义 (23)1.2无线网容灾总体原则 (23)1.3无线网容灾实施策略 (23)2.无线网容灾人员保障及职责分工 (24)3.无线网容灾方案及主要流程 (27)3.1容灾ABIS端口割接 (27)3.1.1 应急资源需求 (27)3.1.2应急数据制作和定义 (28)3.1.3操作流程 (28)3.2. 利用容灾BSC整体割接法 (28)3.2.1应急资源需求 (29)3.2.2应急数据制作和定义 (29)3.2.3操作流程 (30)4.无线网容灾启动及流程 (30)4.1无线网容灾启动要求 (30)4.2无线网容灾启动流程 (30)5.无线网容灾相关要求 (24)5.1无线网容灾方案的总体要求.................... 错误!未定义书签。
MSC POOL+Mini-Flex实现容灾的原理及解决方案
￣ｆ ｑ 搀ｌ… ｆ Ｖ 术 Ｃ
Ｓｐ ｉ ｅｃ ａ
中国 联通珠海分公司 黄 卓 傈
【 摘 要１
的Ｃ Ｎ并 没有故 障Ｃ Ｎ的用户数 据 ．故 障Ｃ Ｎ下 的用户也 无
法 做 主 被 叫 需 要 重 新 做 位 置 更 新 ． 这 可 能 会 造 成 网 络 拥塞 。当故障 的Ｃ Ｎ恢 复 正 常 后 ．同 样 也 会 对 用 户 造 成 影 响 。 故 双 归属 并 不 是 最 好 的 容 灾 方 案 （ １ 图 ）。
非 接 入 层 节 点 选 择 功 能 （ ＮＳ Ｎ Ｆ） ．用 于 为 一 个 Ｍ Ｓ ／
时 ，ＮＮＳ 功 能 节 点 根 据 自 身 配 置 的ＮＲ 与Ｍ Ｓ ＯＯＬ内 Ｆ Ｉ ＣＰ ＭＳ Ｃ的 对 应 关 系 ． 为Ｍ ＳＵＥ 择 服 务 的 ＭＳ ／ 选 Ｃ。 当被 选 择 的Ｍ Ｓ 无 效 或 没 有ＮＲ 与 ＭＳ Ｃ Ｉ Ｃ的 对 应 关 系 时 ，ＮＮＳ 功 能 Ｆ 节 点 采 用 负 荷 分 担 算 法 ，来 选 择 一 个 有 效 的 Ｍ Ｓ 作 为 服 Ｃ 务 的Ｍ Ｓ Ｃ。 当Ｍ Ｓ Ｃ以Ｉ Ｓ （ 际 移 动 用 户 标 识 ）寻 呼 被 Ｍ Ｉ 国 叫 ＭＳＵＥ ，ＮＮＳ 功 能 节 点 将 临 时存 储 Ｉ Ｓ与 发 寻 呼 的 ／ 时 Ｆ Ｍ Ｉ
随 着３ Ｇ的 大 规 模 网 络 建 设 ． 移 动 核 心 网 的 组 网 向 着 大 容 量 、 高 集 成 方 向 发 展 ．２ ３ Ｇ／Ｇ共 用 Ｃ （ 心 网 ） 设 Ｎ 核
备 已经 成 为各 大运 用商 节省 投资 的必 然选择 。移 动核 心 网的网络安全却显 得越来越重要 。ＭＳ ＯＯ ＋ ｎ． ｌ Ｃ Ｐ Ｌ Ｍｉｉ ｅ Ｆ ｘ 能 更好地 实现 核心 网 的容灾 ，同时能将 网络 故障 对 用户
MSC POOL一键应急修复模块
MSC POOL—键应急修复模块王慧(中国移动通信集团湖北有限公司宜昌分公司，湖北宜昌443005)摘要：MSC POOL的组网结构打破了传统移动网中M SC和BSC/RNC之间一对多的树型拓扑结构，改变为一个BSC/ RNC节点可以对应多个M SC节点，M SC节点和B SC节点间是多对多的关系。
在这种组网模式下，MSC POOL内MSC 间的容灾容易实现，在一键应急系统上配置简单的脚本命令，可自动恢复业务。
关键词:MSC POOL;—键应急;宕机;动态指令中图分类号:TN929.5 文献标识码:A文章编号:1673-1131(2018 )07-001<M)21概述MSC POOL(移动控制中心池)是一种资源池组建方案，该方案采用了 Iu/A-Flex技术，改变传统的单一映射关系，让一个B S C或RNC可以同时归属于多个MSC,让后将这些M SC圈起来，组成一个庞大的M SS资源池，进而实现多个M SC的资源共享。
这样，当MSC POO L中的某一个或某一些M S C出现问题或发生故障时，系统会自动将这些故障M SC的任务转移到同一资源池中的其他MSC,实现了 MSC PO O L内众多M SC之间的容灾。
MSC POOL应急演练旨在测试“湖北移动一键应急修复模块”的可操作性、实用性。
演练在YCHGS6交换机出现故障的情况下，使用该工具将用户迁移至PO O L内其他SERVER的场景，迁移过程中YCHGS6下用户能自动负荷分担至POOL内其他3个端局WHGS57/YCHGS17ATCHGS11,用户业务及感知度基本不受影响。
2基于一键应急修复模块的YCHGS6宕机演练2.1 MSC P O O L的容灾原理(1) MSC POO L的主叫容灾。
一般地，当MSC POO L中-某M SC发生故障并最终失效无法对外提供服务时,注册在该M SC中的用户，其发起的业务会自动被NNSF实体采用负荷分担的方式，按照一定的算法，路由到POO L内其他有效的M S C中,这样，M SC之间的容灾得已实现。
应急池专项应急预案
应急池专项应急预案1. 引言应急池是一个面向企业的资源管理系统，在应对紧急情况下提供需要的人员和技能。
为了确保在紧急情况下能够高效地利用和调动应急池资源，制定一份专项应急预案非常必要。
本文档描述了应急池专项应急预案的目标、范围、组织结构、流程以及应急响应阶段的任务与责任等内容。
2. 目标应急池专项应急预案的目标是确保在紧急情况下能够迅速调动和利用应急池资源，提高应对紧急事件的响应能力和效率。
3. 范围本预案适用于所有使用应急池资源的企业。
其中包括但不限于以下情况：•自然灾害：如地震、洪水、台风等。
•社会突发事件：如恐怖袭击、大规模罢工等。
•重大事故：如火灾、道路交通事故等。
4. 组织结构应急池专项应急预案的组织结构如下：•应急池专项应急指挥部：负责制定应急预案、协调应急响应工作。
•应急池资源管理部门：负责应急池资源的采集、管理和调配。
•应急池资源维护人员：负责维护和更新应急池资源信息。
5. 流程应急池专项应急预案的流程包括以下几个阶段：5.1 预案制定和培训在正常情况下，应急池专项应急指挥部负责制定应急预案，并进行相关人员的培训。
预案制定涵盖以下内容：•应急池资源的采集和管理规范。
•紧急事件的分类和应急响应程序。
•应急通信和协调机制。
5.2 应急响应准备在紧急事件发生前，应急池资源管理部门负责根据应急预案的要求，做好以下准备工作：•更新应急池资源信息。
•制定具体的调派细则和流程。
•配置应急通信设备等必要设备。
5.3 紧急事件发生当紧急事件发生时，应急池专项应急指挥部立即启动应急响应程序，包括以下步骤：1.评估紧急事件的性质和影响程度。
2.根据应急池资源的需求，调动相应人员和技能。
3.确保应急通信畅通，加强与相关方的协调。
5.4 应急响应结束和总结紧急事件处理完毕后，应急池专项应急指挥部负责进行总结和评估工作，包括：•对应急响应的效果进行评估。
•针对不足之处提出改进措施。
•更新应急池资源信息。
6. 应急响应阶段的任务与责任应急响应阶段的任务与责任如下：•应急池专项应急指挥部：–制定应急预案。
移动网MSCPOOL容灾解决策略
2019年第3期 信息通信2019(总第 195 期）INFORMATION & COMMUNICATIONS (Sum . N o 195)移动网MSC POOL 容灾解决策略沈莼吉(中国联通浙江省分公司，浙江杭州310000)摘要:文章主要对移动网端局M SC 设备全冗灾组网方案，介绍了各种可行的全冗灾组网方案，并对全冗灾组网方案进行 了对比分析，最后给出建议的M SC PO O L 全冗灾组网方案和的典型演进步骤,希望对后续电路域设备冗灾组网规划提 供借鉴意义。
关键词：冗灾;移动核心网；电路域;MSC Pool ;冷备;双归属;双接入;双挂;A-Flex Iu-Flex VoIP B IC C ;G SM ; W CDMA 中图分类号:TN 929.5文献标识码:A文章编号:1673-1131(2019)03-0196-031概述针对移动核心网端局M S C 设备冗灾现状，本文初步讨论 了电路域端局M S C 设备全冗灾组网方案，介绍了各种可行的 全冗灾组网方案，并对全冗灾组网方案进行了对比分析，最后给出建议的MSC POOL 全冗灾组网方案和的典型演进步骤。
目前电路域端局M S C 采用三种网元级别冗灾组网方案: 双归属组网、代理MSC Pool 组网和M S C 冷备组网。
双归属组网:一般采用N + 1冗灾组网，“1”个备份MSC Server 作为其它“N ”个M SC Server 冗佘备份系统。
正常情况下N 个M SC Server 是激活的，另一个M SC Server 完全处于 备份状态。
当主用MSC Server 发生故障后相应的业务数据会 在备用M SC Server 上激活，备用MSC Server 接管原主用MSC Server 下的M G W 处理后续业务。
代理MSC Pool 组网：MG W 实现A -Flex 和I u -Flex 功能， M G W 代理NNSF 功能组MSC Pool 。
通信系统MSC设备应急预案
网络故障定位
利用网络拓扑结构、路由追踪等手 段，寻找故障点。
电力故障定位
通过检查电源、UPS等供电设备， 保障电源供应稳定性。
04
故障处理与恢复
故障处理流程
故障发现
故障诊断
一旦发现通信系统MSC设备出现故障，应 立即报告给相关人员并进行记录。
根据故障现象，分析可能的原因，并采取相 应的措施进行诊断。
预案原则
以保障通信系统的稳定运行为核心目标。
在故障发生时，能够快速定位和恢复，缩短故障时间 。
以预防为主，注重日常维护和备份措施，降低故障发 生的可能性。
充分利用现有资源，协同各个部门和厂商，共同应对 故障。
02
应急设备与工具
常用应急设备
不间断电源（UPS）
确保设备在电源故障时可以继续运 行一段时间。
数据保护与恢复
数据备份
01
为确保数据安全可靠，应定期备份数据。
数据恢复
02
如果数据出现丢失或损坏，应采取适当的措施进行数据恢复。
，应对数据进行加密处理，以避免数据泄
露。
05
安全与保障措施
网络安全保障
01
02
03
网络安全策略
制定并执行严格的网络安 全策略，限制未经授权的 网络访问，防止外部攻击 。
数据访问控制
制定严格的数据访问控制 策略，限制对敏感数据的 访问权限，防止数据泄露 。
人员安全保障
员工培训
加强员工的安全意识和技能培训，提高员工对安 全事件的应对能力。
访问权限管理
实施严格的访问权限管理策略，确保员工只能访 问自己所需的数据和系统资源。
员工离职安全
制定员工离职安全策略，清除离职员工在系统中 的权限，确保公司数据安全。
通信系统MSC设备应急预案
通信系统MSC设备应急预案一、背景介绍通信系统MSC设备是移动通信网络中的关键部件，负责承担信令控制、鉴权、用户鉴定和数据传输等重要功能。
一旦MSC设备发生故障或遭受攻击，将直接影响到移动通信网络的正常运行和用户服务质量。
因此，制定一份完善的MSC设备应急预案对于确保通信系统的稳定运行至关重要。
二、预案目标1. 确保MSC设备故障及时排除，恢复通信系统的正常运行。
2. 提高MSC设备的安全性，防止遭受各类网络攻击。
三、应急响应流程1. 检测与识别- 实时监测MSC设备的运行状态，及时发现设备故障或异常。
- 调查与确定故障原因，判断是否为硬件故障、软件错误或网络攻击。
2. 应急响应- 针对硬件故障，调动维修人员及时处理，将故障设备更换或修复并测试恢复情况。
- 针对软件错误，及时升级或修复MSC设备的程序和配置文件，确保正常运行。
- 针对网络攻击，开启网络安全应急响应机制，与相关部门合作，追踪攻击源头并采取相应防护措施。
3. 通信系统恢复- 在故障排除或攻击阻断后，对恢复的MSC设备进行全面测试，确保其正常运行。
- 通过备份恢复数据，尽快恢复用户业务。
- 与相关的部门合作，修复可能性的数据丢失或损坏。
四、预案实施与改进1. 预案实施- 确定预案实施的负责人和责任人，建立应急小组并制定详细的工作计划。
- 对相关人员进行培训，提高其应急响应和维修技能。
- 定期组织演练，验证预案，发现问题并及时改进。
2. 预案改进- 根据实际情况和应急响应的经验，及时修改和完善应急预案，弥补不足之处。
- 定期评估通信系统MSC设备的安全性，引入新的技术和手段，提供更好的安全保障。
五、总结通信系统MSC设备应急预案的制定和实施，对于确保通信系统的稳定运行、高质量的用户服务以及保障网络安全具有重要意义。
只有通过不断的改进和实践，才能做到应对各类突发情况，提供可靠的应急响应。
细胞库应急预案
一、前言细胞库是生物医学领域的重要资源，其安全性、稳定性和可用性对于科研、临床应用至关重要。
为了确保细胞库在突发事件中的安全运行，最大程度地减少损失，特制定本应急预案。
二、组织机构及职责1. 细胞库应急领导小组负责组织、协调、指挥细胞库应急管理工作，制定和修订应急预案，对应急工作进行全面监督。
2. 细胞库应急工作组负责具体实施应急预案，包括应急物资准备、人员培训、应急演练等。
3. 应急物资保障组负责应急物资的采购、储备、分发等工作。
4. 应急信息报送组负责及时收集、整理、报送应急信息。
三、应急预案内容1. 事件分类及分级根据细胞库突发事件的影响范围、危害程度、应急响应难度等因素，将事件分为以下等级：（1）一级事件：细胞库发生重大安全事故，可能造成严重后果。
（2）二级事件：细胞库发生较大安全事故，可能造成一定后果。
（3）三级事件：细胞库发生一般安全事故，可能造成轻微后果。
2. 应急响应程序（1）一级事件1）立即启动应急预案，组织应急领导小组和应急工作组开展工作。
2）启动应急物资保障机制，确保应急物资的供应。
3）对受损细胞库进行紧急修复，确保细胞库安全。
4）及时向上级单位报告事件情况，请求支援。
（2）二级事件1）启动应急预案，组织应急领导小组和应急工作组开展工作。
2）启动应急物资保障机制，确保应急物资的供应。
3）对受损细胞库进行紧急修复，确保细胞库安全。
4）及时向上级单位报告事件情况，请求支援。
（3）三级事件1）启动应急预案，组织应急领导小组和应急工作组开展工作。
2）对受损细胞库进行紧急修复，确保细胞库安全。
3）及时向上级单位报告事件情况。
3. 应急措施（1）人员疏散：在发生突发事件时，确保人员安全撤离。
（2）设备保护：在突发事件发生前，对关键设备进行保护，防止设备损坏。
（3）环境监测：对细胞库周围环境进行监测，确保环境安全。
（4）物资储备：提前储备应急物资，确保应急需求。
（5）信息沟通：及时向上级单位报告事件情况，确保信息畅通。
细胞库应急预案
一、背景细胞库作为生物医学研究、疾病诊断、药物研发等领域的重要资源，其安全稳定运行至关重要。
为应对可能发生的突发事件，确保细胞库的正常运行和资源安全，特制定本应急预案。
二、组织机构1.成立细胞库应急预案领导小组，负责应急预案的制定、实施、监督和评估。
2.领导小组下设以下工作小组：（1）应急指挥小组：负责应急工作的指挥调度、信息报送、应急处置等。
（2）物资保障小组：负责应急物资的采购、储备、调配和使用。
（3）技术支持小组：负责应急技术指导、设备维护和人员培训。
（4）宣传教育小组：负责应急知识的普及、培训和教育。
三、应急响应1.预警阶段（1）密切关注国内外细胞库安全事件，及时收集相关信息。
（2）对细胞库内部进行安全检查，确保设备正常运行，资源充足。
（3）对员工进行应急知识培训，提高应对突发事件的能力。
2.应急响应阶段（1）发现突发事件后，立即启动应急预案，通知相关人员。
（2）应急指挥小组负责协调各部门开展应急处置工作。
（3）根据事件性质，采取以下措施：①火灾：迅速组织人员疏散，切断电源，使用灭火器材进行灭火。
②停电：启动备用电源，确保细胞库设备正常运行。
③设备故障：及时更换设备，恢复正常运行。
④人员受伤：立即进行现场急救，送往医院治疗。
⑤环境污染：采取措施隔离污染源，防止污染扩散。
3.应急恢复阶段（1）应急处置结束后，对受损设备进行维修，确保细胞库恢复正常运行。
（2）对事件原因进行调查，制定整改措施，防止类似事件再次发生。
四、应急保障1.物资保障：储备足够的应急物资，如灭火器材、急救药品、食品、饮水等。
2.技术保障：定期对设备进行维护和保养，确保设备正常运行。
3.人员保障：加强员工应急知识培训，提高应急处置能力。
4.经费保障：确保应急预案的制定、实施和评估所需经费。
五、应急预案的修订与实施1.本应急预案应根据实际情况进行修订，每年至少修订一次。
2.本应急预案自发布之日起实施。
六、附则1.本应急预案的解释权归细胞库应急预案领导小组所有。
账户管理系统应急预案
账户管理系统应急预案1. 引言账户管理系统是公司的重要信息系统之一，用于管理用户账户信息和相关服务。
为了确保系统的安全运行，及时应对突发情况，并最大限度地减少系统故障对业务的影响，制定一份完善的应急预案至关重要。
本文档旨在提供账户管理系统的应急预案，以便管理人员和技术人员能够在应急情况下采取相应的应对措施。
2. 应急准备阶段在任何应急情况发生之前，我们应该做好充分的应急准备，以加强系统的防护能力和应对能力。
2.1. 安全守则和行为准则所有员工都应遵循公司的安全守则和行为准则，加强对账户管理系统的安全意识培训。
相关安全守则包括但不限于：不向他人透露账户信息和密码、不随意下载和打开不明来源的文件、定期更换密码等。
2.2. 安全审计和漏洞管理定期进行安全审计，测试系统的漏洞和风险，并及时修补漏洞和更新系统。
确保系统是基于最新的安全标准和技术构建的。
2.3. 数据备份和恢复建立完善的数据备份和恢复机制。
定期备份关键数据，并将备份数据存储在安全可靠的地方。
制定详细的数据恢复流程，以便在系统故障时能够尽快恢复数据。
3. 应急响应阶段当系统发生突发故障或安全事件时，我们需要及时响应并采取相应的措施来保护系统和用户数据。
3.1. 紧急通知和报警当系统发生故障或安全事件时，系统应具备自动发送紧急通知和报警的功能。
相关人员应及时响应并采取措施进行处理。
3.2. 系统保护与隔离在应急情况下，需要立即采取措施保护系统和用户数据安全。
可以通过强制登出所有用户、禁用异常账户、关闭系统对外访问等方式来防止进一步损害。
3.3. 故障排查与修复当系统出现故障时，需要立即对故障进行排查和修复。
可以通过系统日志、监控系统等方式来定位问题，并及时采取相应的修复措施。
3.4. 安全事件响应和调查对于安全事件，需要立即进行调查和响应，以确保安全事件得到妥善处理，并采取措施防止类似事件再次发生。
可以借助安全日志、审计工具等手段来进行调查。
4. 应急恢复阶段当系统故障或安全事件得到控制并解决后，需要进行相应的恢复工作，保证系统能够尽快恢复正常运行。
应急预案_处理池
一、预案背景为了保障游泳池内广大游客的生命财产安全，预防和减少游泳池内突发事件的发生，确保突发事件得到及时、有效的处理，特制定本应急预案。
二、适用范围本预案适用于游泳池内发生的各类突发事件，包括但不限于溺水、中毒、碰撞、跌倒、设备故障等。
三、组织机构及职责1. 成立游泳池突发事件应急指挥部，负责突发事件的组织、协调、指挥和处置工作。
2. 应急指挥部下设以下几个小组：（1）现场救援小组：负责现场救援工作，包括急救、疏散、救助等。
（2）安全保卫小组：负责现场秩序维护、人员疏散、车辆指挥等。
（3）信息报送小组：负责及时向上级领导汇报突发事件情况，确保信息畅通。
（4）后勤保障小组：负责应急物资、设备、交通工具的调配和供应。
四、应急处置措施1. 溺水事件（1）发现溺水者，立即启动应急预案，现场救援小组迅速展开救援。
（2）根据溺水者状况，采取相应的救援措施，如心肺复苏、拨打急救电话等。
（3）确保溺水者得到及时救治，同时做好其他游客的疏散工作。
2. 中毒事件（1）发现中毒者，立即启动应急预案，现场救援小组迅速展开救援。
（2）对中毒者进行初步救治，同时联系医疗机构进行进一步救治。
（3）对中毒原因进行调查，采取有效措施防止中毒事件再次发生。
3. 碰撞、跌倒事件（1）发现碰撞、跌倒事件，立即启动应急预案，现场救援小组迅速展开救援。
（2）对受伤者进行初步救治，同时联系医疗机构进行进一步救治。
（3）对事故原因进行调查，采取有效措施防止类似事件再次发生。
4. 设备故障事件（1）发现设备故障，立即启动应急预案，现场救援小组迅速展开救援。
（2）对故障设备进行抢修，确保游泳池正常运营。
（3）对故障原因进行调查，采取有效措施防止类似事件再次发生。
五、应急响应1. 发现突发事件后，立即启动应急预案，各小组按照职责分工迅速行动。
2. 应急指挥部根据现场情况，及时调整救援措施，确保突发事件得到有效处置。
3. 应急处置过程中，确保游客生命财产安全，维护现场秩序。
船舶应急预案实施方案
船舶应急预案实施方案船舶应急预案是指在船舶发生事故、遇险或者其他紧急情况时，为了保障船舶及船上人员财产安全而制定的一系列应对措施和预案。
船舶应急预案的实施方案是指在实际应急情况下，如何有效地执行应急预案，保障船舶和船员的安全，最大限度地减少损失的具体操作方案。
下面将从准备工作、应急预案的实施和事后总结三个方面，就船舶应急预案实施方案进行详细介绍。
一、准备工作。
1. 确定应急预案负责人和应急小组成员。
应急预案负责人要具备丰富的船舶管理经验和应急处置能力，应急小组成员要经过专业培训，熟悉应急预案的内容和操作流程。
2. 制定应急预案执行流程图和应急预案手册。
流程图要清晰明了，包括应急预案的启动流程、信息通报流程、指挥调度流程等；手册要详细介绍各类应急情况的处理方法和操作步骤。
3. 配备应急救援设备和物资。
包括但不限于救生衣、救生艇、救生圈、急救箱、通讯设备等。
二、应急预案的实施。
1. 应急预案的启动。
一旦发生事故或者遇险情况，应急预案负责人立即启动应急预案，通知应急小组成员到达指定地点。
2. 信息通报和联络。
负责人要及时向有关部门通报情况，与海上救援机构和其他船舶保持联络，协调救援工作。
3. 指挥调度和救援。
应急小组成员按照预案手册的要求，分工协作，进行救援和应对措施，确保船舶和船员的安全。
4. 事故处理和风险控制。
在救援工作进行的同时，要及时处理事故现场，控制事故风险，避免事态扩大。
三、事后总结。
1. 对应急预案的执行情况进行总结和评估。
包括启动时效、信息通报的及时性、救援效果等方面进行评估，找出存在的问题和不足。
2. 修订应急预案。
根据总结和评估的结果，对应急预案进行修订，完善不足，提高应急处置能力。
3. 经验总结和分享。
将本次应急救援的经验教训进行总结，分享给其他船舶，提高整个航运行业的应急处置水平。
以上就是船舶应急预案实施方案的内容介绍，通过准备工作的完善、应急预案的实施和事后总结，可以有效提高船舶在紧急情况下的自救和救援能力，保障船舶和船员的安全。
游泳馆应急预案
游泳馆突发公共卫生事件应急预案- 为及时调查、处理本单位的突发公共卫生事件，查清事件原因，减少对人体健康造成的损害，保障游泳池经营工作的正常运行，结合本池实际，特制定突发卫生事件应急预防方案。
一、工作目标1、普及各类突发公共卫生事件的防治知识，提高广大员工的自我防范意识。
2、完善突发公共卫生事件的信息监测报告网络，做到早发现、早报告、早隔离、早治疗。
3、建立快速反应和应急处理机制，及时采取措施，确保突发公共卫生事件不发生及在本单位蔓延。
二、工作原则1、预防为主、常备不懈宣传普及突发公共卫生事件防治知识，提高全体员工的防范意识和公共卫生水平，加强日常自查，发现隐患及时采取有效的预防与控制措施，迅速切断传播途径，控制疫情的传播和蔓延。
2、依法管理、统一领导严格执行国家有关法律法规，对突发公共卫生事件的预防、疫情报告、控制和救治工作实行依法管理。
在卫生行政部门的统一领导下，成立突发公共卫生事件防治领导小组，落实突发公共卫生事件的防治工作。
3、快速反应、运转高效建立预警和医疗救治快速反应机制，强化人力、物力、财力的储备，增强应急处理能力，做到早发现、早报告、早隔离、早治疗。
三、组织领导为危害健康的为切实防止突发游泳池卫生事件的发生，特建立本单位突发公共卫生事件应急领导小组，以加强组织领导。
组长:代有权副组长:常仙玉组员:兰志强、郭永花该领导小组负责领导、组织、协商和督查游泳池突发公共卫生事件的防控工作，保证防控工作高效、有序进行。
领导小组下设办公室，负责日常工作。
四、报告制度为了准确及时掌握疫情信息，建立预警报告制度，实行每日报告。
谁主管、谁负责，每日对员工和顾客状况进行检测，逐级汇报。
最后由领导小组办公室汇总向上级部门报告。
严格实行首见报告制度。
各岗位员工应密切关注同事和顾客的身状况，发现类似病状时，与病人接触的第一位员工应在第一时间向领导小组报告。
领导小组接报告后立即向相关行政部门报告。
对疑似病人实行有效隔离，然后协助有关部门进行现场处理和救治工作。
MSC POOL一键应急修复模块
MSC POOL一键应急修复模块
王慧
【期刊名称】《信息通信》
【年(卷),期】2018(000)007
【摘要】MSC POOL的组网结构打破了传统移动网中MSC和BSC/RNC之间一对多的树型拓扑结构,改变为一个BSC/RNC节点可以对应多个MSC节点,MSC节点和BSC节点间是多对多的关系.在这种组网模式下,MSC POOL内MSC间的容灾容易实现,在一键应急系统上配置简单的脚本命令,可自动恢复业务.
【总页数】2页(P10-11)
【作者】王慧
【作者单位】中国移动通信集团湖北有限公司宜昌分公司,湖北宜昌443005【正文语种】中文
【中图分类】TN929.5
【相关文献】
1.MSC POOL工作原理及应急方案探讨 [J], 黄斌
2.爱立信MSC池组方案介绍（MSC in Pool） [J], 蔡林君
3.中兴MSC POOL端局负荷均衡性问题的分析处理 [J], 金辉;赵书辉
4.移动网MSC POOL容灾解决策略 [J], 沈莼吉
5.移动网MSC Pool改造过程中MTRF无法启用问题分析 [J], 李丽坤
因版权原因，仅展示原文概要，查看原文内容请购买。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
MSOFTX3000&UMG8900 MSCPOOL 应急指导书1概述1.1目的MSOFTX3000&UMG8900产品在MSCPOOL组网时，可能会因为POOL中的某个网元单点故障或承载网故障导致整个POOL范围内业务受到影响，这种情况发生时造成的后果将比单MSC组网时更为严重。
本文专门针对MSC POOL组网情况制定应急处理措施。
1.2使用对象一线用服人员；二线用服人员；MSOFTX3000&UMG产品开发、维护人员。
1.3MSCPOOL组网时故障处理的基本思想针对以上POOL组网的特点，在对POOL网络进行故障处理时，需要：1）树立全局观，从网络层面观察问题现象，尽量从网管上进行话统和告警信息收集和分析；若网管上的信息不全，则需要尽快使用信息收集工具并行收集POOL内所有MSC Server的信息；2）通过对POOL内所有MSC Server和MGW网元上的告警和话统进行综合分析，来界定故障网元（也包括故障的承载网路径）并进行故障隔离；3）了解POOL组网情况下网元间的信令消息广播和重传机制，必要时切断广播路径；4）对IP承载网的Qos质量检查手段、承载网平面倒换方法充分掌握；5）对SIGTRAN链路在承载网质量下降或中断时的处理机制、外在表现和定位手段充分了解。
POOL组网下，事故处理总流程：关键点：1）明确POOL网络级组网方案；2）故障网元或故障承载网路径的定界；1.4POOL组网时网络维护所需提前准备的工作1.4.1准备并配置好M2000网管注：M2000的V200R008版本需要安装专门的RPS模块才能支持POOL性能统计功能；因此M2000的版本使用V200R009C00版本更合适。
1.4.2获取MSC POOL组网图和MSCPOOL规划数据方法1：从M2000上查看MSCPOOL网络拓扑在M2000上一般已经设置了MSC POOL的网络拓扑关系，从M2000上可以直观的查看POOL 中各种网元（MSC和MGW）的数量；且可以查询简单的MSC POOL的全局规划数据，如CN-ID、NRI、NullNRI、以及CN-ID与NRI的对应关系等配置信息。
（仅能收集到最简单的拓扑关系，网管上可能尚未配置）方法2：从网规网设文档中查看MSCPOOL网络拓扑（网规网设文档可能无法及时获取，网规网设文档中的信息可能不是最新）；方法3：咨询一线人员，临时获取网络拓扑（速度慢，准确度低）；方法4：手工从数据库获取MSCPOOL的网络组网情况（效率低，速度慢）；1.4.3在M2000上设置实时监控在M2000上，可以创建MSCPOOL实时监控任务来查看POOL的实时运行状态，具体方法：通过选择“维护 > Pool操作维护”菜单，打开“Pool操作维护”界面。
在导航树中选中要监控的MSC Pool，右键选择“实时监控”。
下面是在M2000上创建的MSC POOL实时监控的输出结果图例：1.4.4在M2000上查询MSC POOL话统注意：在M2000上查询MSCPOOL的话统前提是已经使用M2000在POOL内各网元上已经登记所依赖的话统任务。
在网元上所需要预先登记的话统任务如下表所示：在M2000上，可以通过“Performance-> Query Result”菜单项开启话统查询导航树，导航树种会列出POOL支持的话统任务，通过右键菜单即可开始进行话统结果查询。
查询话统时需要选择对象类别、查询对象、查询时间段。
M2000上查询话统的界面如下图所示：1.4.5在MSC Server和MGW上登记以LAI或BSC为对象的话统任务在MSC POOL组网情况下，以LAI/BSC为单位的话统可以正确反映故障网元的表现情况，因此需要在MSC Server上登记下列以LAI或BSC为对象的话统任务：1）承载话务量->MSC CSSR话务测量；2）全局组件->BSC话务分布测量3）全局组件->RNC话务分布测量4）全局组件->位置区话务分布测量5）MSC基本测量->位置管理业务测量6）MSC基本业务测量->TMSI重分配业务过程测量7）MSC基本业务测量->寻呼过程测量8）全局组件->接入侧动态流控测量9）信令与接口->H248_MGW事务测量需要在MGW上登记下列话统：1）MSC Pool CN节点统计2）MSC Pool NRI统计以上话统结果建议使用CMC【M2000】上集成的信息收集工具或版本配套的信息收集工具来收集。
2MSC POOL组网时各种事故场景2.1MGW退服问题2.1.1MSCPOOL组网时如何判断MGW退服的场景通过M2000告警进行检查M2000上出现MSC网元的“MGW退出服务”告警（告警ID：1522），或出现MGW的“MGC失去连接”告警（告警ID：1802）通过MSC Server告警进行检查ALM-1522 MGW退出服务ALM-1453 H.248 SCTP链路故障或ALM-1524 H.248 UDP链路故障，所有链路全部故障DSP MGW结果为不是“正常”状态2.1.2MGW退服的主要原因1）承载网故障2）数据配置错误3）MGW故障4）Server内部异常2.1.3MGW退服事故恢复和处理可以归类为三种MGW退服场景：1) 所有Server上同一个MGW退服在POOL组网情况下，一旦出现单MGW在所有Server上退服故障，则可能为MGW本身故障，或MGW到IP承载网接入路由器之间承载网路径上出现故障。
2）单个Server上所有MGW退服单个Server到所有MGW故障可能为Server数据配置异常，或MSC Server到IP承载网接入路由器之间承载网路径上出现故障，或者MSC Server内部异常等。
3）其他场景单个Server上单MGW退服：一般是数据配置错误或维护操作导致的MGW退服。
单个Server上多个MGW退服：可能是承载网拥塞导致；POOL内所有Server上多个或全部MGW退服：一般是IP骨干承载网出现故障。
通用处理步骤问题确认步骤1）在MSC上获取出现退服的MGW的IP地址，然后通过Ping和TraceRT跟踪观察IP承载网是否存在不通、丢包或时延过长（Ping跟踪时，包长可以设置为500左右）如果是，则记录故障的IP对，端口号，业务类型，尽快联系IP承载网解决2）观察H248链路是否正常如果H248链路故障，则按照步骤3）检查配置是否正确如果H248链路正常，则跟踪所有H248链路，观察MGW与Server交互是否正常，MGW是否上报了注册请求。
如果MGW没有上报注册请求或者请求内容错误，则可能为MGW内部问题，需要更进一步分析。
如果MGW上报了注册请求，而Server没有返回，则可能为Server内部问题，需要Server更进一步分析。
3）检查Server和MGW上数据配置是否异常，关键参数是否一致Server上：LST MGWLST H248LNKLST SCTPPARALST BCPARADSP H248VERMGW上：LST VMGWLST H248LNKLST H248PARALST SCTPINIT4）如果配置正常则分析是否IP承载网隐性故障使用《IP承载网故障应急手册》定位是否承载网问题。
恢复措施：如果数据配置错误，则修正对应的配置如果是承载网问题，则首先需要界定MGW到IP骨干承载网之间故障发生的位置，然后尽快恢复承载网。
如果承载网存在主备用双平面，应该切换信令和业务的承载网平面来恢复故障（单归属情况下倒换接口板，多归属情况下，重新调整链路主备IP）。
如果可能是Server或MGW内部问题，则可以在Server上尝试去激活、激活MGW，在MGW上去激活、激活VMGW。
所有Server上同一个MGW退服暂时找不到原因的情况下1）复位MGW的接口板2）倒换MGW近端IP承载网平面3）可以考虑复位MGW尝试恢复单个Server上所有MGW退服1）确认故障Server的业务是否已经被接管2）如果没有被接管（可能MGW到Server的M3UA路由还没中断），则尽快将该Server业务迁移到其他Server上（在所有MGW依次上将该故障Server状态设置为“卸载”）3）如果已经接管，确认业务没有影响情况下，再继续分析退服原因。
4）倒换近端承载网平面；5）可以复位BSG，倒换IFM、MGC来尝试是否故障可以恢复其他场景1）多个MGW在多个Server上出现退服，则IP骨干网拥塞或故障的可能性较大，需按照IP 承载网问题定位指导书进行处理。
2）可以尝试在一个Server和MGW上倒换平面2.2接通率下降问题2.2.1如何判断接通率下降事故发生1、用户投诉或者拨测发现有呼叫困难。
2、从M2000观察“移动局向入局话务量”话统的结果，确认某些B侧局向或者全部B侧局向接通率出现下降。
3、如果M2000无法使用，则收集POOL内任意两个MSC Server的“MSC CSSR话务测量”话统任务的话统结果，该话统是按照B侧局向位对象进行统计的，因此可以从话统结果中确认是全部B侧局向还是部分B侧局向出现了问题（CSSR指标下降）。
4、通过对比两个或更多MSC Server的CSSR话统，观察是否某个MSC的全部BSC的接通率指标下降；2.2.2接通率下降事故的常见原因单BSC/RNC局向接通率下降的常见原因有：1、错误的数据配置2、到BSC局向链路故障3、到BSC局向电路故障4、该BSC局向话务量过高6、其他设备原因MSC POOL全网接通率下降的常见原因有：1、错误的数据配置2、到STP（HLR、SCP）链路故障，或者链路对端网元故障或过载3、BICC承载面异常导致的局间话务成功率低4、增强流控原因5、License异常6、话单池拥塞7、补丁质量问题8、其他设备原因MSC POOL中单个MSC的全部BSC接通率下降的常见原因有：1、MSC间数据配置不一致；2、该MSC在Mc接口上出现链路拥塞情况；3、MSC内部MTP/SCCP协议层出现DPC状态异常；2.2.3接通率降低事故恢复和处理2.2.3.1 单BSC/RNC接通率下降问题解决步骤问题解决思路在POOL组网情况下，一旦出现单BSC/RNC接通率下降问题，首先需要确定BSC/RNC局向，然后初步界定出故障的原因、以及发生故障的MSC/MGW网元，然后针对故障原因尝试进行恢复处理；如果在短时间内故障无法恢复、并且故障呈现蔓延之势时，需要针对故障范围采取相应措施避免故障扩散：如果故障集中在某个MSC或某个MGW网元，需要及时隔离出现问题的网元，接着将故障网元的业务转移到正常MSC/MGW网元上；如果故障涉及所有MSC、以及故障局向连接的所有MGW，那么需要考虑采用按接入网局向进行流控，必要情况下需要考虑禁止该故障局向、待故障根因排除后再做恢复。