PTN L3网络典型故障分析(2014年)

8
典型原因归纳
请归纳常见PTN L3业务故障的原因，并描述这两起故障可能的原因：
光路两点中断。
节点失效，且保护失败 单点故障，且保护失败
硬件故障
单站配置数据/路由错误 端到端各节点路由配合错
以上的组合
9
目录
1
典型故障案例
1 L2转L3节点间同步协议通道故障案例 2 明细路由成环的案例 3 典型原因归纳
PTN1至PTN2、PTN1至PTN3开有伪线双归的以太网业务，业务通过L2转L3桥接 后，进入3层网络，最终落地点是MME/SGW PTN2和PTN3zhi之间设置DNI PW，同时还配置有ICB（同步协议通道）承载ARP 热备和MC-LAG协议报文。 在L2转L3桥节点，将L2VE（该E-Line业务VLL的V-UNI）和L3VE（静态L3VPN业务 的V-UNI）进行桥接，并分别将VE绑定到业务/隧道。
由于作者水平所限，课件可能存在一些不完善之处，还请各位同仁们指正。
2
目录
1
典型故障案例
1 L2转L3节点间同步协议通道故障案例 2 明细路由成环的案例 3 典型原因归纳
2
1 基本思路
如何处理PTN L3网络故障
2 网内关键检查点
3 重要手段 4 总结与提高
3
L2转L3节点间同步协议通道故障案例
LTE业务组网如图，其中接 入环网元（PTN1）为Optix PTN950设备，核心环的网 元（PTN2、PTN3、PTN4及 PTN5）均为OptiX PTN 3900 设备。PTN2和PTN3为L2/L3 网元（其中，正常情况下， PTN2为主用桥接点）， PTN4和PTN5为L3网元。
3、从收发包分析：PTN1没有收到PTN2 的包。说明LTE业务下行在该区域发生由检查： 正常情况下，业务路径 应该是PTN1—PTN2—PTN4—MME/SGW ， 各节点优先级，应该是沿此路径方向优先 级高，备用保护方向优先级低。当前PTN1 的优先级有变化，上行路径为：PTN1-PTN3--PTN5--PTN4--MME/SGW，即PTN3承 担了上行业务流量。这与PW发生倒换的事 件吻合。
2
1 基本思路
如何处理PTN L3网络故障
2 网内关键检查点
3 重要手段 4 总结与提高
10
基本思路
是否PTN之外的故障引起本网络故障，可查看相关网络告警等。
1
6 排查PTN数据设置层面故障
2 根据已有信息， 确定影响范围和
PTN L3网络
断！
割接前路由分析：红色明细路由掩码比绿色的网段路由长，由于路由优选第一原则为最长 掩码匹配。所以业务通过红色路由来进行业务转发。对于掩码相同的红色路由，再进行优 先级比较，因为上行EPC优先级较高，所有业务正常向省干转发。
7
明细路由成环的案例
续
由于路由调整后才出现故障，所以分析路由变化后， 发生匹配不当是故障原因。路由匹配顺序为：
➢1. 查找与目的IP和掩码完全匹配 的条目（长掩码优先） ➢2. 如果匹配的有多个路由，需比 较优先级，优选优先级高的； ➢3.查找与目的网络号匹配的条目 ➢4. . 如果匹配的有多个路由，需 比较优先级，优选优先级高的； ➢5. 查找默认路由
割接过程路由分析：据了解，割接时先清除了PTN-1、 PTN-2对外部UNI侧冗余路由(图中红点处），此时， 由于PTN-1、PTN-2之间，尚存在明细路由，此时两 台设备都优选了互指的网络侧保护路由（明细路 由），在两个节点间形成路由环路 ，使基站上行EPC 的业务无法正常转发。
2、下行路由检查：正常情况下，业务路径 应该是MME/SGW —PTN4—PTN2—PTN1， 各节点路由优先级无变化，但当前PTN1已 发生PW倒换，选收PTN3方向，即当前PTN2 应该以去PTN3方向为高优先级才对。
原因分析：当ICB通道故障，MC-LAG协议报文不通，PTN3备节点的MC-LAG协议，导致 备升主，且会通过PW备通道通告PTN1节点，触发PTN1节点PW APS倒换，上行流量路 径变为PTN1--PTN3--PTN5--PTN4--MME/SGW；下行流量从PTN4到PTN2后，由于MC-LAG 双主，PTN2节点不会把下行流量切到DNI PW，而是直接发往PTN1节点，但PTN1节点 已经PW APS倒换，只会从与PTN3对接端口接收流量，而与PTN2对接端口不接收流量， 故而下行流量中断，出现LTE站点全阻的情况。
3. 发现L2VPN业务状态正常，PW 能PING通，PW APS状态已经倒换。
5
L2转L3节点间同步协议通道故障案例 续2
告警及性能初步分析
1、从告警现象看：承载ICB的隧道告警， 应该和故障有关联；
2、从告警影响看：该隧道down掉，影 响的是ICB通道，即会影响承载ARP热备 和MC-LAG协议的报文传递。
1
前言
PTN网络，在其核心采用了MPLS-TP技术实现数据包的路由与交换。同时， 采用了传统传输SDH的保护倒换等理念。正因为兼有2层交换与3层交换特色， 在带来灵活性、高适应性的同时，不可避免增加了其故障处理的难度。
本课件，力图通过分析典型的PTN故障案例，协助维护人员对故障处理思路、 排查方式进行梳理，达到举一反三，提升经验的目的。
6
明细路由成环的案例
某承载LTE的PTN网络中，由于建网 初期，业务量少，EPC侧提供的地址为 包含少量IP地址的明细路由，后随着 EPC的扩容、需要扩容业务IP地址路由， 增加了相应的网段路由。已有的网段路 由包含了原有的明细路由，明细路由为 冗余路由，需要进行清除。该操作理论 上不影响业务。
割接时，发 现LTE基站 业务出现中
某日，出现 LTE基站业 务中断！
4
L2转L3节点间同步协议通道故障案例 续1
1. 告警现象：PTN2和PTN3之间，有 隧道Tunnel down告警，进一步复核， 发现该隧道是承载ICB通道的隧道。
2. PTN网络中，其余部分，如承载 DNI PW的通道等无物理中断告警。
4. 沿着正常情况下，业务路径检查， 发现PTN2节点连接PTN1节点的端 口统计有发送流量，但查看PTN1节 点连接PTN2节点的端口统计无接收。