2019-05-12 记录一次IP TRANSIT主互联网出口割接

背景：

现有两条互联网出口链路，一主一备。现设备更新，要将主用40G电路割接到新的设备上。新旧设备不在同一机房，IP TRANSIT的供应商Cogent， 提交需求，由Cogent提供cross connect将电路同步割接到新的ODF。

示意图如下：

要点是，本次是冷割接，即存在中断时间，并非热割接（先建立新电路再拆除旧电路），双方配合时间很重要。

主要写一下思路和步骤，配置略。

1、首先与客服通报割接计划，预警有网络中断风险，时间窗等。

2、数据预配置。

2.1 将主电路流量调整到备用电路，主要通过调整BGP preference值来实现（华为路由器）

2.2 通过Cacti查看两条主备电路的流量是否正确倒换，测试OK后倒回。

2.3 新设备上BGP配置。 由于旧设备配置了大量路由聚合和静态导入，新设备的配置要重写，主要从iBGP引入的路由进行过滤，iBGP从IGP导入，同时配置相应的过滤规则和路由策略，保证接收和宣告的网络都正确。

2.4 新设备先不配置点对点互联接口地址，bgp peer先ignore，割接时再启用。

3、现场割接

3.1 准备好光模块（确定型号和波长正确无误），光纤清洁工具，路由器配置线缆等。提前进场准备。

3.2 清洁光纤，安装光模块，连接尾纤从我方ODF到新路由器，此时已与Cogent工程师确认cross connect完成，光纤已连接到我方ODF。 检查BGP配置，记录原设备BGP邻居接收和发送路由条目等。

3.3 将流量切换到备用电路，关闭老设备的BGP邻居。

3.4 通知Cogent工程师进行光纤插拔操作，时间窗20分钟。

3.5 观察端口状态，由于是4对光纤trunk，观察到端口陆续up。

3.6 同时观察到BGP邻居正常建立，点对点连接正常，lacp正常，发送和接收路由数量和割接前一致。

3.7 4个端口都正常up，切换流量到主电路，观察到流量恢复正常。

3.8 通知Cogent工程师割接顺利，通知客服割接准时完成，未对客户造成影响。

3.9 关好机柜，检查标签，光纤走线等，清理杂物，离场。

4、输出割接报告，完工。

一、割接目的和内容

目的：提高设备调度能力，使××公司网络运行更加稳定，安全。

内容：以OptiX2500+设备更换原有的SBS2500设备，将××公司华为光传输A站MSC1b,B站及B站扩展，C站原有SBS2500设备的光路及电路割接至新建OptiX2500+设备上来。

由于割接设备为××公司目前在用带业务的设备，本次割接工作主要由××公司维护人员为主进行操作，华为工程师提供必要的技术支援。

二、割接时间

×年8月（待定）晚21：00——次日0：00 割接准备工作

次日0：00——5：00 正式割接

割接顺利，业务中断时间为一个半小时后能够恢复(2M割接时间比较长)

三、人员安排（通讯手机尽量为公务电话，移动手机）

割接领导小组：

华为割接小组：

××公司割接小组：

安装工程师：

局点分工：

传输组：

B站：

A站：

C站：

交换组：

××公司人员待定

四、公务电话（新设备OPTIX 2500+）

C站公务电话：130，B站公务电话：129，

A站公务电话：128

五、组网图如下

原组网图、目标组网图见附件

六、割接步骤

（一） 割接准备工作

1、 割接小组所有成员（××维护人员，华为公司）到工程现场进行实地考察，确定设备的方位以及尾纤的布放位置，并且对于责任人要做记录（考察完毕后组织一次讨论会，对于细节方面进行进一步讨论）

2、 测试每根尾纤的通断；并对于需要加光衰的尾纤均预先配在尾纤上；对每根尾纤做好标签；将需要割接的尾纤新旧全部一组一组扎在一起，到割接时重要将尾纤换下即可

3、 有些尾纤可能由于历史原因暂时没有连上，需要××工程师确认并注明原因。

4、 测试每个2M通道正常。对每根2M线做好标签，将需要各界的2M线新旧一组一组扎在一起，到割接时换下即可（此步骤需要××公司交换侧工程师操作，2M割接方案也需要交换侧工程师制定）

方案由传输工程人员确认

5、 对于旧设备侧的尾纤由于标签不是很清晰，需要××维护工程师到现场确认尾纤的准确性。新设备2500+光纤对应关系参看附件“光纤连接关系表”

6、 割接时每个局点的负责人带上擦纤纸（或酒精，棉签），割接时将尾纤头拭檫干净后接入ODF架或光板。

7、 将新设备的网线拉至网管计算机处。

8、 在调测后下准确的配置命令行文件，并对所有业务的通断进行测试

9、 割接的前两天在媒体上向公众下发割接当晚通讯故障通知。

（二）割接过程

1、割接前数据备份：（A）网元数据库备份检查；（B）SBS2500和OPTIX2500+准确配置命令行，（C）用NES网管备份新旧两组设备的数据；

2、21：00所有工作人员到C站集合，网管进行全网数据采集分析，用命令行采集当前网络的告警和性能数据（用于割接完后进行对比，以确保业务完全恢复），以及割接的准备工作。（擦纤工具，光功率计必要时使用，配置命令行由华为人员带）

3、22：00分二辆车将割接人员送至割接站点（B站，A站）

4、23：00三个站点的割接人员在现场再次熟悉环境，将需要插入的尾纤用擦纤纸拭擦一遍，确认各自需要做的操作，并且在准备和勘测完毕后电话通知C站传输网管中心，等待C站传输网管中心指令。

5、 0：00C站网管下发指令各站点开始割接（光纤插入的短时间内可能会有ID重复，但是只要不下发配置数据，不会有任何影响）

6、 0：00—1：00，各站点同时操作将旧尾纤拔下，并将新尾纤插入，每插入一个尾纤，在光纤连接表上做好标记，以确保尾纤按照要求全部插入完毕。（尾纤布放的位置和在尾纤连接关系表上可以找到，需要割接光板，均在现场用标签标出，需要割接的尾纤均在现场和旧尾纤用胶带缠在一起，需要添加光衰的方位均已加上，割接人员到现场后只要依次换下尾纤就可以了，注意在插尾纤时一定要仔细，一插到位，在测试过程中经常出现尾纤没有插到位，或是接入光衰时接触不良导致收发光异常。如果出现收发光异常的现象（华为工程师用命令行现场查询）请及时调整光纤，拭擦光纤头或重新插拔几次以达插入良好状态。）

7、 1：00—3：00，B站和C站两个站点交换、传输工程师对2M割接进行操作

8、 通过面板上的告警指示以及命令行查询告警，性能等方式确认各板收发光是否正常，对与不正常的需要重新插拔一次光纤。（紧急故障处理时长约30分钟）

9、 所有尾纤插入完毕，检查无误后电话通知C站传输网管中心。并在现场待命。

10、 将传输网管的网线换为新设备的网线。

11、 切换到新数据库（用文件覆盖的形式）登陆网元，启动复用段保护协议，确认网络告警一切是否正常，不正常立即通知现场工程师有针对性的处理。 （也可以直接在旧数据库基础上在网管的#27，#28，#29，#30四个网元重新上载数据，创建复用段保护子网，查询复用段状态）

12、 告警核对完毕后，NES网管上没有任何异常告警，请××公司交换侧维护人员确认业务是否全部恢复

13、 用户确认业务完全恢复后，进行断纤倒换测试。（在其中一个站点将光纤和光口断开，观察业务是否会中断。）

14、 通知网管对此四个网元做数据上载。

（三）网管数据割接

准备文件：光纤连接关系表

第一步、封网后到割接前：

上载旧网网元，并备份网管数据

1、 用NES网管搜索上所有电路，备份全网配置数据（割接的前一天完成）

2、 用便携机NES网管上载全网所有数据，并对数据库进行备份（割接的前一天）

3、配置命令行备份。

在割接过程中只是尾纤的物理连接不涉及业务配置数据的修改，采用三组独立的备份方式可以保证在任何数据丢失的意外情况下实现对全网的数据安全恢复.并及时恢复全网监控。

在网管侧用新的OptiX2500+网元更换旧SBS2500网元

1、删除四个2500网元，先删除非网关网元，再删除网关网元

2、给OptiX2500+网元下发准确配置命令行，备份库文件。

3、通过固定ID，在NES上创建新的OptiX2500+设备，建立网元，上载配置数据

4、查询全网告警，与原来的查询数据比较，分析原因。同时通过网管监控全网情况

5、割接结束，备份数据库数据。

至此为止，所有网元都已在NES上上载完毕，而且目前NES的数据就是割接后的实际配置数据。

七、割接不成功的处理过程

对于本次割接工作，所有准备工作包括配置数据的下发都是在割接前完成的，而且Opix2500+由SBS2500设备业务复制过去的，正式割接时根本不需要动网络的业务数据的数据，仅仅启动OptiX 2500+复用段保护协议以及在物理上接连光纤即可，所以只要前期准备工作完全，成功的几率非常高。

割接万一不成功，如果有时间则可以进一步分析故障原因，及时解决，如果时间来不及，需要倒回原来的网络时，也只需要将刚刚换下来的尾纤插回到原来的位置。处理过程如下：

a) 在网管中心下发指令，让三个站点同时操作将光纤插回到原来的位置。注意尾纤头要用酒精清洗干净(最好使用光纤擦纤纸)，2M线也可以及时插回原位。

b) 观察网络运行是否正常，不正常指挥现场工程师紧急处理。

c) 确认业务完全恢复后，分析割接失败的原因。

d) 割接失败需要的倒回时，C站传输网管中心NES网管的数据可以用以前备份的数据库文件替换，就可以恢复网管以前的数据。

---