一次 “光功率 -16.4 dBm” 引发的驻场惊魂 —— 机房联调血泪复盘：从 “灯不亮” 到 “业务通” 的 72 分钟

一、背景：凌晨 2 点的告警电话

某金融客户新机房上线，核心交换机 Cisco Catalyst 6509 端口 Ten3/4 作为交易区主链路。
切割当晚，全网监控突然报:
Te3/4: LINK-3-UPDOWN Interface down

值班小哥远程 ping 不通，驱车 40 km 进机房——故事正式开场。

二、现场信息速记

项目	现场记录
设备	C6509-E，板卡 WS-X6716-10GE
端口	Ten3/4
模块	SFP-10G-SR，多模，850 nm
光纤	OM3，50/125 µm，MPO → LC 分支
距离	约 110 m
端口指示灯	熄灭

三、第一次 show ：光功率 -16.4 dBm

C6509# show int ten3/4 transceiver
…
Te3/4 30.5 C 0.00 V 54.0 mA 0.3 dBm -16.4 dBm

经验值：10G-SR 模块 接收灵敏度 -10.3 dBm，低于 -12 dBm 基本宣告链路不可用。

• Tx Power 0.3 dBm → 模块发光正常
• Rx Power -16.4 dBm → 链路衰耗 19 dB（正常 110 m OM3 < 3.5 dB）
  => 衰耗异常，指向 光纤脏污/弯折/极性错。

四、驻场排障 7 步法（按时间线）

① 肉眼检查（2 min）

• 两端 LC 头 有尘，肉眼可见白渍。

② 一键清洁（3 min）

• 使用 光纤清洁棒 + IPA 99% 轻擦 3 次，单向旋转 180°。
• 清洁后再次插拔。

③ 重新读表（1 min）
Te3/4 30.2 C 0.00 V 54.0 mA 0.3 dBm -10.8 dBm

• Rx 提升 5.6 dB，但仍低于阈值。

④ 极性验证（5 min）

• 用 极性笔 检查 MPO → LC 分支：
  发现 TX 通道被接到对端 TX（极性 A-B 错配）。
• 重新打线序，极性改为 A-A。

⑤ 二次读表（1 min）
Te3/4 30.1 C 0.00 V 54.0 mA 0.3 dBm -3.2 dBm

• 进入 绿色区间，链路 UP！

⑥ OTDR 复核（10 min）

• 用 OTDR 打 1310 nm 回环：
  全程衰耗 2.8 dB，符合 OM3 110 m 标准。

⑦ 业务压测（30 min）

• ping -s 8972 -c 10000 零丢包
• 交易撮合系统延迟 < 5 µs，满足 SLA。

五、复盘 & 经验沉淀

教训	措施
光纤头未清洁	机房标配 一键清洁盒，每次插拔必擦
极性错配	设计阶段使用 极性管理表，MPO 标签颜色区分
监控缺失	在 NMS 里加 Rx Power < -12 dBm 告警阈值
备件不足	每 4 端口预留 1 根 OTDR 级跳线

六、常用命令速查卡

实时查看光功率

show interface ten3/4 transceiver detail

查看阈值

show interface ten3/4 transceiver threshold

清除接口计数

clear counters ten3/4

关闭激光器（维护模式）

interface ten3/4
shutdown

七、一张图总结链路预算

10G-SR 链路预算图
┌────────────┐ 0.3 dBm ┌────────────┐
│ C6509 │───────────▶ │ 110 m OM3 │
│ SFP+ │ -3.2 dBm │ 清洁+极性 │
└────────────┘ └────────────┘

八、结语

别让 -16.4 dBm 成为压垮交易的最后一根稻草。
把本文加入「机房驻场 SOP」，下次再遇 LINK DOWN，3 分钟定位，10 分钟恢复！
关注我，后续更新。