[事件說明] 105.6.4(六) 光纖斷裂暨花蓮/宜蘭區網流量異常

主旨:因應今(6/4)日臺鐵火車出軌(花蓮富里-東竹),導致花蓮區網中心(東華大學)、宜蘭區網中心(宜蘭大學)到臺南主節點的光纖斷裂,並導致多次 ISIS 路由異常等事件,說明如下:

1. 花東火車出軌造成光纖斷裂於 105/6/4 12:33 發生,臺南國網中心接獲告警依 SOP 通報亞太電信查修。

2. 因應 100G 雙備援中心設計,兩區網中心連接到臺南主節點的主線路自動切換至臺北主節點備援線路並成功運作。

3. 宜蘭區網流量異常(3次,(13:10-13:30)、(14:10-14:40)、(15:05-15:10)):

(1) 於 13:10 觀察到宜蘭區網流量異常,緊急查修發現是 ISIS 路由單向路由問題(臺北ASR9K 送出路由,但宜大未送回路由)造成流量可出但回不去的情形,於13:30修復。

(2) 於 14:10 再度觀察到花蓮/宜蘭區網流量異常,緊急更改路由協定後,於15:10 恢復流量。

4. 花蓮區網流量異常(2次,(13:30-13:50)、(14:10-15:10))

(1) 於 13:30 觀察到花蓮區網流量異常,緊急查修發現是與宜大相同問題,於13:50修復。

(2) 於 14:10 再度觀察到花蓮/宜蘭區網流量異常,緊急更改路由協定後,花蓮區網於15:10恢復。

5. 本次異常原因初步判定是 IPv4 ISIS 路由異常導致,同時間之 IPv6 流量正常(IPv6 OSPF3路由正常)。

6. 本次花蓮/宜蘭區網流量異常,於光纖斷裂(12:33)後有正確切往備援主節點,但是後續(13:10-15:10)異常原因與光纖斷裂/備援似無關連,IPv6 均正常,因此初步判定是 IPv4 ISIS 路由異常,將持續追蹤觀察。

新、舊骨幹網路切換期間,100G維運小組將盡最大努力,以不斷線為最高要求,請大家有狀況,直接回報利於第一時間處理。


謝謝大家 !

杜遠志 敬上

DMC Firewall is a Joomla Security extension!