ACI:特定の spine を向くルートが全ての leaf のルーティングテーブルから削除される

JapanTAC_CSC · ‎2023-07-27

2023年7月27日 (初版)

TAC SR Collection

主な問題

ACI で、DOWN していた fabric link を UP させた際に、その fabric link に接続する spine(の TEP address)を
next hop とするルートが leaf から削除される問題があります。ルートはおよそ5分後に再度追加されます。
(削除から再追加までの間、対象 spine を向いていたトラフィックは他の spine へ迂回されます。)
以下は leaf で spine(10.0.168.95)を next hop とするルートが URIB から削除され約 5 分後に再追加された
ことを示すログ(isis_trace の抜粋)の出力例です。isis_trace は tech support 3 of 3 の /var/log/tmp_logs/isis_trace.txt
あるいは /var/log/dme/oldlog/isis_trace.txt.<数字>.gz でご確認いただけます。

[2023 xxx xx 12:23:10.140662780:118647848:T:isis_ipv4_urib_delete_route:2076] Remove 10.0.0.1/32,

nexthop Ethernet1/53.11 10.0.168.95
[2023 xxx xx 12:23:10.140680369:118647849:T:isis_ipv4_urib_delete_route:2080] URIB-Delete:

Update-buffer 10.0.0.1/32, nexthop Ethernet1/53.11 10.0.168.95

<省略> 
[2023 xxx xx 12:28:30.265878855:119036920:T:isis_ipv4_urib_add_route:1983] Add L1 10.0.0.1/32,

nexthop Ethernet1/53.11 10.0.168.95, dist 12, pref 115
[2023 xxx xx 12:28:30.265887757:119036921:T:isis_ipv4_urib_add_route:1991] URIB-Add: Update-buffer

L1 10.0.0.1/32, nexthop Ethernet1/53.11 10.0.168.95 dist 12, pref 115, tag 0

さらに、あるいは実機の以下のコマンドにて同様の情報をご確認いただけます。

leaf# show isis internal event-history rib 抜粋
2023 xxx xx 12:28:30.265884 isis isis_infra [12267]: TID 13352:isis_ipv4_urib_add_route:1991:

URIB-Add: Update-buffer L1 10.0.0.1/32, nexthop Ethernet1/53.11 10.0.168.95, dist 12, pref 115, tag 0
<省略>
2023 xxx xx 12:23:10.140674 isis isis_infra [12267]: TID 13352:isis_ipv4_urib_delete_route:2080:

URIB-Delete: Update-buffer 10.0.0.1/32, nexthop Ethernet1/53.11 10.0.168.95

原因

新しく fabric link が UP し、その fabric link が接続する spine 上で新しい LSP が作成された際に、その spine
が isis overload mode(300 sec)に入ることが原因で、それにより spine が overload mode に入ったことが
各 leaf に通知され overload mode が終了するまでの 5 分間(= 300 sec) 、fabric 内の全ての leaf から、その
spine を next hop とするルートが削除される問題です。この問題は CSCvt08181 として報告されています。

以下は spine が isis overload mode に入ったことを示すログの出力例です。

spine# show isis internal event-history lsp-gen 抜粋
2023 xxx xx 12:23:09.604418 isis isis_infra [60672]: TID 60854:isis_non_pseudo_lsp_advertise_std_topo_adj:

4736: Forcing Fabric-Overload mode for 300 sec

解決策

CSCvt08181 が修正されたバージョンへのアップグレードです。

備考
本不具合は、Bug Search Tool でも確認できます。
各製品の TAC SR Collection の一覧は、よくある質問と解決方法 (TAC SR Collection) から確認できます。