2023年7月18日 (初版)
| TAC SR Collection |
| 主な問題 |
Cisco APIC において、/data2 partition に対して fault F1527/F1528/F1529 が上がる問題です。
Fault の詳細は下記いずれかのコマンドで確認可能です。
apic1# show faults detail code <fault code>
apic1# moquery -c fault.Inst -f 'fault.Inst.code=="<fault code>"'
※ <fault code> には発生している F1527/F1528/F1529 いずれかの fault を入れる必要があります。以下は F1529 の例です。
# fault.Inst
code : F1529
ack : yes
alert : no
annotation :
cause : equipment-full
changeSet : available (Old: 1464921, New: 1062617), capUtilized (Old: 99, New: 100), used (Old: 143382448, New: 143784752)
childAction :
created : 2023-07-06T10:28:59.088+00:00
delegated : no
descr : Storage unit /data2 on node 1 with hostname apic1 mounted at /data2 is 100% full
dn : topology/pod-1/node-1/sys/ch/p-[/data2]-f-[/dev/mapper/vg_ifc0-data2]/fault-F1529
domain : infra
extMngdBy : undefined
highestSeverity : critical
lastTransition : 2023-07-06T10:31:03.283+00:00
lc : raised
modTs : never
occur : 1
origSeverity : critical
prevSeverity : critical
rn : fault-F1529
rule : eqpt-storage-full-critical
severity : critical
status :
subject : equipment-full
title :
type : operational
uid :
userdom : all
/data2 partition を確認すると、/data2/infra/zk 配下のファイルが肥大化し続け、/data2/infra/zk 配下のファイルによって /data2 partition の大部分を使ってしまう事象が発生しています。
apic1# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/mapper/vg_ifc0-data2 66G 65G 0 100% /data2 <--- 100% の使用率
apic1# du -h -d 1 /data2/infra/
12K /data2/infra/hms
8.0K /data2/infra/statsq
44G /data2/infra/zk <--- 肥大化している
388M /data2/infra/kafka
4.1M /data2/infra/elastic
7.7M /data2/infra/intersightdc
44G /data2/infra/
※F1527/F1528/F1529 はストレージ容量の使用率が75%、85%、90%を超えた場合に発生する fault であり、この問題だけが要因で発生する fault ではありません。
|
| 原因 |
ソフトウェア不具合 CSCvw77568 として報告されています。本不具合の影響により、該当機器の upgrade / downgrade ができなくなるといった他の問題が発生する恐れがあります。
|
| 解決策 |
回避策は、root 権限で該当 APIC にログインし、 /data2/infra/zk/data または /data2/infra/zk/log 配下のファイルを削除することです。
root 権限でログインするためには root パスワードが必要であり、TAC エンジニアによって発行が可能です。
発行方法については下記の URL を参照してください。
ACI: root アクセスと root パスワードの発行方法
本不具合に該当しているかの確認及びにファイル削除のために root パスワード発行が必要な場合には、JAPAN TAC へお問い合わせください。
恒久解決策は CSCvw77568 の修正 version 以降への upgrade です。
|
備考
本不具合は、Bug Search Tool でも確認できます。
各製品の TAC SR Collection の一覧は、よくある質問と解決方法 (TAC SR Collection) から確認できます。
