Adres ACI-fouten F1527, F1528, F1529 - fltEqptStorageFull

Inleiding

In dit document worden de foutcodes F1527, F1528 en F1529 van de Application Centric Infrastructure (ACI) en de stappen voor het herstel beschreven.

Achtergrondinformatie

Deze drie fouten treden op wanneer het gebruik van de opslagcapaciteit van een controller de drempel overschrijdt.
F1527 is een waarschuwingsfout die optreedt wanneer het gebruik groter is dan 75%.

F1528 is een grote fout die optreedt wanneer het gebruik tussen 85% en 90% ligt.

F1529 is een kritieke fout die optreedt wanneer het gebruik groter is dan 90%.

code : F1529
cause : equipment-full
descr : Storage unit /techsupport on node 1 with hostname rtp-aci08-apic1 mounted at /techsupport is 100% full
dn : topology/pod-1/node-1/sys/ch/p-[/techsupport]-f-[/dev/mapper/vg_ifc0-techsupport]/fault-F1529
rule : eqpt-storage-full-critical
severity : critical

Snel starten om fout te adresseren

1. Identificeer de directory die op capaciteit is.
2. Controleer of de capaciteit is bereikt.
3. Reinig bestanden in de map.

Tip: Er is ook een geautomatiseerde tool die u kan helpen bij het oplossen van overmatige problemen met schijfverbruik. Dit gereedschap identificeert het in de fout genoemde steunpunt en biedt u een lijst met bestanden die kunnen worden verwijderd om schijfruimte vrij te maken. U hebt toegang tot het gereedschap op: https://github.com/datacenter/aci-tac-scripts/tree/main/aci-exceeded-storage-allocation

Gedetailleerde stappen om fouten aan te pakken

De map identificeren

In de foutbeschrijving wordt aangegeven in welke directory de fout is gesignaleerd.

In de twee voorbeelden hier, kunt u zien dat de F1527 fout is verhoogd tegen de /firmware directory en de F1529 fout is gekoppeld aan /techsupport.

In de beschrijving kunt u ook zien dat de fouten op knooppunt 1 worden weergegeven.

code : F1527
descr : Storage unit /firmware on Node 1 mounted at /firmware is 76% full
dn : topology/pod-1/node-1/sys/ch/p-[/firmware]-f-[/dev/mapper/vg_ifc0-firmware]/fault-F1527

code : F1529
descr : Storage unit /techsupport on node 1 with hostname rtp-aci08-apic1 mounted at /techsupport is 100% full
dn : topology/pod-1/node-1/sys/ch/p-[/techsupport]-f-[/dev/mapper/vg_ifc0-techsupport]/fault-F1529

Capaciteit controleren

Zodra u weet welke directory de fout wordt opgewekt, kunt u de CLI gebruiken om te controleren of u zoveel schijfruimte gebruikt.

Met behulp van de opdrachtdf -h,  kunt u de beschikbare schijfruimte voor elke montage zien.
In de tabel hier ziet u dat de /firmware 76% van de beschikbare ruimte gebruikt en 100% gebruikt/data/techsupport.

rtp-aci08-apic1# df -h
Filesystem                       Size  Used Avail Use% Mounted on
/dev/vg_ifc0/boot                 40G   13G   25G  35% /bin
/dev/mapper/vg_ifc0_ssd-data     176G  4.2G  162G   3% /var/log/dme
devtmpfs                          32G     0   32G   0% /dev
tmpfs                            4.0G  182M  3.9G   5% /dev/shm
/dev/mapper/vg_ifc0-firmware      40G   28G  9.3G  76% /firmware
/dev/mapper/vg_ifc0-scratch       40G   49M   38G   1% /home
tmpfs                             32G     0   32G   0% /sys/fs/cgroup
/dev/mapper/vg_ifc0-techsupport   40G   38G     0 100% /data/techsupport
tmpfs                             16G  592K   16G   1% /tmp
/dev/sdc1                         55M  1.2M   49M   3% /tmp/bootflash
tmpfs                            2.0G  721M  1.3G  36% /var/log/dme/log
/dev/mapper/vg_ifc0-logs          40G  5.0G   33G  14% /var/log/dme/oldlog
/dev/mapper/vg_ifc0-data2        156G   11G  137G   8% /data2
/dev/mapper/vg_ifc0-dmecores      50G   53M   47G   1% /var/log/dme/core
tmpfs                             32G  9.0G   23G  29% /var/run/utmp

Bestanden opschonen

Nadat u hebt gecontroleerd dat de fout aanwezig is, kunt u bestanden in de map opschonen.
Om dit te doen, navigeer je naar die directory; dan kunt u de bestanden op grootte (ls -lahS) weergeven en grote bestanden (rm ) verwijderen die niet meer nodig zijn.

U kunt dan opnieuw verifiëren met de opdrachtdf -hdat de ruimte is opgeruimd.

rtp-aci08-apic1# cd /data/techsupport
rtp-aci08-apic1# ls -lahS
total 38G
-rw-r--r--  1 admin   admin    10G Aug 10 18:12 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T07-49UTC_logs_3of3.tgz
-rw-r--r--  1 admin   admin   9.4G Aug 10 18:13 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T07-79UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   3.9G Jul 24 02:05 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T01-49UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   3.7G Jul 24 01:55 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T01-49UTC_1of3.tgz
-r--r-----  1 ifc     admin   2.5G May 15 19:33 dbgexp_tsod-upgrde427sto524d_rtp-aci08-apic1_sysid-1_2023-05-15T19-24UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   2.1G May  4 19:17 dbgexp_tsod-failed_upgrade_repro_rtp-aci08-apic1_sysid-1_2023-05-04T19-08UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   1.1G Aug 10 18:04 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-08-10T17-59UTC_logs_3of3.tgz
-rw-r--r--  1 admin   admin   1.1G Aug 10 18:11 1g.img
-r--r-----  1 ifc     admin   952M May  4 19:17 dbgexp_tsod-failed_upgrade_repro_pod8-spine1_sysid-201_2023-05-04T19-08UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   946M May  3 19:44 dbgexp_tsod-failed_upgrade_repro_pod8-spine1_sysid-201_2023-05-03T19-35UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   894M May 15 19:27 dbgexp_tsod-upgrde427sto524d_rtp-aci08-apic1_sysid-1_2023-05-15T19-24UTC_1of3.tgz
-r--r-----  1 ifc     admin   892M May  4 19:12 dbgexp_tsod-failed_upgrade_repro_rtp-aci08-apic1_sysid-1_2023-05-04T19-08UTC_1of3.tgz
-r--r-----  1 ifc     admin   253M Mar 31 20:33 dbgexp_tsod-12345_12345_sysid-105_2023-03-31T20-25UTC_logs_3of3.tgz
-r--r-----  1 ifc     admin   205M Jul 18 14:40 dbgexp_coreexp-default_pod8-spine3_sysid-203_2023-07-18T14-21UTC_1689690102_0x1b01_kernel_log.0.tar.gz
-r--r-----  1 ifc     admin   141M Aug 10 18:02 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-08-10T17-59UTC_db_2of3.tgz
-r--r-----  1 ifc     admin   134M Jul 24 02:00 dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T01-49UTC_db_2of3.tgz
-r--r-----  1 ifc     admin   130M May 15 19:29 dbgexp_tsod-upgrde427sto524d_rtp-aci08-apic1_sysid-1_2023-05-15T19-24UTC_db_2of3.tgz

    
    
      rtp-aci08-apic1# rm dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T07-49UTC_logs_3of3.tgz rtp-aci08-apic1# rm dbgexp_tsod-case-12345_rtp-aci08-apic1_sysid-1_2023-07-24T07-79UTC_logs_3of3.tgz rtp-aci08-apic1# df -h | grep techsupport /dev/mapper/vg_ifc0-techsupport 40G 18G 20G 49% /data/techsupport 
    

Defectvalidatie

CSCwj42027 - DME-logmap voor 75% gebruik in APIC

Niet-vaste versies kunnen bestanden tonen in 'var/log/dme/log' die niet draaien bij 20M zoals verwacht.

Er kan contact met TAC worden opgenomen om een tijdelijke tijdelijke tijdelijke tijdelijke oplossing te implementeren totdat de ACI Fabric is opgewaardeerd naar een vaste versie.

Verhoogde fout op /

Als de directory die vol is de / directory is, kunt u de betreffende bestanden niet opschonen zonder root te zijn.

code : F1528
descr : Storage unit / on Node 1 with hostname rtp-aci08-apic1 mounted at / is 89% full
dn : topology/pod-1/node-1/sys/ch/p-[/]-f-[/dev/vg_ifc0/boot]/fault-F1528

Wanneer u de opdracht hier gebruiktdf -h, ziet u niets gekoppeld aan /.
Je gebruikt die /bin die 100% vol is. Bij de bestanden daar zie je echter alleen dat 606M wordt gebruikt en niet 40G.

rtp-aci08-apic1# df -h                                             
Filesystem                       Size  Used Avail Use% Mounted on
/dev/vg_ifc0/boot                 40G   40G     0 100% /bin
/dev/mapper/vg_ifc0_ssd-data     176G  4.2G  162G   3% /var/log/dme
devtmpfs                          32G     0   32G   0% /dev
tmpfs                            4.0G  182M  3.9G   5% /dev/shm
/dev/mapper/vg_ifc0-firmware      40G   28G  9.3G  76% /firmware
/dev/mapper/vg_ifc0-scratch       40G   49M   38G   1% /home
tmpfs                             32G     0   32G   0% /sys/fs/cgroup
/dev/mapper/vg_ifc0-techsupport   40G   18G   20G  49% /data/techsupport
tmpfs                             16G  592K   16G   1% /tmp
/dev/sdc1                         55M  1.2M   49M   3% /tmp/bootflash
tmpfs                            2.0G  726M  1.3G  36% /var/log/dme/log
/dev/mapper/vg_ifc0-logs          40G  5.1G   33G  14% /var/log/dme/oldlog
/dev/mapper/vg_ifc0-data2        156G   11G  137G   8% /data2
/dev/mapper/vg_ifc0-dmecores      50G   53M   47G   1% /var/log/dme/core
tmpfs                             32G  7.1G   25G  23% /var/run/utmp
rtp-aci08-apic1# cd /bin 
rtp-aci08-apic1# ls -lahS | head
total 606M
-rwxr-xr-x  1 root root  103M Jul 26 20:44 nomad
-rwxr-xr-x  1 root root   60M Mar  1  2021 podman
-rwxr-xr-x  1 root root   51M Sep  9  2020 containerd
-rwxr-xr-x  1 root root   47M Aug  4  2021 consul
-rwxr-xr-x  1 root root   32M Apr 27  2021 atomix
-rwxr-xr-x  1 root root   30M Apr 27  2021 atomix-downgrade-grub
-rwxr-xr-x  1 root root   26M Sep  9  2020 ctr
-rwxr-xr-x  1 root root   25M Feb 13  2019 etcd
-rwxr-xr-x  1 root root   21M Feb 13  2019 etcdctl

Om te zien welke bestanden de ruimte innemen op /, moet u de APIC CLI met de root login openen.
Om dit te doen, moet u contact opnemen met Cisco TAC voor assistentie.