Inleiding
Dit document beschrijft de faciliteit IPsec in de waarschuwingsstaat.
Overzicht
IPsec wordt gemaakt door de Session Controller. Het maakt en beheert beveiligde IKEv1-, IKEv2- en IPSec-gegevenstunnels in Evolved Packet Data Gateway (ePDG).
Voorwaarden
Cisco raadt u aan bekend te zijn met deze knooppunten en StarOS-faciliteiten:
Vastlegging vereist
Opmerking: om dit soort problemen aan te pakken, is het nodig om de logbestanden te verzamelen voor analyse.
1. Identificeer de faciliteiten IPsecmgr die in een waarschuwingsstaat zijn en verzamel hoopstortplaatsen voor twee goede IPsecmgr instanties, samen met twee slechte instanties tijdens piek en niet-piekuren.
Show task resources
show messenger proclet facility ipsecmgr instance <instance number> heap depth 9
show messenger proclet facility ipsecmgr instance <instance number> system heap depth 9
show messenger proclet facility ipsecmgr instance <instance number> heap
show messenger proclet facility ipsecmgr instance <instance number> system
show messenger proclet facility ipsecmgr instance <instance number> graphs heap
show session subsystem facility ipsecmgr instance <instance number> debug-info verbose
show task resources facility ipsecmgr instance <instance number>
Opmerking: verzamel de logbestanden voor twee functionele en twee defecte IPsec-instanties. Vervang telkens het instantienummer door het IPsec-instantienummer.
2. Verzamel de kernbestanden voor dezelfde IPsecmgr-instanties die in de eerdere stap zijn verzameld.
Login to hidden mode
Cli test-commands password <>
Task core facility ipsecmgr instance <instance number>
Opmerking: Verzamel het kernbestand voor hetzelfde instantienummer waarvoor de output van de stapel is verzameld.
3. Verzamel de Show Support Details (SSD) gegevens, Simple Network Management Protocol (SNMP)-traps en systeemlogs (syslogs).
4. Verzamel de output van het show task resource bevel meerdere malen door de dag.
Opmerking: Het is noodzakelijk om te bepalen of het geheugen constant toeneemt of afneemt wanneer het aantal oproepen wordt verminderd.
5. Bepaal welke services op dit moment op het knooppunt worden uitgevoerd.
Show resources
6. De gegevens over de abonneetrends verstrekken voor elke dienst die op het knooppunt loopt, voor een periode van twee maanden.
Voor de ePDG-dienst is bijvoorbeeld de ePDG-abonneetrends vereist. Voor de mme-service is de mme-abonneetrend vereist.
7. De SSD-gegevens leveren voor elk ander knooppunt in het netwerk met identieke configuraties en services.
Opmerking: het is noodzakelijk om te bepalen of het probleem bij het knooppunt of de softwareversie ligt.
8. Na de upgrade verandert de faciliteit IPsec in een waarschuwingsstatus en deelt meerdere SSD-gegevenssets (Solid State Dr) van zowel voor als na de upgrade.
Probleemoplossing uitgevoerd
1. Er moet een analyse van de IPsecmgr-heapdump worden uitgevoerd. Gebaseerd op deze analyse is vastgesteld dat deze top twee functies een grote hoeveelheid geheugen verbruiken.
Proc |
Samenvoegen |
% ▴ |
ipm_database_alloc() |
60900436 |
42.19 |
service_recovery_add_dest_handle() |
17302140 |
11.99 |
ikev2_encode_alloc_opacket() |
6319608 |
4.38 |
demuxmgr_init_smgr_pacing_row_and_cache() |
6258720 |
4.34 |
ipm_sad_ikesa_alloc() |
6053856 |
4.19 ipm_databuf_alloc() |
Opmerking: uit de output van de heap analyse blijkt dat de functie een aanzienlijke hoeveelheid geheugen gebruikt.
2. De trend van de ePDG-abonnees gedurende één maand wijst erop dat de verkeerstendens normaal is, aangezien er geen toename van het verkeer wordt waargenomen.
Datum |
Meetniveau |
Knooppunt |
Totaal aantal gebruikers |
2023-01-01 |
Dagniveau |
XXX-X—SGN-ME-03 |
308580 |
2023-01-02 |
Dagniveau |
XXX-X—SGN-ME-03 |
331166 |
2023-01-03 |
Dagniveau |
XXX-X—SGN-ME-03 |
332424 |
2023-01-04 |
Dagniveau |
XXX-X—SGN-ME-03 |
324741 |
2023-01-05 |
Dagniveau |
XXX-X—SGN-ME-03 |
329006 |
2023-01-06 |
Dagniveau |
XXX-X—SGN-ME-03 |
326667 |
2023-01-07 |
Dagniveau |
XXX-X—SGN-ME-03 |
327323 |
2023-01-08 |
Dagniveau |
XXX-X—SGN-ME-03 |
327922 |
2023-01-09 |
Dagniveau |
XXX-X—SGN-ME-03 |
331701 |
2023-01-10 |
Dagniveau |
XXX-X—SGN-ME-03 |
334258 |
2023-01-11 |
Dagniveau |
XXX-X—SGN-ME-03 |
331070 |
2023-01-12 |
Dagniveau |
XXX-X—SGN-ME-03 |
327105 |
2023-01-13 |
Dagniveau |
XXX-X—SGN-ME-03 |
310919 |
2023-01-14 |
Dagniveau |
XXX-X—SGN-ME-03 |
280490 |
2023-01-15 |
Dagniveau |
XXX-X—SGN-ME-03 |
299159 |
2023-01-16 |
Dagniveau |
XXX-X—SGN-ME-03 |
312329 |
2023-01-17 |
Dagniveau |
XXX-X—SGN-ME-03 |
318370 |
2023-01-18 |
Dagniveau |
XXX-X—SGN-ME-03 |
316067 |
2023-01-19 |
Dagniveau |
XXX-X—SGN-ME-03 |
314299 |
2023-01-20 |
Dagniveau |
XXX-X—SGN-ME-03 |
322221 |
2023-01-21 |
Dagniveau |
XXX-X—SGN-ME-03 |
317145 |
2023-01-22 |
Dagniveau |
XXX-X—SGN-ME-03 |
317951 |
2023-01-23 |
Dagniveau |
XXX-X—SGN-ME-03 |
320670 |
2023-01-24 |
Dagniveau |
XXX-X—SGN-ME-03 |
320466 |
2023-01-25 |
Dagniveau |
XXX-X—SGN-ME-03 |
304693 |
2023-01-26 |
Dagniveau |
XXX-X—SGN-ME-03 |
307049 |
2023-01-27 |
Dagniveau |
XXX-X—SGN-ME-03 |
304500 |
2023-01-28 |
Dagniveau |
XXX-X—SGN-ME-03 |
303082 |
2023-01-29 |
Dagniveau |
XXX-X—SGN-ME-03 |
309391 |
2023-01-30 |
Dagniveau |
XXX-X—SGN-ME-03 |
314559 |
2023-01-31 |
Dagniveau |
XXX-X—SGN-ME-03 |
318688 |
2023-02-01 |
Dagniveau |
XXX-X—SGN-ME-03 |
315274 |
2023-02-02 |
Dagniveau |
XXX-X—SGN-ME-03 |
320590 |
2023-02-03 |
Dagniveau |
XXX-X—SGN-ME-03 |
276683 |
2023-02-04 |
Dagniveau |
XXX-X—SGN-ME-03 |
288478 |
2023-02-05 |
Dagniveau |
XXX-X—SGN-ME-03 |
298212 |
2023-02-06 |
Dagniveau |
XXX-X—SGN-ME-03 |
300505 |
2023-02-07 |
Dagniveau |
XXX-X—SGN-ME-03 |
308763 |
2023-02-08 |
Dagniveau |
XXX-X—SGN-ME-03 |
303933 |
2023-02-09 |
Dagniveau |
XXX-X—SGN-ME-03 |
304191 |
2023-02-10 |
Dagniveau |
XXX-X—SGN-ME-03 |
296049 |
2023-02-11 |
Dagniveau |
XXX-X—SGN-ME-03 |
304243 |
2023-02-12 |
Dagniveau |
XXX-X—SGN-ME-03 |
398876 |
2023-02-13 |
Dagniveau |
XXX-X—SGN-ME-03 |
327081 |
2023-02-14 |
Dagniveau |
XXX-X—SGN-ME-03 |
318326 |
2023-02-15 |
Dagniveau |
XXX-X—SGN-ME-03 |
308936 |
2023-02-16 |
Dagniveau |
XXX-X—SGN-ME-03 |
307454 |
2023-02-17 |
Dagniveau |
XXX-X—SGN-ME-03 |
299155 |
2023-02-18 |
Dagniveau |
XXX-X—SGN-ME-03 |
310671 |
2023-02-19 |
Dagniveau |
XXX-X—SGN-ME-03 |
308271 |
2023-02-20 |
Dagniveau |
XXX-X—SGN-ME-03 |
313036 |
2023-02-21 |
Dagniveau |
XXX-X—SGN-ME-03 |
308364 |
2023-02-22 |
Dagniveau |
XXX-X—SGN-ME-03 |
297624 |
2023-02-23 |
Dagniveau |
XXX-X—SGN-ME-03 |
307631 |
2023-02-24 |
Dagniveau |
XXX-X—SGN-ME-03 |
303706 |
2023-02-25 |
Dagniveau |
XXX-X—SGN-ME-03 |
331917 |
2023-02-26 |
Dagniveau |
XXX-X—SGN-ME-03 |
304802 |
2023-02-27 |
Dagniveau |
XXX-X—SGN-ME-03 |
314204 |
2023-02-28 |
Dagniveau |
XXX-X—SGN-ME-03 |
312129 |
2023-03-01 |
Dagniveau |
XXX-X—SGN-ME-03 |
318518 |
2023-03-02 |
Dagniveau |
XXX-X—SGN-ME-03 |
400818 |
2023-03-03 |
Dagniveau |
XXX-X—SGN-ME-03 |
298952 |
2023-03-04 |
Dagniveau |
XXX-X—SGN-ME-03 |
286058 |
2023-03-05 |
Dagniveau |
XXX-X—SGN-ME-03 |
283346 |
2023-03-06 |
Dagniveau |
XXX-X—SGN-ME-03 |
280037 |
2023-03-07 |
Dagniveau |
XXX-X—SGN-ME-03 |
275515 |
2023-03-08 |
Dagniveau |
XXX-X—SGN-ME-03 |
290489 |
2023-03-09 |
Dagniveau |
XXX-X—SGN-ME-03 |
291972 |
2023-03-10 |
Dagniveau |
XXX-X-SGN-ME-03 |
289658 |
2023-03-11 |
Dagniveau |
XXX-X—SGN-ME-03 |
284311 |
2023-03-12 |
Dagniveau |
XXX-X—SGN-ME-03 |
293878 |
2023-03-13 |
Dagniveau |
XXX-X—SGN-ME-03 |
298662 |
2023-03-14 |
Dagniveau |
XXX-X—SGN-ME-03 |
299430 |
2023-03-15 |
Dagniveau |
XXX-X—SGN-ME-03 |
297959 |
2023-03-16 |
Dagniveau |
XXX-X—SGN-ME-03 |
299208 |
2023-03-17 |
Dagniveau |
XXX-X—SGN-ME-03 |
293534 |
2023-03-18 |
Dagniveau |
XXX-X—SGN-ME-03 |
292673 |
2023-03-19 |
Dagniveau |
XXX-X—SGN-ME-03 |
296111 |
2023-03-20 |
Dagniveau |
XXX-X-SGN-ME-03 |
301181 |
2023-03-21 |
Dagniveau |
XXX-X—SGN-ME-03 |
297604 |
2023-03-22 |
Dagniveau |
XXX-X—SGN-ME-03 |
309897 |
2023-03-23 |
Dagniveau |
XXX-X—SGN-ME-03 |
304351 |
2023-03-24 |
Dagniveau |
XXX-X—SGN-ME-03 |
305605 |
2023-03-25 |
Dagniveau |
XXX-X—SGN-ME-03 |
295694 |
2023-03-26 |
Dagniveau |
XXX-X—SGN-ME-03 |
300188 |
2023-03-27 |
Dagniveau |
XXX-X—SGN-ME-03 |
302467 |
2023-03-28 |
Dagniveau |
XXX-X—SGN-ME-03 |
303965 |
2023-03-29 |
Dagniveau |
XXX-X—SGN-ME-03 |
270432 |
2023-03-30 |
Dagniveau |
XXX-X—SGN-ME-03 |
289729 |
2023-03-31 |
Dagniveau |
XXX-X—SGN-ME-03 |
249336 |
2023-04-01 |
Dagniveau |
XXX-X—SGN-ME-03 |
269109 |
2023-04-02 |
Dagniveau |
XXX-X—SGN-ME-03 |
283437 |
2023-04-03 |
Dagniveau |
XXX-X—SGN-ME-03 |
298453 |
2023-04-04 |
Dagniveau |
XXX-X—SGN-ME-03 |
301649 |
2023-04-05 |
Dagniveau |
XXX-X—SGN-ME-03 |
298797 |
2023-04-06 |
Dagniveau |
XXX-X—SGN-ME-03 |
306610 |
2023-04-07 |
Dagniveau |
XXX-X—SGN-ME-03 |
298449 |
2023-04-08 |
Dagniveau |
XXX-X—SGN-ME-03 |
294205 |
2023-04-09 |
Dagniveau |
XXX-X—SGN-ME-03 |
306048 |
2023-04-10 |
Dagniveau |
XXX-X—SGN-ME-03 |
316718 |
2023-04-11 |
Dagniveau |
XXX-X—SGN-ME-03 |
315327 |
2023-04-12 |
Dagniveau |
XXX-X-SGN-ME-03 |
313059 |
|
|
|
|
3. De show task resources gegevens van meerdere Solid State Drives (SSD’s) zijn verzameld. Gebaseerd op de SSD-gegevens, zien we dat deze IPsec-instanties in een waarschuwingsstatus verkeren.
8/1 ipsecmgr 296 2.64% 50% 193.3M 191.0M 978 1500 1331 4700 - warn
8/2 ipsecmgr 363 2.51% 50% 194.1M 191.0M 854 1500 1304 4700 - warn
9/0 ipsecmgr 231 2.85% 50% 129.0M 191.0M 271 1500 1323 4700 - good
9/1 ipsecmgr 303 2.61% 50% 161.5M 191.0M 1141 1500 1322 4700 - good
9/2 ipsecmgr 381 2.46% 50% 192.9M 191.0M 839 1500 1312 4700 - warn
Note: This output is collected on 12th April at 8:40 PM
This output collected on the 13th April 8 PM.
8/1 ipsecmgr 296 2.61% 50% 193.3M 191.0M 985 1500 1221 4700 - warn
8/2 ipsecmgr 363 2.38% 50% 193.7M 191.0M 828 1500 1222 4700 - warn
9/0 ipsecmgr 231 2.40% 50% 129.0M 191.0M 1116 1500 1237 4700 - good
9/1 ipsecmgr 303 2.43% 50% 161.5M 191.0M 1120 1500 1220 4700 - good
9/2 ipsecmgr 381 2.23% 50% 192.9M 191.0M 829 1500 1228 4700 - warn
Er wordt geen afname in het geheugen waargenomen, zelfs niet wanneer het aantal oproepen in elk van de gevallen wordt verminderd. Bijvoorbeeld, als je kijkt naar de IPsecmgr instantie 296, die in een waarschuwingsstaat is, daalde het aantal oproepen op 13 april, maar het geheugen nam niet af
show task resources 4. De gedurende de dag verzamelde gegevens bevestigen ook dat het geheugen niet afneemt, zelfs niet wanneer het aantal oproepen wordt beperkt.
5. Uit de SSD-gegevens van vóór de upgrade blijkt dat het geheugen niet toeneemt. Dit suggereert dat er een probleem kan zijn met de nieuwe software.
Gebaseerd op de analyse, kunt u een geheugenlek op het niveau van de IPsecmgr faciliteit verdenken. Een serviceaanvraag (SR) indienen om verder onderzoek te doen en de kwestie aan te pakken.