排除StarOs CPU/記憶體/檔案使用監控故障

下載選項

  • PDF     (686.1 KB)
    在多種裝置上使用 Adobe Reader 檢視
  • ePub     (392.5 KB)
    在 iPhone、iPad、Android、Sony Reader 或 Windows Phone 上的各種應用程式中檢視
  • Mobi (Kindle)     (190.5 KB)
    在 Kindle 裝置或多部裝置的 Kindle 應用程式上檢視
已更新: 2017 年 10 月 19 日
文件 ID:212317

無偏見用語

本產品的文件集力求使用無偏見用語。針對本文件集的目的，無偏見係定義為未根據年齡、身心障礙、性別、種族身分、民族身分、性別傾向、社會經濟地位及交織性表示歧視的用語。由於本產品軟體使用者介面中硬式編碼的語言、根據 RFP 文件使用的語言，或引用第三方產品的語言，因此本文件中可能會出現例外狀況。深入瞭解思科如何使用包容性用語。

關於此翻譯

思科已使用電腦和人工技術翻譯本文件，讓全世界的使用者能夠以自己的語言理解支援內容。請注意，即使是最佳機器翻譯，也不如專業譯者翻譯的內容準確。Cisco Systems, Inc. 對這些翻譯的準確度概不負責，並建議一律查看原始英文文件（提供連結）。

簡介

本文介紹StarOS系統上CPU/記憶體/檔案使用的基本資訊，以及在出現問題時如何進行故障排除。

必要條件

需求

思科建議您瞭解以下主題：

  • StarOs

採用元件

本文件所述內容不限於特定軟體和硬體版本。

本文中的資訊是根據特定實驗室環境內的裝置所建立。文中使用到的所有裝置皆從已清除（預設）的組態來啟動。如果您的網路運作中，請確保您瞭解任何指令可能造成的影響。

背景資訊

資源管理子系統為系統中的每個任務分配一組資源限制。它監控每項任務的資源使用情況，以確保資源使用量保持在限制內。如果任務已超出其限制，它會通過Syslog或簡單網路管理協定(SNMP)陷阱通知操作員。本檔案將說明其工作原理以及您必須收集哪些記錄以進行進一步的疑難排解。 

您可以在show task resources命令列介面(CLI)的輸出中檢查基本資訊。

使用者無法更改分配的資源限制。

分配的資源限制因StarOS版本而異。

212317-troubleshoot-staros-cpu-memory-files-usa-00.png

以下是系統存在問題時發生的SNMP範例：

Mon Aug 26 11:32:19 2013 Internal trap notification 1221 (MemoryOver) facility sessmgr instance 16 card 1 cpu 0 allocated 204800 used 220392
Mon Aug 26 11:32:29 2013 Internal trap notification 1222 (MemoryOverClear) facility sessmgr instance 16 card 1 cpu 0 allocated 1249280 used 219608

Fri Dec 20 13:52:20 2013 Internal trap notification 1217 (MemoryWarn) facility npudrv instance 401 card 5 cpu 0 allocated 112640 used 119588
Fri Dec 20 14:07:26 2013 Internal trap notification 1218 (MemoryWarnClear) facility cli instance 5011763 card 5 cpu 0 allocated 56320 used 46856

Wed Dec 25 12:24:16 2013 Internal trap notification 1220 (CPUOverClear) facility cli instance 5010294 card 5 cpu 0 allocated 600 used 272
Wed Dec 25 12:24:16 2013 Internal trap notification 1216 (CPUWarnClear) facility cli instance 5010294 card 5 cpu 0 allocated 600 used 272

Wed Dec 25 17:04:56 2013 Internal trap notification 1215 (CPUWarn) facility cli instance 5010317 card 5 cpu 0 allocated 600 used 595
Wed Dec 25 17:05:36 2013 Internal trap notification 1216 (CPUWarnClear) facility cli instance 5010317 card 5 cpu 0 allocated 600 used 220

CPU使用率監控

CPUWarn SNMP陷阱在proclet的cpu使用率達到其分配的90%時生成。

生成CPUWarn後，當proclet的cpu使用率達到其從警告值分配的50%以上時生成CPUOver。

如果proclet的cpu使用率在生成CPUWarn之前達到其分配的使用率，則生成CPUOver。

當使用率回退到已分配的50%時，CPUWarn/Over會被清除。

範例：

如果設施的系統分配為60，則當值達到54時，系統產生SNMP陷阱(CPUWarn)。

由於系統的裝置分配是60，當proclet的cpu使用率達到其從警告值分配的50%以上，在這種情況下，當系統達到84(54+30)時，系統生成SNMP陷阱(CPUOver)。

記憶體使用率監控

MemoryWarn是在proclet的記憶體使用達到其分配時生成的。

MemoryOver在proclet的記憶體使用率超過其分配的+ 15MB（即其分配的兩倍）時生成。

當使用率回到95%的分配時，會清除MemoryWarn/MemoryOver。

範例：

如果裝置的系統分配為60MB，則對於任何大於60MB的值，系統都會生成SNMP陷阱MemoryWarn。

由於裝置的系統分配是60MB，因此當任務記憶體利用率達到75MB時，系統生成SNMP陷阱MemoryOver。

檔案使用率監控

Files表示開啟檔案的數量或進程正在使用的檔案描述符。

沒有針對檔案使用情況實施SNMP陷阱，但會針對超出/清除狀態生成日誌記錄消息。

當proclet的檔案使用率超過其分配的+ 10%分配時，會生成超日誌。

當proclet的檔案使用率回退到其分配的90%時，會生成清除日誌。

2013-May-28+14:16:18.746 [resmgr 14517 warning] [8/0/4440 <rmmgr:80>
_resource_cpu.c:3558] [software internal system syslog] The task cli-8031369 is over its
open files limit. Allocated 2000, Using 2499

顯示任務資源中的狀態

show task resources CLI輸出中的狀態欄位具有不同的條件。

在下面的圖片中，WARN為warn，而ALARM為over狀態。

212317-troubleshoot-staros-cpu-memory-files-usa-01.png

疑難排解

對於CPU使用率

當系統開始生成與CPU相關的SNMP陷阱時，請在出現活動問題時收集以下資訊：

顯示任務資源

檢查是否有進程進入警告/超狀態狀態

顯示任務資源最大值

檢查最大使用量而不是當前使用量

 

show snmp trap history

檢查是否存在任何CPUWarn/Over事件

注意：這是隱藏/測試命令，請參閱文檔如何在StarOs中啟用和進入測試模式。

此命令不影響服務，可以在生產環境中運行。

show profile card <card number> cpu <cpu number> depth <value>

這就是所謂的後台探查器。

後台探查器始終為 運行（即使在生產中），固定取樣週期為1.

我們可以知道哪台PC佔用CPU資源、每個卡/cpu/裝置/例項等。 

建議使用預設值1來指定深度。（例如4）

記憶體使用

當系統開始生成與記憶體相關的SNMP陷阱時，請在出現活動問題時收集以下資訊：

顯示任務資源

檢查是否有進程進入警告/超狀態狀態

顯示任務資源最大值

檢查最大使用量而不是當前使用量

show snmp trap history

檢查是否存在任何MemoryWarn/Over事件

顯示日誌

檢查resmgr是否報告任何警告/錯誤。

注意：這是隱藏/測試命令，請參閱文檔如何在StarOs中啟用和進入測試模式。

此命令不影響服務，可以在生產環境中運行。

show messenger proclet facility <name> instance <x> heap

檢查proclet的堆使用情況

注意：這是隱藏/測試命令，請參閱文檔如何在StarOs中啟用和進入測試模式。

此命令不影響服務，可以在生產環境中運行。

show messenger proclet facility <name> instance <x> system heap

檢查包含進程的系統堆資訊

提示：在向TAC提出服務請求之前，每10分鐘執行多次cpu相關命令輸出和4次輸出。

 

對於檔案使用

在OS級別設定的實際檔案限制高於StarOs中的檔案使用限制。

例如，對於任務Diameter Proxy(diaproxy)，作業系統級別限製為8192。在StarOS中，進程最多可以消耗8192，而檔案限制設定為1000。

asr5500:card3-cpu0# ps -ef | grep diam
root 5934 4555 0 Jul02 ? 00:07:52 diamproxy --readypipe 8 --limit_mode 8 --card_number 3 --cpu_number 0 --master_spc 3

asr5500:card3-cpu0# cat /proc/5934/limits | grep open
Max open files     8192      8192     files 

[local]asr5500-2# show task resources facility diamproxy all
Friday July 11 10:05:54 JST 2014
task cputime memory files sessions
cpu facility inst used allc used alloc used allc used allc S status
----------------------- --------- ------------- --------- ------------- ------
3/0 diamproxy 2 0.3% 90% 22.83M 250.0M 216 1000 -- -- - good
8/0 diamproxy 1 0.4% 90% 22.71M 250.0M 69 1000 -- -- - good

還有CPU級別限制，請同時檢查它，只要您有足夠的可用空間，就沒問題。

[local]ASR5500# show cpu info card 1 cpu 0 
Card 1, CPU 0:
  Status                : Active, Kernel Running, Tasks Running
  Load Average          : 0.26, 0.39, 0.44 (1.78 max)
  Total Memory          : 32768M (16384M node-0, 16384M node-1)
  Kernel Uptime         : 3D 22H 11M
  Last Reading:
    CPU Usage All       : 0.1% user, 0.3% sys, 0.0% io, 0.0% irq, 99.6% idle
      Node 0            : 0.1% user, 0.3% sys, 0.0% io, 0.0% irq, 99.5% idle
      Node 1            : 0.1% user, 0.2% sys, 0.0% io, 0.0% irq, 99.7% idle
    Processes / Tasks   : 185 processes / 29 tasks
    Network             : 0.326 kpps rx, 0.912 mbps rx, 0.208 kpps tx, 3.485 mbps tx
    File Usage          : 1792 open files, 3279141 available
    Memory Usage        : 1619M 4.9% used (1209M 7.4% node-0, 409M 2.5% node-1)

當可用時間小於256時，將生成以下警告消息：

event 14516
user_resource_cpu_cpu_low_files(uint32 card, uint32 cpu, uint32 used, uint32 remain)
"The CPU %d/%d is running low on available open files. (%u used, %u remain)"
warning
software internal system critical-info

修訂記錄

修訂 發佈日期 意見
1.0
19-Oct-2017
初始版本
TAC Authored

由思科工程師貢獻

  • Tomonobu Okada
    Cisco TAC Engineer

這份文件是否有所幫助？

Feedback意見

讓思科協助您

本文件適用於這些產品