ACI交换机节点SSD寿命说明
下载选项
已更新: 2024 年 1 月 18 日
文档 ID:215167
非歧视性语言
此产品的文档集力求使用非歧视性语言。在本文档集中，非歧视性语言是指不隐含针对年龄、残障、性别、种族身份、族群身份、性取向、社会经济地位和交叉性的歧视的语言。由于产品软件的用户界面中使用的硬编码语言、基于 RFP 文档使用的语言或引用的第三方产品使用的语言，文档中可能无法确保完全使用非歧视性语言。 深入了解思科如何使用包容性语言。
关于此翻译
思科采用人工翻译与机器翻译相结合的方式将此文档翻译成不同语言，希望全球的用户都能通过各自的语言得到支持性的内容。 请注意：即使是最好的机器翻译，其准确度也不及专业翻译人员的水平。 Cisco Systems, Inc. 对于翻译的准确性不承担任何责任，并建议您总是参考英文原始文档（已提供链接）。
简介
本文档介绍以应用为中心的基础设施(ACI)交换机平台上的固态驱动器(SSD)寿命耗尽行为。
如果由于对应用策略基础设施控制器(APIC)（而不是交换机节点）引发的SSD故障而登录到此页面，请参阅FN64329。
APIC SSD更换记录了APIC SSD更换过程。
背景信息
ACI枝叶和主干节点利用SSD进行存储和事件记录。所有SSD（无论供应商类型如何）都有固定的使用寿命，具体取决于制造商定义的特定属性。一些示例包括一段时间内写入和擦除的数量以及传输到驱动器的数据量。枝叶和主干节点上的SSD使用寿命可能会因定期磨损而耗尽。如果用户未对SSD即将耗尽的交换机采取正确操作，则交换机可能会因SSD进入只读模式而崩溃。因此，在针对给定节点发生F3073故障时，必须优先进行SSD更换。SSD可由思科认证现场工程师现场更换。
F3073在版本2.1(4)、2.2(4)、2.3(1o)和3.1(2m)中实施。任何后续软件版本都具备引发F3073的功能。
注：如果您运行的ACI软件版本没有SSD监控功能，强烈建议您升级到支持此类监控功能的版本。
未更换SSD时的典型症状
1.当交换机无法启动时，您可以在控制台上看到以下错误：
/dev/hd-cfg0: ********** WARNING: Filesystem still has errors **********
e2fsck 1.42.1 (17-Feb-2012)
/dev/hd-cfg1: recovering journal
/sbin/e2fsck: unable to set superblock flags on /dev/hd-cfg1
2.系统能够在较晚的代码版本（在后面一节中介绍）中主动提出与SSD相关的故障（基于SSD使用期限的F3073或F3074）。
-
F3074: fltEqptFlashFlash-minor-alarm (80% lifetime)
-
F3073: fltEqptFlashFlash-worn-out (90% lifetime)
3.您可能还会看到由于高SSD使用率而引发故障F3525。此故障经常与F3073/F3074相混淆。
# fault.Inst
code : F3525
ack : no
annotation :
cause : equipment-flash-warning
changeSet : deltape (New: 21), peCycles (New: 1678), tbw (New: 32.465179), warning (New: yes)
childAction :
created : 2019-08-05T18:22:01.455-07:00
delegated : no
descr : High SSD usage observed. Please check switch activity and contact Cisco Technical Support about high SSD usage.
dn : topology/pod-1/node-206/sys/ch/supslot-1/sup/flash/fault-F3525
domain : infra
extMngdBy : undefined
highestSeverity : warning
lastTransition : 2019-08-05T18:24:02.029-07:00
lc : raised
modTs : never
occur : 1
origSeverity : warning
prevSeverity : warning
rn : fault-F3525
rule : eqpt-flash-flash-warning-alarm
severity : warning
status :
subject : flash-warning-alarm
type : operational
如果P/E（程序擦除）周期在7天内增加21以上，则引发故障F3525。它并不意味着SSD已耗尽，只是由于存在大量客户流失，最终可能导致SSD耗尽。
您需要与技术支持中心(TAC)合作，了解造成这种混乱的原因并予以解决。还有一个策略用于更改导致特定类型的SSD引发F3525的阈值(请参阅Access Policies > Policies > Switch > Equipment Flash Config Policies)。
如何验证SSD的当前运行状况
检查SSD寿命状态的方法有两种：
- 主动系统警报
- 手动数据分析
主动系统警报
SSD生命周期监控已作为Cisco Bug ID CSCve88634的一部分添加到以下代码版本中：
- 2.1系列的2.1(4)及更高版本
- 2.2(4)及更高版本用于2.2系列
- 2.3(1o)及更高版本适用于2.3系列
- 3.1(2m)及所有未来版本
当驱动器接近其寿命的80%时，会引发次要故障；当驱动器超过其寿命的90%时，会引发主要故障。
这样，网络操作员就能够在任何交换机因超出SSD生命周期而出现故障之前对其进行监控并主动更换交换机。
- F3074: fltEqptFlashFlash-minor-alarm（80%寿命）
- F3073: fltEqptFlashFlash已耗尽（90%寿命）
早期版本的代码没有对交换机SSD进行SSD寿命检查。因此，即使交换机接近SSD到期，也不会发生故障。
手动数据分析
SSD使用日志记录开始于以下版本：3.2(5d)、3.2(6i)、3.2(7f)和4.1(1i)。
a-leaf101# cat /mnt/pss/ssd_log_amp.log (Tested on 4.2.3l)
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Mon Dec 16 19:00:01 EST 2019 16531370 0 29398 12350 100 0 122396965772 3825894828 60841125365 16 0.00 % 0 0
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Tue Dec 17 19:00:01 EST 2019 16531725 0 29422 12355 100 0 122447755358 3827482016 60858831240 16 0.00 % 12355 61606629993
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Wed Dec 18 19:00:01 EST 2019 16532222 0 29446 12359 100 0 122495197374 3828964594 60875667807 16 0.00 % 12359 61636366134
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Thu Dec 19 19:00:01 EST 2019 16533056 0 29470 12364 100 0 122542269672 3830435617 60892533342 16 0.00 % 12364 61666601865
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Fri Dec 20 19:00:01 EST 2019 16534010 0 29494 12367 100 0 122587126224 3831837398 60908759296 16 0.00 % 12367 61694592882
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Sat Dec 21 19:00:01 EST 2019 16535311 0 29518 12372 100 0 122631804318 3833233605 60925205662 16 0.00 % 12372 61723045022
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Sun Dec 22 19:00:01 EST 2019 16536727 0 29542 12376 100 0 122676829388 3834640654 60941741722 16 0.00 % 12376 61751623726
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Mon Dec 23 19:00:01 EST 2019 16538321 0 29566 12380 100 0 122722137414 3836056544 60958504969 16 0.00 % 12380 61780395692
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Tue Dec 24 19:00:01 EST 2019 16539858 0 29591 12384 100 0 122767087802 3837461258 60975050343 16 0.00 % 12384 61808582833
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Wed Dec 25 19:00:01 EST 2019 16541121 0 29615 12388 100 0 122812238580 3838872234 60991578411 16 0.00 % 12388 61837188237
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Thu Dec 26 19:00:01 EST 2019 16542653 0 29639 12393 100 0 122857007868 3840271286 61008101155 16 0.00 % 12393 61865429457
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Fri Dec 27 19:00:01 EST 2019 16544352 0 29663 12397 100 0 122901807026 3841671272 61024757511 16 0.00 % 12397 61893705871
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Sat Dec 28 19:00:01 EST 2019 16546213 0 29687 12401 100 0 122946927200 3843081289 61041459287 16 0.00 % 12401 61922169689
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Sun Dec 29 19:00:01 EST 2019 16549522 0 29711 12405 100 0 122991584018 3844476827 61058889999 16 0.00 % 12405 61950124731
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Mon Dec 30 19:00:01 EST 2019 16551885 0 29735 12410 100 0 123036252528 3845872732 61075846564 16 0.00 % 12410 61977362529
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Tue Dec 31 19:00:01 EST 2019 16553858 0 29759 12414 100 0 123098133082 3847806568 61093085451 16 0.00 % 12414 62022286518
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Wed Jan 1 19:00:01 EST 2020 16555127 0 29783 12418 100 0 123142018610 3849178024 61109758713 16 0.00 % 12418 62048933159
Model SerialNo Software-Version Date RawReadError(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attribute(210) TBW(246) HostPageCount(247) BackgroundPageCount(248) WAF Delta_WAF Delta_PE Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1 Thu Jan 2 19:00:01 EST 2020 16556532 0 29808 12422 100 0 123186637556 3850572390 61126687626 16 0.00 % 12422 62076878843
Model SerialNo SW-Version Date R.Error(1) GBB(5) UpTime(9) PE(173) LifeTime(202) Attr(210) TBW(246) WAF DWAF DPE DTBW
Micron_M600_MTFDDAT064MBF MSA195207V1 14.2(3l) 2020-01-03 16557977 0 29832 12428 100 0 123278298184 16 0.00 % 0 0
Micron_M600_MTFDDAT064MBF MSA195207V1 14.2(3l) 2020-01-04 16558440 0 29856 12433 100 0 123323818606 16 0.00 % 5 45520422
Micron_M600_MTFDDAT064MBF MSA195207V1 14.2(3l) 2020-01-05 16559031 0 29880 12438 100 0 123369348610 16 0.00 % 5 45530004
Micron_M600_MTFDDAT064MBF MSA195207V1 14.2(3l) 2020-01-06 16561567 0 29904 12443 100 0 123415316270 16 0.00 % 5 45967660
Micron_M600_MTFDDAT064MBF MSA195207V1 14.2(3l) 2020-01-07 16564701 0 29928 12448 100 0 123460483898 16 0.00 % 5 45167628
Micron_M600_MTFDDAT064MBF MSA195207V1 14.2(3l) 2020-01-08 16565955 0 29952 12453 100 0 123505550532 16 0.00 % 5 45066634
ssd_log_amp.log文件位于1of3交换机技术支持中。
对于任何其他与制造商相关的命令，输出需要根用户的权限，这将需要TAC服务请求。
导致交换机SSD寿命耗尽的触发器
- 为了确保可维护性以及在事件发生后很长时间才提供事件的根本原因，ACI APIC和交换机对每个持续到SSD的组件进行详细日志记录。
- 这些日志记录功能需要大量的磁盘写入和覆盖。磁盘执行此操作的能力不是无限的，因此存在与驱动器相关的生存期。网络不稳定（大量移动或策略更新等），长期持续可能导致交换机SSD过早耗尽。
- 在优化写操作和维护可维护性的同时减少写入磁盘的数据量方面，有许多增强功能。这些更改是在不同版本中引入的。请参阅“代码优化”部分。
- 对于集成了代码优化增强功能的版本，如果您仍然体验到快速的SSD消耗（如每天2/3的供电周期），则很可能是由数据库写入而不是日志记录引起的，因为大多数写入的是RAMFS。当需要轮换时，日志仅在ZIP之后移动到SSD。
代码优化
在优化写操作以保持可维护性方面进行了许多增强，同时减少了写入磁盘的数据量。这些更改是在不同版本中引入的。
- Cisco Bug ID CSCve88634 — 当SSD超过其有效期时引发故障。
添加到版本2.1(4)、2.2(4)、2.3(1o)和3.1(2m) - Cisco Bug ID CSCvi32353 - F3073 Revision to SSD lifetime exceeded detection logic
- Cisco Bug ID CSCvh73803 — 为tmp_logs创建ramfs分区，以减少日志记录对SSD的影响
- Cisco Bug ID CSCvm97108 — 用于跟踪SSD过度调配更改的Bug
- Cisco bug ID CSCvt36458 — 已移除交换机的SQL DB持久层。
添加到版本4.2(6d)和5.1(1h)
3.2.4d及更高版本以及4.x及更高版本具有延长SSD寿命所需的所有故障监控和优化增强功能。当然，这并不意味着升级到这些版本绝对可以阻止SSD的寿命问题。
重新加载类型行为更改
Cisco Bug ID CSCvt36458更改了ACI交换机节点未正常重新加载的预期行为：
| 重新加载类型 | 在思科漏洞ID CSCvt36458之前 | 在Cisco Bug ID CSCvt36458之后 (4.2(6d)及更高版本和5.1(1h)及更高版本) |
| 升级 | 无状态 | 无状态 |
| 平稳重载（手动重载、后重置） | 有状态 | 有状态 |
| 不正常的重新加载（内核死机，重新通电） | 有状态 | 无状态 |
总之，流畅的交换机重新加载将继续使用它们的动态数据库。不正常的交换机重新加载现在需要从APIC拉出所有策略，类似于升级。
其他常见问题
能否在现场更换SSD?
Yes.现在，思科在现场更换了SSD，由经过认证的现场工程师帮助完成。在模块化主干上，整个管理引擎将被替换。
您应该主动更换交换机硬件吗？
TAC工程师可以检查smartctl值并评估哪些交换机寿命更长，以便立即更换最紧急的交换机，然后逐步更换不紧急的交换机。
是否有特定硬件PID更易受SSD故障的影响？
不可以。在同一环境中，SSD的使用寿命可能因不同设备而异。SSD磁盘的使用情况取决于设备写入日志以保留事件的频率。如果设备注册了大量由网络不稳定导致的事件，则有可能比其他设备更快地达到其SSD使用寿命。因此，思科提倡使用更高版本，以确保代码优化有助于控制SSD写入和延长SSD使用寿命。
修订历史记录
| 版本 | 发布日期 | 备注 |
|---|---|---|
3.0 |
18-Jan-2024 |
由于SSD更换流程的最新变更，更新了“其他FAQ”部分。 |
1.0 |
09-Jan-2020 |
初始版本 |
反馈