この製品のマニュアルセットは、偏向のない言語を使用するように配慮されています。このマニュアルセットでの偏向のない言語とは、年齢、障害、性別、人種的アイデンティティ、民族的アイデンティティ、性的指向、社会経済的地位、およびインターセクショナリティに基づく差別を意味しない言語として定義されています。製品ソフトウェアのユーザーインターフェイスにハードコードされている言語、RFP のドキュメントに基づいて使用されている言語、または参照されているサードパーティ製品で使用されている言語によりドキュメントに例外が存在する場合があります。シスコのインクルーシブランゲージに対する取り組みの詳細は、こちらをご覧ください。
このドキュメントは、米国シスコ発行ドキュメントの参考和訳です。リンク情報につきましては、日本語版掲載時点で、英語版にアップデートがあり、リンク先のページが移動/変更されている場合がありますことをご了承ください。あくまでも参考和訳となりますので、正式な内容については米国サイトのドキュメントを参照ください。
この章の内容は、次のとおりです。
IOM の問題の診断でよく見られる略語と用語は次の通りです。
HR：Host Receive Block（ホスト受信ブロック）
NR：Network Receive Block（ネットワーク受信ブロック）
SS：Switching Subsystem（スイッチング サブシステム）
HI：Host Interface Block（ホスト インターフェイス ブロック）
NI：Network Interface Block（ネットワーク インターフェイスブロック）
CI：CPU Interface Block（CPU インターフェイス ブロック）
BI：BMC Interface Block（BMC インターフェイス ブロック）
HIF：Host Interface（ホスト インターフェイス）
NIF：Network Interface（ネットワーク インターフェイス）
CIF：CPU Interface（CPU インターフェイス）
BIF：BMC Interface（BMC インターフェイス）
VIF：Virtual Interface（仮想インターフェイス）
VNTag：Virtual NIC Tag（仮想 NIC タグ）
h2n：Host-to-Network（ホスト - ネットワーク）方向。HI、CI、BI で受信した NI 宛てのトラフィックの説明に使用。
n2h：Network-to-Host（ネットワーク - ホスト）方向。NI で受信した HI、CI、BI 宛てのトラフィックの説明に使用。
Redwood：2104 IOM に搭載されている ASIC。Redwood ASIC の基本機能は、サーバ アダプタ カードに接続されている 8 つのホスト側 10G イーサネット ポートと 4 つのネットワーク側 10G イーサネット ポートでやり取りされるトラフィックを集約することです。
Woodside：2204 および 2208 IOM に搭載されている ASIC。32 のホスト側 10G イーサネット ポートと 4 つまたは 8 つのネットワーク側 10G イーサネット ポートでやり取りされるトラフィックを集約します。
シャーシ管理スイッチ（CMS：Chassis Management Switch）：IOM に統合されている Marvell 88E6095 イーサネット スイッチ。
CMC：Redwood または Woodside ASIC と CMS を制御し、必要な IOM ファームウェアを実行し、その他のシャーシ管理機能を実行する CPU。
Cisco 5108 シャーシの 2100 および 2200 シリーズ IOM は、シャーシ自体でアクティブな唯一のコンポーネントです。シャーシを稼働するには 1 つの IOM で十分ですが、両方ともクラスタの設定が必要です。
シャーシと IOM に関する問題の一部は、次のブート シーケンスを確認することで追跡できます。
電源が投入されます。
ブート ローダが呼び出し済み、IOM のメモリが設定済みかつスクラビング処理済みで、ECC が有効化されます。ブート ローダで、IOM Health LED がオレンジ色に設定されます。
カーネル チェックサムおよび起動が開始されます。
指定したカーネル チェックサムが失敗するか、指定したカーネルが最後の 2 回の起動でユーザ プロセス「OHMD」の起動に失敗した場合、代替カーネルが起動します。
カーネルを起動できない場合、IOM Health LED がオレンジ色で点滅します。IOM は Cisco UCS Manager では認識されません。これが唯一のアクティブ IOM の場合、シャーシ全体が認識されません。
カーネルの起動が成功すると、IOM Health LED が緑色に設定されます。IOM が Cisco UCS Manager で認識されない場合、IOM とファブリック インターコネクト間に物理的な配線の問題が存在していないか確認します。Cisco UCS Manager で管理するシャーシの場合、物理的な接続が 1 つ機能していなければなりません。配線に問題がない場合、IOM のファームウェアのバージョンが、Cisco UCS Manager のバージョンよりも古い可能性があります。IOM をシスコに返却する必要がある場合があります。
Communications ASIC で実行中のプロセス（Redwood または Woodside）および CMC Process Monitor（pmon）で実行中のプロセスを起動し、次の CMC プラットフォームのプロセスを再起動します。
platform_ohms -POST およびランタイムのヘルス モニタリング
dmserver - デバイス マネージャ、seeprom データ キャッシュ、I2C デバイス スキャン
ipmiserver - センサーおよび UCS Manager への FRU データ送信
cmc_manager - シャーシ情報の設定、UCS Manager 要求への応答
cluster_manager - ローカル クラスタ マスターおよびクライアント データの転送
updated - ソフトウェア アップデートの要求のリッスン
thermal - シャーシ サーマル管理
pwrmgr - シャーシの電源マネージャ
pppd - ピア CMC への UART 2 経由の通信パス
obfllogger - OBFL Flash へのメッセージのログに対するクライアント要求の許可
rsyslogd - syslog、UCS Manager 宛てにレベル別に送信されたメッセージ
ブート シーケンスのステージ 2 または 3 で障害が検出された場合、関連コンポーネントが主に考えられる原因であり、ほとんどの場合 IOM を返却する必要があります。IOM ブート ローダ コンソールを直接監視することができる IOM に HDMI コンソール ポートがありますが、これを使用できるのは、既知の機能しているファームウェア イメージへの読み込みなどの詳細な変更に必要なデバッグ ソフトウェアへのアクセス権を持つ、シスコ社内の技術者に限定されます。
LED |
Status（ステータス） |
LED の状態 |
|---|---|---|
IOM Health LED |
通常動作中 |
グリーン |
起動または軽微なエラー |
オレンジ |
|
重大なエラー |
オレンジに点滅 |
|
Chassis OK LED |
Booting |
消灯 |
IOM の制御中 |
グリーン |
|
Chassis FAIL LED |
エラーなし |
消灯 |
軽微なエラー |
オレンジ |
|
重大なエラー |
オレンジに点滅 |
IOM とファブリック インターコネクト（IOM HIF ポート）間のリンクがダウンすると生じる障害は、シャーシ内のサーバに使われる静的ルートのピン設定を理解すると、わかりやすくなります。最も簡単な解決策は、単にシャーシを再確認することですが、このトピックを理解することで、その解決策を実行すべき場合がよくわかるようになります。
アクティブなファブリック リンクの数 |
ファブリック リンクにピン接続されるブレード スロット |
|---|---|
1 リンク |
すべての HIF ポートがアクティブ リンクにピン接続されます。 |
2 リンク |
1、3、5、7 はリンク 1 にピン接続 2、4、6、8 はリンク 2 にピン接続 |
4 リンク |
1、5 はリンク 1 にピン接続 2、6 はリンク 2 にピン接続 3、7 はリンク 3 にピン接続 4、8 はリンク 4 にピン接続 |
8 リンク（2208XP のみ） |
1 はリンク 1 にピン接続 2 はリンク 2 にピン接続 3 はリンク 3 にピン接続 4 はリンク 4 にピン接続 5 はリンク 5 にピン接続 6 はリンク 6 にピン接続 7 はリンク 7 にピン接続 8 はリンク 8 にピン接続 |
1、2、4、8 リンクだけがサポートされます。3、5、6、7 リンクは無効な構成となります。
以下に想定される動作の例を示します。
各 IOM 上にはアクティブなリンクが 4 つあり、それぞれ対応するファブリック インターコネクトに接続しています。
IOM-1 とそのファブリック インターコネクト（現在アクティブ）を接続するリンク 4 が、データセンターの従業員に誤って切断されています。
ブレード スロット 3、4、7、8 を使用した IOM-1 経由の接続は IOM-2 とスタンバイのファブリック インターコネクトにフェイルオーバーします。スロット 4 と 8 だけが影響を受けそうに思われますが、3 つのリンク構成はサポートされていないため、リンク 3 も管理上停止します。データのスループットは失われませんが、Cisco UCS Manager で障害が通知されます。
この時点で、次のいずれかを実行できます。
次の表に、IOM の問題のトラブルシューティングを行うためのガイドラインおよび推奨される解決策を示します。
問題 |
推奨される解決策 |
|---|---|
IOM Health LED が初期ブートアップでオレンジ色に変わり、そのままになる。 |
問題の IOM を取り付け直します。 IOM を取り外して交換します。 シャーシの両方の IOM が同じ状態を示している場合は、サーバまたはシャーシの使用を停止して Cisco TAC に連絡してください。 |
IOM Health LED がオレンジ色で点滅したままで、緑色にならない。 |
問題の IOM を取り付け直します。 IOM を取り外して交換します。 シャーシの両方の IOM が同じ状態を示している場合は、サーバまたはシャーシの使用を停止して Cisco TAC に連絡してください。 |
|
CMC は Cisco UCS Manager からシャーシ情報を受け取っているが、1 つ以上のブレードが応答していないか、シャーシ情報を受け取っていない。 |
IOM ファームウェアと Cisco UCS Manager が同じソフトウェア レベルであることを確認します。 問題の IOM を取り付け直します。 IOM の Redwood または Woodside ASIC の POST 結果を確認します。 ランタイム リンク停止ステータスを確認します。 問題のサーバで POST テストが失敗しているかどうか確認します。シャーシ情報に関する詳細は、CMC Manager のログにあります。CMC クラスタの状態は、次のコマンドを使ってファブリック インターコネクトと比較できます。 FI: show cluster state cmc connected directly to the IOM: show platform software cmcctrl dmclient all |
CMC が Cisco UCS Manager からシャーシ情報を一切受け取らない。 |
IOM ファームウェアと Cisco UCS Manager が同じソフトウェア レベルであることを確認します。 IOM とファブリック インターコネクト間で 1 つ以上の物理ケーブルが正常に機能していることを確認します。 ランタイム リンク停止ステータスを確認します。 問題の IOM を取り付け直します。 |
1 つ以上のサーバへのリンクが失われた。 |
問題が生じている複数のサーバが同じピン設定グループにあることを確認します。可能であれば、停止しているリンクを隔離して交換します。 問題のサーバを取り付け直します。 問題の IOM を取り付け直します。 シャーシを再確認し、問題のサーバへのピン接続を再度確立します。 |
IOM-1 が IOM-2 にピア接続していない。 |
両方の IOM を取り付け直します。 |
POST の結果の確認：正常な Woodside POST の例
cmc-3-A# connect iom 1
fex-1# show platform software woodside post
PRBS passes: 0
+-------+--------+--------+--------+--------+
| Port | Pat0 | Pat1 | Pat2 | Pat3 |
+-------+--------+--------+--------+--------+
+-------+--------+--------+--------+--------+
POST Results:
legend:
'.' PASSED
'X' FAILED
' ' Not Run
'/' Not applicable
A C N N N N N N N N H H H H H H H H H H H H H H H H H H H H H H H H H H H H H H H H
s I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I I
i 0 1 2 3 4 5 6 7 0 1 2 3 4 5 6 7 8 9 1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 3 3
c 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
+-+----------+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|0| Register | |/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|
|1| MBIST |.|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|
|2| CI lpbk |.|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|/|
|3| Serdes |/|/| | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | |
|4| PHY BIST |/|/|.|.|.|.|.|.|.|.| | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | |
|5| PRBS |/|/|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|
|6| PCS lpbk |/|/|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|.|
|7| Runtime |/|/| | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | |
+-+----------+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
POST の結果の確認：正常な Redwood POST の例
cmc-3-A# connect iom 1
fex-1# show platform software redwood post
Redwood POST Results:
legend:
'.' PASSED
'X' FAILED
' ' Not Run
+-------------------+-+----+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
| |A| | | | | | | | | | | | | | | |
| |S|ASIC| | |H|H|H|H|H|H|H|H|N|N|N|N|
| |I|LVL |C|B|I|I|I|I|I|I|I|I|I|I|I|I|
| POST Test |C|RSLT|I|I|0|1|2|3|4|5|6|7|0|1|2|3|
+-------------------+-+----+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
| 0. Register Test |0| . | | | | | | | | | | | | | | |
| 1. MBIST |0| . | | | | | | | | | | | | | | |
| 2. CI Loopback |0| . | | | | | | | | | | | | | | |
| 3. Serdes |0| | | |.|.|.|.|.|.|.|.|.|.|.|.|
| 4. PHY BIST |0| | | |.|.|.|.|.|.|.|.|.|.|.|.|
| 5. PRBS |0| | | |.|.|.|.|.|.|.|.|.|.|.|.|
| 6. PCS Loopback |0| | | |.|.|.|.|.|.|.|.|.|.|.|.|
| 7. IIF PRBS |0| | | | | | | | | | | | | | | |
| 8. Runtime Failure|0| | | | | | | | | | | | | | | |
+-------------------+-+----+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
fex-1#
シャーシ管理スイッチの統計情報の確認
cmc-3-A# connect iom 1 fex-1# show platform software cmcctrl cms all 0 up <= iBMC slot 1 1 up <= iBMC slot 2 2 down <= iBMC slot 3 3 down <= iBMC slot 4 4 up <= iBMC slot 5 5 down <= iBMC slot 6 6 down <= iBMC slot 7 7 down <= iBMC slot 8 8 up <= CMS/CMC Processor link 9 no_phy <= Redwood link 10 no_phy <= Debug port link IN_GOOD_OCTETS_LO (p0) : [0x000290AA] IN_GOOD_OCTETS_HI (p0) : [0x00000000] ... ... IN_FILTERED (p10) : [0x0000] OUT_FILTERED (p10) : [0x0000]
Woodside ASIC のランタイム リンク停止ステータスを確認します。
cmc-3-A# connect iom 1
fex-1# show platform software woodside sts
Board Status Overview:
legend:
' '= no-connect
X = Failed
- = Disabled
: = Dn
| = Up
[$] = SFP present
[ ] = SFP not present
[X] = SFP validation failed
------------------------------
(FINAL POSITION TBD) Uplink #: 1 2 3 4 5 6 7 8
Link status: | | | | | | | |
+-+--+--+--+--+--+--+--+-+
SFP: [$][$][$][$][$][$][$][$]
+-+--+--+--+--+--+--+--+-+
| N N N N N N N N |
| I I I I I I I I |
| 0 1 2 3 4 5 6 7 |
| |
| NI (0-7) |
+------------+-----------+
|
+-------------------------+-------------+-------------+---------------------------+
| | | |
+------------+-----------+ +-----------+------------+ +------------+-----------+ +-------------+----------+
| HI (0-7) | | HI (8-15) | | HI (16-23) | | HI (24-31) |
| | | | | | | |
| H H H H H H H H | | H H H H H H H H | | H H H H H H H H | | H H H H H H H H |
| I I I I I I I I | | I I I I I I I I | | I I I I I I I I | | I I I I I I I I |
| 0 1 2 3 4 5 6 7 | | 8 9 1 1 1 1 1 1 | | 1 1 1 1 2 2 2 2 | | 2 2 2 2 2 2 3 3 |
| | | 0 1 2 3 4 5 | | 6 7 8 9 0 1 2 3 | | 4 5 6 7 8 9 0 1 |
+-+--+--+--+--+--+--+--+-+ +-+--+--+--+--+--+--+--+-+ +-+--+--+--+--+--+--+--+-+ +-+--+--+--+--+--+--+--+-+
[ ][ ][ ][ ][ ][ ][ ][ ] [ ][ ][ ][ ][ ][ ][ ][ ] [ ][ ][ ][ ][ ][ ][ ][ ] [ ][ ][ ][ ][ ][ ][ ][ ]
+-+--+--+--+--+--+--+--+-+ +-+--+--+--+--+--+--+--+-+ +-+--+--+--+--+--+--+--+-+ +-+--+--+--+--+--+--+--+-+
- - - | - - - | - - - : - - - : - - - : - - - : - - - | - - - |
3 3 3 2 2 2 2 2 2 2 2 2 2 1 1 1 1 1 1 1 1 1 1 9 8 7 6 5 4 3 2 1
2 1 0 9 8 7 6 5 4 3 2 1 0 9 8 7 6 5 4 3 2 1 0
\__\__/__/ \__\__/__/ \__\__/__/ \__\__/__/ \__\__/__/ \__\__/__/ \__\__/__/ \__\__/__/
blade8 blade7 blade6 blade5 blade4 blade3 blade2 blade1
Redwood ASIC のランタイム リンク停止ステータスを確認します。
cmc-3-A# connect iom 1
fex-1# show platform software redwood sts
Board Status Overview:
legend:
' '= no-connect
X = Failed
- = Disabled
: = Dn
| = Up
^ = SFP+ present
v = Blade Present
------------------------------
+---+----+----+----+
|[$]| [$]| [$]| [$]|
+---+----+----+----+
| | | |
+-+----+----+----+-+
| 0 1 2 3 |
| I I I I |
| N N N N |
| |
| ASIC 0 |
| |
| H H H H H H H H |
| I I I I I I I I |
| 0 1 2 3 4 5 6 7 |
+-+-+-+-+-+-+-+-+--+
| | : : - - : :
+-+-+-+-+-+-+-+-+
|v|v|v|v|-|-|v|v|
+-+-+-+-+-+-+-+-+
Blade: 8 7 6 5 4 3 2 1
fex-1#
Redwood の管理コントロール、MAC と PHY のステータス、SFP が検出されているか確認した例。
cmc-3-A# connect iom 1 fex-1# show platform software redwood oper ASIC 0: +--+----+-+----+-----+-------------------------+-+ | | | | |MAC | PHY | | |P | N |A| |-+-+-+----+-+-+-+--------+-----+ + |o | a |d| | | |A| |X| | | | | | |r | m |m| |L|R|L| |G|P|P| | |S| |t | e |i|Oper|C|M|G|MDIO|X|C|M| | |F| | | |n| St |L|T|N|adr |S|S|D| u-code | Ver |P| +--+----+-+----+-+-+-+----+-+-+-+--------+-----+-+ | 0| CI |E| Up | | | | 0 |0|0|0| n/a | 0.00| | | 1| BI |E| Up | | | | 0 |0|0|0| n/a | 0.00| | | 2| HI0|E| Up | | | | 18 |1|1|1| Ok | 1.09| | | 3| HI1|E| Up | | | | 19 |1|1|1| Ok | 1.09| | | 4| HI2|E| Dn |1| |1| 16 |0|0|0| Ok | 1.09| | | 5| HI3|E| Dn |1| |1| 17 |0|0|0| Ok | 1.09| | | 6| HI4|-| Dn | | |1| 14 |0|0|0| Ok | 1.09| | | 7| HI5|-| Dn | | |1| 15 |0|0|0| Ok | 1.09| | | 8| HI6|E| Dn |1| |1| 12 |0|0|0| Ok | 1.09| | | 9| HI7|E| Dn |1| |1| 13 |0|0|0| Ok | 1.09| | |10| NI0|E| Up | | | | 23 |1|1|1| Ok | 1.39|*| |11| NI1|E| Up | | | | 22 |1|1|1| Ok | 1.39|*| |12| NI2|E| Up | | | | 21 |1|1|1| Ok | 1.39|*| |13| NI3|E| Up | | | | 20 |1|1|1| Ok | 1.39|*| +--+----+-+----+-+-+-+----+-+-+-+--------+-----+-+
Woodside の管理コントロール、MAC と PHY のステータス、SFP が検出されているか確認した例。
fex-1# show platform software woodside oper ASIC 0: +---+-----+-+----+-----------+-----------------+ | | | | | MAC | | PHY | | | | | | | | |S|---+---| | | | | |A| |-+-+-+-+-+-|e|XFI|SFI| | | | P | |d| | |L|T|R|R|T|r|---+---| | | | o | |m| |P|o|R|R|F|F|d|p|p|p|p|S| | | r | |i|Oper|C|c|d|d|l|l|e|m|c|c|m|F|ucode|----------------------------+----------------------------+-----+ | t |Name |n| St |S|k|y|y|t|t|s|d|s|s|d|P| ver | Time last came Up | Time last went Down |Flaps| +---+-----+-+----+-+-+-+-+-+-+-+-+-+-+-+-+-----+----------------------------+----------------------------+-----+ | 0 |HI0 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 1 |HI1 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 2 |HI2 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 3 |HI3 |E| Up |1|1|1|1|1|1|1|0|0|0|0| | 0.00| 02/03/2012 23:17:36.046137 | 02/03/2012 23:17:34.815303 | 24| | 4 |HI4 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 5 |HI5 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 6 |HI6 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 7 |HI7 |E| Up |1|1|1|1|1|1|1|0|0|0|0| | 0.00| 02/03/2012 22:53:04.761879 | 02/03/2012 22:52:44.548148 | 17| | 8 |HI8 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| | 9 |HI9 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| |10 |HI10 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| |11 |HI11 |E| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 02/03/2012 20:46:44.214237 | 02/03/2012 20:49:30.606932 | 3| |12 |HI12 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| |13 |HI13 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| |14 |HI14 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| |15 |HI15 |E| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 02/03/2012 20:45:30.918631 | 02/03/2012 20:48:06.811009 | 3| |16 |HI16 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0| |17 |HI17 |-| Dn |0|0|1|1|0|0|0|0|0|0|0| | 0.00| 01/01/1970 00:00:00.000000 | 01/01/1970 00:00:00.000000 | 0|
フィードバック