Nutanix LCMのFW更新関連の既知事象とトラブルシューティングについてのメモ

事象概要

Dell XCモデルにてNutanix LCMによるFW更新を実施し、問題なく完了したように見えたが、一部のFWが更新されていなかった。

再度LCM Inventoryを実施したところ、同じLCM Bundleでの再更新が必要と表示された。

そのままリトライを実施したら、今度は1度目で更新されなかったFWも更新された。

 

 

関連KB

以下のKBに事象と思われる。（ログ出力が一致した）

https://portal.nutanix.com/page/documents/kbs/details?targetId=kA07V000000H6G3SAK

 

対処

ログを見る限りはNutanix LCM側の問題と考えられるため、LCM Update後にもう一度インベントリを実行して、更新がある（Need Update）と表示された場合は再度LCMを実行するのが良い。

iDRAC側のログを見る限りは該当FWのUpdateがそもそもNutanix LCM側から依頼されておらず、

XC専用のLCM関連スクリプト（get_update_list.py）は、Upgrade未実施のコンポーネントを正常に返答しているが、Nutanix LCM側が未実施のままLCM処理を終了してしまっている状態なので、将来のリリースでの改善を期待したい。

 

トラブルシューティングで利用したコマンドやログなど

コマンド

用途

補足

CVM$ lcm_leader

LCMリーダーを特定する

ログファイル参照などの以降の操作はLCMリーダーのCVMで実施する

CVM$ lcm_upgrade_status

LCM Updateの履歴を確認する

ログファイルのどの時間帯を見ればいいかの判断基準にもなる

CVM$ cd /home/nutanix/data/logs

ログファイルのあるディレクトリに移動

 

CVM$ less lcm_ops.out

メインとなるログファイル

ログファイルのあるディレクトリで実行

CVM$ grep -rni "Candidate list is not empty" lcm*

本事象の特定

 

CVM$ grep -rni "Uploading image" lcm_*

UpdateされてFWコンポーネントを確認

XCモデルはidracにFWファイルがUploadされている

CVM$ grep -rni 'GET - https://169.254.0.1/redfish/v1/UpdateService/FirmwareInventory/Installed-' lcm_* | less

当時のFWバージョンの取得

更新前後のFWバージョンの取得が可能

 

 

 

 

コメント

コメントを投稿

このブログの人気の投稿

（Nutanix）Dell XC モデルのアップグレード準備メモ（LTS 6.5.x -> 6.10)

本記事の概要 インターネットアップグレード機能を利用した LTS 6.5 → 6.10 へのアップグレードの準備とまとめておく   アップグレードされるものの一覧 Nutanix LCM では以下のコンポーネントをアップデートすることが可能となっている LCM Framework Prism Central AOS AHV FSM Foundation Licensing Dell XC Firmware 群（ Dell XC モデルを利用）     アップグレード前に確認すべき互換性 LCM を実行する前に互換性も確認しておく。   ①既存ハードウェアとターゲットバージョンの互換性 https://portal.nutanix.com/page/documents/compatibility-interoperability-matrix/hardware ※利用しているハードウェアがターゲットバージョンにに対応しているかを確認した     https://portal.nutanix.com/page/documents/compatibility-interoperability-matrix/interoperability ターゲット AOS と Prism Central の互換性を確認することで Prism Central のターゲットバージョンを決定する 決定した Prism Central のターゲットバージョンが既存 AOS の互換性があるのかを確認する必要がある。 ※互換性がない場合は 2 段階アップグレードなども考慮しなくてはならない。今回は対応していたので OK 。     https://portal.nutanix.com/page/documents/upgrade-paths Prism Central のソースバージョンからターゲットバージョンへのアップグレードパスを確認しておく。 同様に、 AOS についてもソースバージョンからターゲットバージョンへのアップグレードパスを確認する。   ...
続きを読む

Dell XC モデルのFirmware更新（LTS 6.10）

イメージ
  この記事は  Nutanix Advent Calendar 2024   の 12 月4 日分として執筆しました。 本記事の概要 Dell XC モデルにおける Firmware （ FW ）更新の仕組みと特長について、調べたことをまとめています。   Dell XC モデルのFW 更新の大まかな仕組み FW の更新を実施するのは iDRAC と呼ばれるサーバ側の管理モジュール（いわゆる BMC ）です。 Nutanix の LCM Framework は iDRAC に対してFW ファイルのアップロード＆更新のインストールを実行することで FW を更新しています。 その際に、LCM Framework から iDRAC への接続性は TCP/IP を利用しています。 通常、 iDRAC(BMC) に接続する際はサーバに設けられている専用ポートにネットワーク設定を施すことで外部から接続（ Out of band ）が可能になりますが、 XC モデルの場合は専用ポートを利用していません。代わりにサーバ上の OS （ AHV ）に仮想 NIC を認識させることで外部ネットワークを経由せずにサーバ内部の通信で完結させています。 具体的にはiDRACの機能でAHV に対して仮想の USBNIC を認識させており、 AHV はその USBNIC を利用することでサーバ内部の通信のみで iDRAC に TCP/IP 接続をすることができるということです。この接続パスを経由して、 Redfish と呼ばれる API にて iDRAC に対してFW ファイルのアップロードと更新のインストールを実行することができています。     仮想 NIC について 仮想 NIC 自体は USBNIC という形で AHV が検出することができます。（ iDRAC の OS パススルーの仕組みを有効化している必要があります。アプライアンスなので工場出荷時点で設定済み） この USBNIC を経由した通信は iDRAC にのみ伝達され、サーバの外部に通信が漏れることはありません。 LTS 6.5 (el7) までは、 AHV に iSM （ iDRAC Service Module...
続きを読む

NutanixサイザーのCPUリソース計算について調べたこと

イメージ
  概要 Nutanix サイザーはデフォルト設定では CPU リソース計算のロジックが特殊なので少し調べてみた     免責事項 本記事の内容は推測多分に含んでおり、詳細については正しくない可能性があります。 実際に計算が微妙に合わない部分などもありますが、実際のサイジング結果から大きくずれているということはないので、 厳密さはないものの、 CPU 計算ロジックの概要としてお考え下さい。     CPU サイジングに関わる前提知識 CPU リソース計算のロジックが複雑になっている要因を一言でいえば、 CPU モデル毎の性能差である。 つまり、同じ 1 コアでも CPU モデルによってその性能が大きく異なる。 もし 5 年前の CPU で 4 コア必要なアプリケーションがあったとして、最新の CPU のコアでは 2 コアで済む場合もある。 そのようなケースで性能差を考えずに基盤更改の際に単純にコア数だけでサイジングをしてしまうとオーバーサイジングになってしまう。 昨今のソフトウェアはソケット単位ではなくコア単位の課金になっているケースが多いため、コア数が増えるとソフトウェアコストも増えてしまう。   そのため、きちんと CPU の性能差を理解して適切なサイジングをすることがコスト観点で重要となっている。     Nutanix Sizer の CPU リソース計算のロジック（ Applied Weight 利用時） 参考： Nutanix Sizer Help   Nutanix Sizer から出力される BOM を見ると CPU リソースとして以下の項目がある。   今回議題にしているのは Physical RAW Capacity （ Cores ）と Effective RAW Capacity （ Cores ）の違いについてである。 Physical RAQ Capacity （ Cores ）はその名の通り、物理的なコア数である。 この例では 24Core の CPU （ Intel 6442Y) が 8 基利用されているので、合計で 192 ...
続きを読む