OpenShiftイベント コード: 1038ノード0006

ノードのファイル システムがいっぱいになると、広範囲に悪影響を及ぼす可能性があります。この問題により、そのノードにスケジュールされているアプリケーションの一部またはすべてで、パフォーマンスの低下から完全な操作不能まで、さまざまな問題が発生する可能性があります。

関係するノードとファイル システムによっては、この問題がクラスターの安定性に重大な脅威をもたらす可能性があります。

「 NodeFilesystemFilesFillingUp アラートはNodeFilesystemSpaceFillingUpアラートと似ていますが、ファイル システムのストレージ スペースがバイト単位ではなく、inodeを使い果たすことを予測します。

アラートは、 critical ファイル システムが4時間以内に使用可能なinodeを使い果たすと予測されるレベル。

診断

メモ: instance と mountpoint アラートのラベル。OpenShift Webコンソールで次のクエリーを使用して、このファイル システムの使用履歴をグラフ化できます(→メトリック→クエリーの実行を確認)。

node_filesystem_files_free{
  instance="<アラートからのインスタンス ラベルの値>",
  mountpoint="<アラートからのマウントポイント ラベルの値>"
}

また、ノードでデバッグ セッションを開き、標準のLinuxユーティリティーを使用して、使用状況のソースを特定することもできます。

$ MOUNT_POINT='<アラートからのマウントポイントラベルの値>'
$ NODE_NAME='<アラートからのインスタンスラベルの値>'

$ oc debug "node/$NODE_NAME"
$ df -hi "/host/$MOUNT_POINT"

多くの場合、inodeが不足しているファイル システムには、まだ使用可能なストレージがあることに注意してください。inodeが不足することは、多くの場合、アプリケーションが多数の小さなファイルを作成するときに発生します。

緩和

ファイルシステムに割り当てられるinodeの数は、通常、ストレージサイズに基づいています。ストレージ ボリュームのサイズを増やすことで、問題を解決したり、少なくとも問題の悪影響を遅らせたりできる場合があります。そうでない場合は、多数の小さなファイルを作成しているアプリケーションを特定し、その構成を調整するか、専用ストレージを提供します。

サポート

上記のすべての手順で問題を解決できない場合は、Dell EMCテクニカル サポートに連絡して調査を依頼してください。