「VPLEX：管理サーバーのRAMメモリー使用率が高くなり、内部ディスク領域の使用率が高くなる
Summary: 外部 AMQP イベント コンシューマーなしで実行されている管理サーバーでは、RAM メモリの使用率が高くなり、内部ディスク領域の使用率が高くなる可能性があります。
This article applies to
This article does not apply to
This article is not tied to any specific product.
Not all product versions are identified in this article.
Symptoms
- 外部 AMQP イベント コンシューマーなしで実行されている管理サーバーでは、RAM メモリの使用率が高くなり、内部ディスク領域の使用率が高くなる可能性があります。
- メモリー消費量が多いシステムでは、CLIまたはGUIコマンドの実行時に通常よりも長いレイテンシーが発生します。
- ルート パーティションの内部ディスク領域が不足しているシステムは、そのパーティションに書き込むことができなくなります(VPLEXは引き続き他のパーティションにログを書き込みますが、一部のLinuxサービスはルート パーティションを使用するため、それ以上のイベントをログに記録できません)。
現象1:
rabbitmqによって大量のRAMメモリが使用されています。
service@ManagementServer:~>top
top - 13:17:26 up 103 days, 13 min, 20 users, load average: 0.28, 0.34, 0.36
タスク: 201 合計、1 実行中、200 スリープ、0 停止、0 ゾンビ
CPU: 12.3%US、0.9%SY、0.0%NI、85.0%ID、1.5%WA、0.0%HI、0.2%SI、0.0%ST
Mem: 合計3920396k、使用済み3448376k、空き472020k、バッファー
スワップ14752k: 8388604k合計、413608k中、7974996k空き、1781800kキャッシュ
PID USER PR NI VIRTRES SHR S %CPU %MEM TIME+ COMMAND
22674 RABBITMQ 20 0 3.4G 3.7G 2040 S 2 87.9 225:09.39 beam.smp
16302 service 20 0 2975m 1.1g 9232 S 2 2.4 561:18.54 java
ディスク領域の使用率が高い、または非常に重要であることを警告するオートコール。
管理サーバーのルート パーティションが使用可能な領域の90%に達すると、次のようにコール
ホームコールが表示されます。
<ID>0x8a4a31fb</ID>
<name>SMS_PARTITION_HIGH_CAPACITY</name>
<serverity> エラー </重大度>
<customerRCA>管理サーバーのパーティションが高容量に達しました。</customerRCA >
<name>SMS_PARTITION_HIGH_CAPACITY</name>
<serverity> エラー </重大度>
<customerRCA>管理サーバーのパーティションが高容量に達しました。</customerRCA >
ルート パーティションがいっぱいになると、次のオートコールが表示されます。
<ID>0x8a4a61fa</ID>
<name>SMS_PARTITION_CRITICAL_CAPACITY</name>
<serverity> エラー </severity>
<customerRCA>管理サーバーのパーティションが重大な容量しきい値を超えました。</customerRCA>
大量のディスク領域がrabbitmqによって使用されています。
service@ManagementServer:/var/lib/rabbitmq/mnesia/rabbit@localhost # du -shx *
4.0K cluster_nodes.config
4.0K DECISION_TAB.LOG
4.0K最新。LOG
32K msg_store_persistent
14G msg_store_transient <<<<
4.0K nodes_running_at_shutdown
408Mキュー
4.0K rabbit_durable_exchange。DCD
4.0K rabbit_durable_queue。DCD
4.0K rabbit_durable_queue。DCL
4.0K rabbit_durable_route。DCD
4.0K rabbit_runtime_parameters。DCD
8.0K rabbit_runtime_parameters。DCL
4.0K rabbit_serial
4.0K rabbit_user。DCD
4.0K rabbit_user_permission。DCD
4.0K rabbit_vhost。DCD
service@ManagementServer:/var/lib/rabbitmq/mnesia/rabbit@localhost # df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sda5 20G 19G 692K 100% / <<<<
udev 1.9G 196K 1.9G 1% /dev
tmpfs 1.9G 0 1.9G 0% /dev/shm
/dev/sda1 504M 60M 420M 13% /boot
/dev/sda7 16G 4.1G 11G 27% /var/log
/dev/sda8 44G 5.0G 37G 13% /diag
/dev/sda9 9.9G 151M 9.2G 2% /data
service@ManagementServer:/var/lib/rabbitmq/mnesia/rabbit@localhost#ls-lah msg_store_transient/ |head
total 14G
drwxr - x--- 1 rabbitmq rabbitmq 12K 11月13日11:14 .
drwxr - x--- 1 rabbitmq rabbitmq 734 11月13日15:03 ..
-rw-r----- 1 rabbitmq rabbitmq 15M 11月 6 05:51 0.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月13日05:19 1000.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月 13 05:21 1001.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M Nov 13 05:22 1002.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月 13 05:23 1003.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月13日05:25 1004.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月13日05:30 1005.rdq
4.0K cluster_nodes.config
4.0K DECISION_TAB.LOG
4.0K最新。LOG
32K msg_store_persistent
14G msg_store_transient <<<<
4.0K nodes_running_at_shutdown
408Mキュー
4.0K rabbit_durable_exchange。DCD
4.0K rabbit_durable_queue。DCD
4.0K rabbit_durable_queue。DCL
4.0K rabbit_durable_route。DCD
4.0K rabbit_runtime_parameters。DCD
8.0K rabbit_runtime_parameters。DCL
4.0K rabbit_serial
4.0K rabbit_user。DCD
4.0K rabbit_user_permission。DCD
4.0K rabbit_vhost。DCD
service@ManagementServer:/var/lib/rabbitmq/mnesia/rabbit@localhost # df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sda5 20G 19G 692K 100% / <<<<
udev 1.9G 196K 1.9G 1% /dev
tmpfs 1.9G 0 1.9G 0% /dev/shm
/dev/sda1 504M 60M 420M 13% /boot
/dev/sda7 16G 4.1G 11G 27% /var/log
/dev/sda8 44G 5.0G 37G 13% /diag
/dev/sda9 9.9G 151M 9.2G 2% /data
service@ManagementServer:/var/lib/rabbitmq/mnesia/rabbit@localhost#ls-lah msg_store_transient/ |head
total 14G
drwxr - x--- 1 rabbitmq rabbitmq 12K 11月13日11:14 .
drwxr - x--- 1 rabbitmq rabbitmq 734 11月13日15:03 ..
-rw-r----- 1 rabbitmq rabbitmq 15M 11月 6 05:51 0.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月13日05:19 1000.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月 13 05:21 1001.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M Nov 13 05:22 1002.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月 13 05:23 1003.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月13日05:25 1004.rdq
-rw-r----- 1 rabbitmq rabbitmq 17M 11月13日05:30 1005.rdq
症状4:
外部メッセージ待ち行列に多数のメッセージがある。
service@sms-bali-2: ~>sudo rabbitmqctl list_queues
Listing queues ...
aliveness-test 0
queue.vplex.external 1749909 <<<<<
queue.vplex.ndu.events 0
sms_internal 0
...完成です。
Listing queues ...
aliveness-test 0
queue.vplex.external 1749909 <<<<<
queue.vplex.ndu.events 0
sms_internal 0
...完成です。
Cause
- RabbitMQは、イベントが消費されるか、メモリ消費量のしきい値に達するまで、すべてのイベントを保持しようとします。
- VPLEXの場合、現在、queue.vplex.externalキューのデフォルト コンシューマーはありません。
- オフのままにしておくと、キューのサイズが非常に大きくなる可能性があります。
- メモリ消費量が20%に達すると、RabbitMQはキューをディスクに書き込み、ディスクはルートディスク領域を使用します。
Resolution
回避策1:
管理サーバーから、次のコマンドを使用してrabbitmqサーバーを再起動します。
sudoサービスrabbitmq-サーバーの再起動
出力例：
service@ManagementServer:~>
rabbitmq-server.
rabbitmq-serverを再起動します。SUCCESS
sudo service rabbitmq-server restartservice@ManagementServer:~>
対処方法2:
sudo shutdown r nowを実行します
出力例：
メモ:
その後、「サーバーが予期せずネットワーク接続を終了しました」というPuTTYの致命的なエラー メッセージがポップアップ表示されます
恒久的修正:
この問題はGeoSynchrony 5.5以降で対処されました。
管理サーバーから、次のコマンドを使用してrabbitmqサーバーを再起動します。
sudoサービスrabbitmq-サーバーの再起動
出力例：
service@ManagementServer:~>
rabbitmq-server.
rabbitmq-serverを再起動します。SUCCESS
sudo service rabbitmq-server restartservice@ManagementServer:~>
対処方法2:
管理サーバーから、次のコマンドを使用して管理サーバーを再起動します。
sudo shutdown r nowを実行します
出力例：
service@ManagementServer:~>sudo shutdown -r now
Broadcast message from root (pts/0) (Mon Mar 5 19:33:18 2018):
The system is going down for reboot NOW!
Broadcast message from root (pts/0) (Mon Mar 5 19:33:18 2018):
The system is going down for reboot NOW!
メモ:
その後、「サーバーが予期せずネットワーク接続を終了しました」というPuTTYの致命的なエラー メッセージがポップアップ表示されます
恒久的修正:
この問題はGeoSynchrony 5.5以降で対処されました。
Affected Products
VPLEX SeriesProducts
VPLEX for All Flash, VPLEX GeoSynchrony, VPLEX Series, VPLEX VS1, VPLEX VS2Article Properties
Article Number: 000170841
Article Type: Solution
Last Modified: 20 Nov 2020
Version: 2
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.