NetWorker:NVP vProxyのVMバックアップとリストアのパフォーマンスとスループットのトラブルシューティング

Summary: この記事では、NetWorker VMware Protection (NVP) vProxyソリューションを使用する場合の仮想マシン(VM)のバックアップまたはリストアのパフォーマンスの問題をトラブルシューティングする診断アプローチを定義します。

This article applies to This article does not apply to This article is not tied to any specific product. Not all product versions are identified in this article.
Check out other resources

Instructions

パフォーマンス関連の問題には多くのコンポーネントが関係しており、パフォーマンス関連の質問に対する回答を決定するには、問題の範囲と環境を理解することが重要です。 

考慮すべき点： 

  • 適用範囲: 問題は、1つのVM、VMのバッチ、またはすべてのVMに固有のものですか? 問題が発生しているVMと、問題が発生していないVMの間に違いがあるか(例:場所、構成、サイズなど)?
  • vProxyのバージョン管理: 最適化されたVMwareおよびData Domainライブラリーを確実に使用するために、サポートされている最新バージョンのvProxyが使用されていることを確認します。
  • 互換性要件
  • セッション情報
    • バックアップまたはリストア転送モード:
      • vProxyアプライアンスは、HotAddおよびネットワーク ブロック デバイス(NBD)転送モードをサポートします。
      • HotAddおよびNBDセッション構成は、[vProxyプロパティ]で定義します。NetWorker管理コンソール(NMC) >デバイス>VMwareプロキシ
      • HotAddは、vProxyをVMwareデータストアおよびVMディスク ファイルに直接接続します。
      • NBDはESXi管理ネットワークを経由するため、速度が遅くなることが予想されます。これにより、VMwareネットワークで輻輳が発生する可能性があります。 
      • 使用されるデフォルトの方法は HotAdd です。ただし、一部の構成ではHotAddを実行できません。HotAdd/NBDの詳細については、 NetWorker VMware統合ガイドを参照してください。
      • VMのバックアップ/リストア セッション(詳細は後述)には、セッションで使用された転送モードが表示されます。
    • バックアップ レベル:バックアップがレベル フルとして実行されている場合は、増分のスケジュール設定を検討してください。すべてのVMバックアップは、仮想統合フルを作成するData Domainに対して実行されます。つまり、すべての増分バックアップはDDシステム上の新しいフル バックアップとして扱われ、「無期限増分」がサポートされます。コンプライアンスのために必要でない限り、レベル フル バックアップをスケジュールするDellの要件はありません。これは、可能な限り慎重に行う必要があります。 
    • バックアップまたはリストア セッションの数:
    • バックアップの最適化モード
      • VMware保護グループは、 パフォーマンス と 容量の2つのバックアップをサポートします。この設定は、NMCのグループ プロパティの[保護>グループ]にあります。
      • Optimized for Capacity モード(デフォルト)では、可変サイズの区分化が使用されます。重複排除率が高いため、データ処理のオーバーヘッドが増加しますが、Data Domainシステムで消費される容量は削減されます。
      • Optimized for Performance は、仮想マシンの増分バックアップがCBT(変更ブロック追跡)を使用してData Domainシステムにデータをレプリケートする場合のパフォーマンスを向上させます。また、大容量のVMware仮想マシン ディスク(VMDK)ファイルをバックアップする場合に効果的です。パフォーマンス モードでは、Data Domainデバイスで追加の領域が使用されます（約20%）。ただし、インスタント アクセス リストアでは、ランダムなI/Oパフォーマンスが大幅に向上します。
  • Device Information（デバイス情報）
    • Data Domain：
      • Data Domainは物理Data Domainか、Data Domain Virtual Edition (DDVE)か
        • DDVEの導入タイプは、VMware ESXiホスト型とクラウド ホスト型のうちどちらですか?
      • Data Domainモデルとオペレーティング システムのバージョン
      • Data DomainはターゲットvCenterに近接していますか? 同じデータセンター内にあるのか、またはトラフィックはインターネット/WAN上を移動しているのか。
        • 関連するホスト(vCenter、vProxy、Data Domain)間にパケット ロスまたは高レイテンシー(> = 50ミリ秒)がある場合、バックアップとリストアのパフォーマンスに影響する可能性があります。
  • クラウド: たとえば、環境内で使用されているクラウド コンポーネントはありますか。VMware vCenter、Data Domainなど?
    • クラウド コンポーネントは同じリージョン内にあるか、またはデータはリージョン間を移動しているか。 
    • 異なるインフラストラクチャを通過するトラフィックはあるか。たとえば、物理環境からクラウド環境、従来のVMware環境からクラウド環境などです。 
    • AzureでのDDVEについては、Azure管理ポータルから次の項目を確認します。
      • DDVE VMに移動し、[ Overview ]タブで [Size]を確認します。これにより、Azure VM のコンピューティング リソース層が定義されます。仮想マシンのサイズの概要 - Azure Virtual Machines |Microsoft Learn このハイパーリンクをクリックすると、デル・テクノロジーズ以外のWebサイトにアクセスします。
      • [ Overview ]タブで、下にスクロールして[ Disk]をクリックします。ストレージ タイプ、サイズ、最大IOPS、最大スループット(MB/秒)を確認します。プレミアムSSDは、標準HDDよりも優れたパフォーマンスを発揮することが期待されます。
        メモ: NetWorker操作のスループットがVMの 最大スループット を超えることは期待できません。
メモ: NetWorkerバックアップ管理者は、クラウド プロバイダーのストレージとネットワーク スループットに関するドキュメントを確認する必要があります。場合によっては、バックアップ管理者がクラウド プロバイダー ベンダーのサポート チームと連携する必要がある場合があります。
 
  • 場所: Data DomainとvCenterは同じデータ センターにありますか?またはバックアップ/リカバリー セッションはインターネット経由で実行されますか?
  • 接続性とレイテンシー: 関連するホスト(vCenter、vProxy、Data Domain)間にパケット ロスまたは高レイテンシー(> = 50ミリ秒)がある場合は、バックアップとリストアのパフォーマンスに影響する可能性があります。
メモ: その他の考慮事項を考慮する必要があります。ただし、上記のものは重要です。

VMバックアップ2

  1. NetWorkerサーバーで入力ファイルを作成します（例：vmperf）2. vmperf)
  2. 入力ファイルに次の詳細を入力します。
. type: save job; vm_name: VM_NAME
sh vm_name; job output; start time; end time; job log file
p
VM_NAMEを影響を受けるVMの名前に置き換えます。この情報は、以下から入手できます。 mminfo -kot の出力に含まれる最も便利なコマンドです。
  1. オプティカルディスクドライブの jobquery ジョブ クエリーと入力ファイルを使用して、ジョブの開始時刻と終了時刻、バックアップ セッション ログ情報に関する詳細を収集できます。
[root@nwserver ~]# jobquery -i vmperf
Current query set
                    end time: 1654567313;
                job log file: \
/nsr/logs/policy/Gold/VMware/353252-winclient01-2022-6-6-19-1-53.log;
                  job output: Backup completed successfully.;
                  start time: 1654567245;
                     vm_name: winclient01;
end time: 1654480913;
                job log file: \
/nsr/logs/policy/Gold/VMware/353027-winclient01-2022-6-5-19-1-53.log;
                  job output: Backup completed successfully.;
                  start time: 1654480845;

                     vm_name: winclient01;
end time: 1654394509;
                job log file: \
/nsr/logs/policy/Gold/VMware/352801-winclient01-2022-6-4-19-1-47.log;
                  job output: Backup completed successfully.;
                  start time: 1654394446;
                     vm_name: winclient01;
  1. 出力される時間はUNIX時間ですが、次のように変換できます。 
date -d@UNIX_TIME

例:

[root@nwserver ~]# date -d@1654394446
Sat Jun  4 19:00:46 PDT 2022
[root@nwserver ~]# date -d@1654394509
Sat Jun  4 19:01:49 PDT 2022
  1. 実行時間が長いバックアップの場合は、ジョブ ログ ファイルでスループットの詳細を確認します。
[root@nwserver ~]# cat /nsr/logs/policy/Gold/VMware/352801-winclient01-2022-6-4-19-1-47.log | grep "DiskStats"
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Disk Label    |  Mode  | Bytes Moved |  Read Rate   |  Write Rate  |     Overhead  |   VDDK Wait   |   Total Time  | VM MORef  | VM Name
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Hard disk 1   | hotadd |      94 MiB |     17 MiB/s |    103 MiB/s |       0:00:17 |       0:00:16 |       0:00:56 | vm-5001   | winclient01
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Total         |        |      94 MiB |     17 MiB/s |    103 MiB/s |       0:00:17 |       0:00:16 |       0:00:56 | vm-5001   | winclient01
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: Generate stats in CSV format for friendly import to spreadsheet.
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: VM MORef,VM Name,Disk Label,Mode,Bytes Moved,Total Time (sec),Overhead (sec),VDDK Wait (sec),Read Rate (b/s),Write Rate (b/s)
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: vm-5001,winclient01,Hard disk 1,hotadd,98369536,56,17,17,17673109,107196400
バックアップに通常よりも時間がかかる日の場合、全体の書き込み速度は、他のバックアップ セッションで見られる平均よりも低くなります。
 
  1. 特定のVMのポリシー ログは、次のコマンドを実行して確認できます。
cat /nsr/policy/POLICY_NAME/WORKFLOW_NAME/*VM_NAME*.log | grep DiskStats
例:
[root@nwserver ~]# cat /nsr/logs/policy/Gold/VMware/*winclient01*.log | grep "DiskStats"
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Disk Label    |  Mode  | Bytes Moved |  Read Rate   |  Write Rate  |     Overhead  |   VDDK Wait   |   Total Time  | VM MORef  | VM Name
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Hard disk 1   | hotadd |      94 MiB |     17 MiB/s |    103 MiB/s |       0:00:17 |       0:00:16 |       0:00:56 | vm-5001   | winclient01
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Total         |        |      94 MiB |     17 MiB/s |    103 MiB/s |       0:00:17 |       0:00:16 |       0:00:56 | vm-5001   | winclient01
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: Generate stats in CSV format for friendly import to spreadsheet.
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: VM MORef,VM Name,Disk Label,Mode,Bytes Moved,Total Time (sec),Overhead (sec),VDDK Wait (sec),Read Rate (b/s),Write Rate (b/s)
2022-06-05T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: vm-5001,winclient01,Hard disk 1,hotadd,98369536,56,17,17,17673109,107196400
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Disk Label    |  Mode  | Bytes Moved |  Read Rate   |  Write Rate  |     Overhead  |   VDDK Wait   |   Total Time  | VM MORef  | VM Name
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Hard disk 1   | hotadd |      95 MiB |     16 MiB/s |    119 MiB/s |       0:00:17 |       0:00:16 |       0:00:56 | vm-5001   | winclient01
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: Total         |        |      95 MiB |     16 MiB/s |    119 MiB/s |       0:00:17 |       0:00:16 |       0:00:56 | vm-5001   | winclient01
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: Generate stats in CSV format for friendly import to spreadsheet.
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: VM MORef,VM Name,Disk Label,Mode,Bytes Moved,Total Time (sec),Overhead (sec),VDDK Wait (sec),Read Rate (b/s),Write Rate (b/s)
2022-06-06T02:01:48Z INFO:   [@(#) Build number: 95] DiskStats: CSV: vm-5001,winclient01,Hard disk 1,hotadd,99221504,57,17,17,16272803,124243462
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: Disk Label    |  Mode  | Bytes Moved |  Read Rate   |  Write Rate  |     Overhead  |   VDDK Wait   |   Total Time  | VM MORef  | VM Name
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: Hard disk 1   | hotadd |      97 MiB |     15 MiB/s |    110 MiB/s |       0:00:16 |       0:00:16 |       0:00:57 | vm-5001   | winclient01
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: Total         |        |      97 MiB |     15 MiB/s |    110 MiB/s |       0:00:16 |       0:00:16 |       0:00:57 | vm-5001   | winclient01
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: CSV: Generate stats in CSV format for friendly import to spreadsheet.
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: CSV: VM MORef,VM Name,Disk Label,Mode,Bytes Moved,Total Time (sec),Overhead (sec),VDDK Wait (sec),Read Rate (b/s),Write Rate (b/s)
2022-06-07T02:01:49Z INFO:   [@(#) Build number: 95] DiskStats: CSV: vm-5
メモ: ポリシー ログは、 jobsdb デフォルト値は72時間です。次に、 jobsdb ウィンドウが関連するポリシーログを渡し、 jobquery エントリは削除されます。ただし、vProxyアプライアンスは、VMバックアップ セッション ログをローカルの /opt/emc/vproxy/runtime/logs/recycle/vbackupd/。

VMのリストア -からへ

進行中のリストアの場合、[ Recover ]タブの[Rate]列にスループットが表示されます。

NetWorkerの［Recover］メニュー

リストア ジョブ セッションが完了すると、次の場所からリストア ログを確認できます。

  • NetWorker管理コンソール:保存されたリカバリー セッションを開きます。ログ ウィンドウには、ディスク上のスループットの詳細が表示されます。リカバリー ログは、以下の対象となります。 jobsdb 保存期間(デフォルトは72時間)。この時間が経過すると、リカバリ セッション ログはNetWorkerサーバから削除されますが、vProxyアプライアンスには引き続き存在します。
  • NetWorkerサーバー：
    • Linux： /nsr/logs/recover/RecoverName.log
    • Windows： C:\Program Files\EMC NetWorker\nsr\logs\recover\RecoverName.log
    • リカバリー ログは、以下の対象となります。 jobsdb デフォルト値は72時間です。この時間が経過すると、リカバリ セッション ログはNetWorkerサーバから削除されますが、vProxyアプライアンスには引き続き存在します。
  • vProxyアプライアンス:完了/失敗したVMリカバリー セッションのログは、vProxyアプライアンスの /opt/emc/vproxy/runtime/logs/recycle/vrecoverd/date/recover_session_id.log
上記のすべてのログには、リカバリーされたセッションのスループットに関するディスクごとの同様の出力が含まれています。
2022-12-16T16:18:50Z NOTICE: [@(#) Build number: 54] Successfully recovered to a new VM.
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] Disk Label    |  Mode  | Bytes Moved |  Read Rate   |  Write Rate  |     Overhead  |   VDDK Wait   |   Total Time  | VM MORef  | VM Name                      
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] Hard disk 1   | hotadd |      10 GiB |     44 MiB/s |     68 MiB/s |       0:00:17 |        1.4 us |       0:04:25 | vm-12226  | linuxclient01_1              
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] Total         |        |      10 GiB |     44 MiB/s |     68 MiB/s |       0:00:17 |        1.4 us |       0:04:25 | vm-12226  | linuxclient01_1              
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] CSV: Generate stats in CSV format for friendly import to a spreadsheet.
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] CSV: VM MORef,VM Name,Disk Label,Mode,Bytes Moved,Total Time (sec),Overhead (sec),VDDK Wait (sec),Read Rate (b/s),Write Rate (b/s)
2022-12-16T16:18:50Z INFO:   [@(#) Build number: 54] CSV: vm-12226,linuxclient01_1,Hard disk 1,hotadd,10032185344,265,18,0,45138154,71134513
2022-12-16T16:18:50Z NOTICE: [@(#) Build number: 54] Moved 10 GiB at 36 MiB/s. Elapsed Time: 4m31s

vProxyからのパフォーマンス スループットのトラブルシューティング

『オペレーティングシステム』ディスクはオプションなので、同梱されていないコンピューターもあります。 ddpconnchk ツールを使用して、vProxyからDDデバイスへのネットワーク接続とスループットをテストできます。

収集 ddpconnchk:

  1. ダウンロード: ddpconnchk Dell NetWorkerツールのユーティリティー
  2. 『オペレーティングシステム』ディスクはオプションなので、同梱されていないコンピューターもあります。 ddpconnchk.zip には、複数のバージョンの ddpconnchk 使用率コマンド ddpconnchk Data DomainデバイスのDD OSバージョンと一致する、または密接に整合するユーティリティー。
  3. 圧縮パッケージを解凍し、 ddpconnchk_linux_x86_64.tar そのvProxyを削除します。 /home/admin directory。

使い方 ddpconnchk:

  1. ポータルにログインします。 ddpconnchk_linux_x86_64.tar was copied to。adminアカウントを使用してSSH経由でログインします。
  2. rootユーザーに変更します。 sudo su -
  3. 次を抽出します： .tar package tar xvf /home/admin/ddpconnchk_linux_x86_64.tar
  4. 次の権限を設定します。 ddpconnchk: chmod 775 ddpconnchk
  5. テストの例は、vProxyから ddboost に一致。
/ddpconnchk -s DATADOMAIN_HOSTNAME -u ddboost_username -l storage_unit_name -T writeimage -i 1G -n 1
例:
vproxy01:~ # ls -l | grep ddpconnchk
-rwxrwxr-x 1 59899 59899 3688848 May 16  2022 ddpconnchk
-rw-r--r-- 1 59899 59899   12086 May 16  2022 ddpconnchk_README.txt

vproxy01:~ # ./ddpconnchk -s ddve.amer.lan -u sysadmin -p EmcLegato@01 -l linux1 -T writeimage -i 1G -n 1
DDP CLIENT LIBRARY VERSION 7:9:0:0-1010470

SERVER: ddve.amer.lan
---------------------
*** CONNECT SERVER TEST, ddve.amer.lan

DDP Connect Server Test PASSED

*** LIST SUs TEST, ddve.amer.lan
DDLOG: WARN: [68A0:1FBF0F0] ddcl_ddp_get_su(): Deprecated API ddp_get_storage_units_list is used by client
  3 SUs total
List SUs Test PASSED

*** GET SU INFO TEST, ddve.amer.lan/linux1

  5 images total
Get SU Info Test PASSED

*** EXTENDED TEST: WRITE IMAGE, ddve.amer.lan/linux1/1073741824
DDLOG: INFO: [68A0:1FBF0F0] ddcl_new_client_buffers created private pool with 776 DDCL buffers
DDLOG: INFO: [68A0:1FBF0F0] Cleaning up readahead cache do_ra is 1 ra_init is 0
DDLOG: INFO: [68A0:1FBF0F0] vrapid_nfs_connect: ifgroup disabled
DDLOG: INFO: [68A0:1FBF0F0] JOB END  IMAGE_DELETE ip=192.168.7.105 pid=26784 cd=0 enc=off
DDLOG: INFO: [68A0:1FBF0F0] JOB START  IMAGE_WRITE ip=192.168.7.105 pid=26784 cd=0 enc=off linux1/write_000
DDLOG: INFO: [68A0:1FBF0F0] ddcl_ddcp_ctx_init():358 - idx=3408002, detect_markers=1
DDLOG: INFO: [68A0:1FBF0F0] New fingerprint environment.

DDLOG: INFO: [68A0:1FBF0F0] Segmentation: version [9], min [4096], avg [8192], max [12288], mask = [0x0], skip_first [4096], skip_last [0]
DDLOG: INFO: [68A0:1FBF0F0] ddcl_new_client_buffers created private pool with 776 DDCL buffers
DDLOG: INFO: [68A0:1FBF0F0] Allocated read_ctx_pool of size 223488
DDLOG: INFO: [68A0:1FBF0F0] JOB START  IMAGE_READ ip=192.168.7.105 pid=26784 cd=0 enc=off linux1/write_000
Cumulative Write Throughput: 102.40 MB/s
Cumulative Read Throughput: 102.40 MB/s


WRITE IMAGE PASSED
SUCCESS: All tests completed
  • -i 1g 「-i 1g」は、DDRに書き込まれるサイズを指定します。1gは、最大サイズ1 GBのファイルです。
  • -n 1 作成されるファイルの数を決定します。 
  • これらのファイルは一時的なものであり、テスト操作が完了すると削除されます。

Data Domainには複数のネットワーク インターフェイス カード(NIC)があり、vProxyは1 GBの管理NICを使用しています

Data Domainシステム上に複数のNICがあります。管理NICは通常1GBのインターフェイスですが、Data Domainにはデータ移動用の10GBのNICがある場合もあります。

  1. 1GB NICと10GB NICのIPアドレスを特定します。Data Domain管理者は、これを確認する必要があります。
  2. NetWorkerサーバーおよびストレージ ノードで使用されるData Domain/デバイス名に解決されるIPアドレスを確認します。
nslookup DataDomain_hostname
  1. NetWorkerサーバー ストレージ ノード(使用している場合)またはvProxyアプライアンスが1 GBのIPアドレスに解決される場合は、1 GBのIPアドレスを解決するシステムにホスト ファイル エントリーを作成して、Data Domainのホスト名を10 GBのIPアドレスに解決します。
    1. vProxyアプライアンスに変更が加えられた場合は、デーモンを再ロードします
systemctl reload-daemon
systemctl restart <service>
services: vrecoverd, vbackupd, vflrd
  1. バックアップとリストアを再開し、スループットが向上したかどうかを確認します。

Data Domainのパフォーマンス:

Data Domain Boost事前証明書ログ:

  1. NVEへのSSHセッションを開き、管理者として認証します。3.次に、rootに切り替えます。 sudo su -
  2. 次のファイルを作成します。 vi /ddboost_precert.ini 
    precert_enabled=true
num_log_files=4
log_file_size=512
log_file_name=ddboost_precert.log
log_file_dir=/DDLog
ddcl_logs_include=true
ddcl_logs_sev=3
  3. 新しいログ ディレクトリーを作成します。 mkdir /DDLog ; chmod 777 /DDLog
  4. トラブルシューティングしているvProxyエンジンでデバッグを有効にします。 
    vbackupd: /opt/emc/vproxy/bin/vProxy_debug.sh -s -d vbackupd -p ddboost -l debug

vflrd: /opt/emc/vproxy/bin/vProxy_debug.sh -s -d vflrd -p ddboost -l debug

vrecoverd: /opt/emc/vproxy/bin/vProxy_debug.sh -s -d vrecoverd -p ddboost -l debug
  5. バックアップ操作またはリストア操作を実行します。
  6. 事前証明書ログの確認の詳細については、次の記事を参照してください:NetWorker:ddboost_precert.logを使用してIOパフォーマンスを分析する方法
    メモ: precert-io-perf.py は、vProxyに直接コピーして実行できます。このスクリプトは、 /DDLog/ddboost_precert.log ファイルは提供しません。または、 ddboost_precert.log ファイルをvProxyから取り出して実行します precert-io-perf.py 別のシステムから。

Data Domainシステム要件

  1. Data Domainシステムにログインします。 sysadmin.
  2.  DDとvCenter間のパケット ロスまたは高レイテンシーを確認します。 
net ping VCENTER_NAME/IP
メモ: 1 回のテスト実行では、パケット損失や遅延の問題が存在するかどうかを最終的に判断するのに十分なデータは得られません。ネットワーク パフォーマンスは、Data Domainシステムのワークロードに基づいて変動する可能性があります。アクティビティーが最小限の時間帯ではレイテンシーとパケット損失は正常に見えるかもしれませんが、システムが大量のバックアップ、クローン、またはリカバリー トラフィックを処理している場合は、同じメトリックが低下する可能性があります。正確な結果を得るには、Data Domainのピーク使用率の期間を含め、複数回のテストを実行します。
  1. Data Domainパフォーマンスの概要を確認します。 
system show performance
メモ: この出力には、最近のData Domainシステムのパフォーマンス統計が表示されます。これらの統計情報は、問題のバックアップ/リストア操作と重複している場合があります。 
  1. DD Boostの統計情報とエラーを確認します。
ddboost show stats
メモ: ここでは、DD Boostの設定とパフォーマンスの概要について説明します。また、より高いエラー率を観察する関数のエラー数も提供します。疑わしいエラーは、Data Domain サポートが調査する必要があります。
  1. 使用 net iperf Data DomainとvProxy間の転送帯域幅を確認するには、次の手順を実行します。
net iperf client VPROXY_IP_ADDRESS port 9090 interval 2
例:
sysadmin@ddve01# net iperf client 192.168.9.131 port 9090 interval 2
------------------------------------------------------------
Client connecting to 192.168.9.131, TCP port 9090
TCP window size:  256 KByte (default)
------------------------------------------------------------
[  3] local 192.168.9.106 port 45132 connected with 192.168.9.131 port 9090
write failed: Connection reset by peer
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0- 0.0 sec   239 KBytes  1.48 Gbits/s
帯域幅によっては、期待値を正確に判断することはできません。出力に1.48 Gbit/秒と表示されていても、バックアップ/リストアはMB/秒で実行される場合があります。「ローカル」IPを確認し、管理NICまたは10GBデータ リンクが使用されているかどうかを確認します。 
  1. 使用 net iperf Data DomainとvCenter間の転送帯域幅を確認するには、次の手順を実行します。
net iperf client VCENTER_IP_ADDRESS port 443 interval 2
例:
sysadmin@ddve01# net iperf client 192.168.9.111 port 443 interval 2
------------------------------------------------------------
Client connecting to 192.168.9.111, TCP port 443
TCP window size:  256 KByte (default)
------------------------------------------------------------
[  3] local 192.168.9.106 port 37072 connected with 192.168.9.111 port 443
write failed: Broken pipe
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0- 0.0 sec   239 KBytes   147 Mbits/sec
帯域幅によっては、期待値を正確に判断することはできません。出力に2.27 Gbit/秒と表示されていても、バックアップ/リストアはMB/秒で実行される場合があります。「ローカル」IPを確認し、管理NICまたは10GBデータ リンクが使用されているかどうかを確認します。データが間違ったインターフェイスからルーティングされた場合、DD管理者はData Domainの構成を確認する必要があります。Data Domainサポート チケットは、NetWorkerとData Domainのコラボレーション用に開くこともできます。

Additional Information

関連文書:


VMバックアップ ポイント5、拡張:
すべてのディスク統計を収集します vbackupd セッションでは、次の構文を使用します。  

 grep -rnw "DiskStats" /opt/emc/vproxy/runtime/logs/recycle/vbackupd/ | grep -v "0 Bytes\|CSV" | awk '!seen["DiskStats: Disk Label"]++ || $0 !~ /DiskStats: Disk Label/'

または、vProxyからコピーできるファイルにリダイレクトします。

grep -rnw "DiskStats" /opt/emc/vproxy/runtime/logs/recycle/vbackupd/ | grep -v "0 Bytes\|CSV" | awk '!seen["DiskStats: Disk Label"]++ || $0 !~ /DiskStats: Disk Label/' > /tmp/$(hostname)-vbackupStats.txt

例:

nsr-vproxy01:~ # grep -rnw "DiskStats" /opt/emc/vproxy/runtime/logs/recycle/vbackupd/ | grep -v "0 Bytes\|CSV" | awk '!seen["DiskStats: Disk Label"]++ || $0 !~ /DiskStats: Disk Label/'
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-c5300e6c-3da1-42bf-a08b-fe9ec7d9197b.log:644:2026-05-13T01:01:42Z INFO:   [@(#) Build number: 112] DiskStats: Disk Label    |  Mode  | Bytes Moved |  Read Rate   |  Write Rate  |     Overhead  |   VDDK Wait   |   Total Time  | VM MORef  | VM Name
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-c5300e6c-3da1-42bf-a08b-fe9ec7d9197b.log:645:2026-05-13T01:01:42Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-de722843-9e1c-4c3c-8628-06ddb08aaafc.log:679:2026-05-13T01:02:30Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-de722843-9e1c-4c3c-8628-06ddb08aaafc.log:680:2026-05-13T01:02:30Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |       2 GiB |     28 MiB/s |    223 MiB/s |       0:00:22 |       96.6 ms |       0:01:41 | vm-4002   | win-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-de722843-9e1c-4c3c-8628-06ddb08aaafc.log:681:2026-05-13T01:02:30Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |       2 GiB |     28 MiB/s |    223 MiB/s |       0:00:22 |       96.6 ms |       0:01:41 | vm-4002   | win-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-7f086276-c673-441d-b3b1-e5a44fa81ab6.log:661:2026-05-13T01:02:06Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-7f086276-c673-441d-b3b1-e5a44fa81ab6.log:662:2026-05-13T01:02:06Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |     492 MiB |     23 MiB/s |    234 MiB/s |       0:00:20 |       0:00:22 |       0:01:17 | vm-4007   | rhel-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-7f086276-c673-441d-b3b1-e5a44fa81ab6.log:663:2026-05-13T01:02:06Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |     492 MiB |     23 MiB/s |    234 MiB/s |       0:00:20 |       0:00:22 |       0:01:18 | vm-4007   | rhel-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-41054224-c9ea-4a59-a17c-62c006e90440.log:659:2026-05-13T01:01:42Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-41054224-c9ea-4a59-a17c-62c006e90440.log:660:2026-05-13T01:01:42Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |      20 MiB |      4 MiB/s |     79 MiB/s |       0:00:19 |        1.4 us |       0:01:14 | vm-27052  | rhel-client05.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-41054224-c9ea-4a59-a17c-62c006e90440.log:661:2026-05-13T01:01:42Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |      20 MiB |      4 MiB/s |     79 MiB/s |       0:00:19 |        1.4 us |       0:01:14 | vm-27052  | rhel-client05.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260513_1/BackupVmSessions-56a225c8-986d-41b7-a4b6-afaec20bfa75.log:647:2026-05-13T01:01:42Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-84d77435-dd86-4a1a-9c4b-226f7838ca06.log:659:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-84d77435-dd86-4a1a-9c4b-226f7838ca06.log:660:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |      27 MiB |      4 MiB/s |     82 MiB/s |       0:00:18 |      233.2 ms |       0:01:04 | vm-27052  | rhel-client05.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-84d77435-dd86-4a1a-9c4b-226f7838ca06.log:661:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |      27 MiB |      4 MiB/s |     82 MiB/s |       0:00:18 |      233.2 ms |       0:01:04 | vm-27052  | rhel-client05.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-906ac008-32b0-44b9-a5c1-6cda41e99a5e.log:663:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-906ac008-32b0-44b9-a5c1-6cda41e99a5e.log:664:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |      32 MiB |      4 MiB/s |    101 MiB/s |       0:00:20 |        1.1 us |       0:01:13 | vm-4007   | rhel-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-906ac008-32b0-44b9-a5c1-6cda41e99a5e.log:665:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |      32 MiB |      4 MiB/s |    101 MiB/s |       0:00:20 |        1.1 us |       0:01:13 | vm-4007   | rhel-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-05e84c93-a6ca-4608-8497-a022836c79aa.log:646:2026-05-10T01:01:33Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-4771c4ce-df71-4f82-b752-08b040787998.log:682:2026-05-10T01:04:21Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-4771c4ce-df71-4f82-b752-08b040787998.log:683:2026-05-10T01:04:21Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |       5 GiB |     29 MiB/s |    202 MiB/s |       0:00:22 |       0:00:18 |       0:03:29 | vm-4002   | win-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-4771c4ce-df71-4f82-b752-08b040787998.log:684:2026-05-10T01:04:21Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |       5 GiB |     29 MiB/s |    202 MiB/s |       0:00:22 |       0:00:18 |       0:03:29 | vm-4002   | win-client01.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260510_1/BackupVmSessions-ad74a82c-9496-4372-a1e2-015de1b23b1a.log:645:2026-05-10T01:01:56Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260512_1/BackupVmSessions-28e4cc86-15e0-4aaf-b3eb-29a38c78ad5d.log:660:2026-05-12T16:20:10Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260512_1/BackupVmSessions-28e4cc86-15e0-4aaf-b3eb-29a38c78ad5d.log:661:2026-05-12T16:20:10Z INFO:   [@(#) Build number: 112] DiskStats: Hard disk 1   | hotadd |     425 MiB |     15 MiB/s |     74 MiB/s |       0:00:18 |        1.4 us |       0:01:12 | vm-27052  | rhel-client05.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260512_1/BackupVmSessions-28e4cc86-15e0-4aaf-b3eb-29a38c78ad5d.log:662:2026-05-12T16:20:10Z INFO:   [@(#) Build number: 112] DiskStats: Total         |        |     425 MiB |     15 MiB/s |     74 MiB/s |       0:00:18 |        1.4 us |       0:01:12 | vm-27052  | rhel-client05.amer.lan
/opt/emc/vproxy/runtime/logs/recycle/vbackupd/20260512_1/BackupVmSessions-4aa7c842-3c5d-4dc5-8c3d-3677546c46e5.log:645:2026-05-12T01:01:44Z INFO:   [@(#) Build number: 112] DiskStats: ------------- | ------ | ----------- | ------------ | ------------ | ------------- | ------------- | ------------- | --------- | ------------------------------
...
...

上記の出力では、変更率のないディスクは無視され、スキップされます(0バイト)。この出力は、データが見つかったログ ファイルへのフル パスを示し、VMあたりのディスク数も含まれます vmdk。このような情報を使用して、VMごとまたはディスクごとのVMバックアップ パフォーマンスのパターンを確認できます。

実行例 precert-io-perf.py vProxyから:

nsr-vproxy01:~ # chmod +x precert-io-perf.py
nsr-vproxy01:~ # ./precert-io-perf.py
Please enter the full path to the log file: /DDLog/ddboost_precert.log
Do you want to include MB/s for each I/O operation? (yes/no): yes

    Write Durations Summary:

    Total number of write operations: 105
    Average write duration: 0.001515 seconds
    Maximum write duration: 0.020000 seconds (6.25 MB/s)
    Minimum write duration: 0.000001 seconds (62500.00 MB/s)
    Total write time: 0.159050 seconds
    Percentage of total time spent on writes: 0.40%
    Average write throughput: 53.977696 MB/s
    Note: High MB/s values for very short durations indicate efficient operations.


    Read Durations Summary:

    Total number of read operations: 104
    Average read duration: 0.383135 seconds
    Maximum read duration: 17.874000 seconds (0.00 MB/s)
    Minimum read duration: 0.000001 seconds (9.54 MB/s)
    Total read time: 39.846015 seconds
    Percentage of total time spent on reads: 99.60%
    Average read throughput: 0.215375 MB/s
    Note: High MB/s values for very short durations indicate efficient operations.


Top 20 Slowest Write I/O Operations:
1. I/O Number: 48, Duration: 0.020000 seconds, MB/s: 6.25
2. I/O Number: 6, Duration: 0.010000 seconds, MB/s: 0.36
3. I/O Number: 56, Duration: 0.007000 seconds, MB/s: 8.93
4. I/O Number: 80, Duration: 0.006000 seconds, MB/s: 20.83
5. I/O Number: 19, Duration: 0.005000 seconds, MB/s: 1.06
6. I/O Number: 4, Duration: 0.004000 seconds, MB/s: 0.01
7. I/O Number: 8, Duration: 0.004000 seconds, MB/s: 64.57
8. I/O Number: 9, Duration: 0.004000 seconds, MB/s: 64.57
9. I/O Number: 10, Duration: 0.004000 seconds, MB/s: 64.57
10. I/O Number: 12, Duration: 0.004000 seconds, MB/s: 0.01
11. I/O Number: 14, Duration: 0.004000 seconds, MB/s: 0.01
12. I/O Number: 16, Duration: 0.004000 seconds, MB/s: 1.47
13. I/O Number: 84, Duration: 0.004000 seconds, MB/s: 0.01
14. I/O Number: 1, Duration: 0.003000 seconds, MB/s: 1.11
15. I/O Number: 2, Duration: 0.003000 seconds, MB/s: 86.10
16. I/O Number: 3, Duration: 0.003000 seconds, MB/s: 0.90
17. I/O Number: 5, Duration: 0.003000 seconds, MB/s: 1.26
18. I/O Number: 7, Duration: 0.003000 seconds, MB/s: 1.13
19. I/O Number: 13, Duration: 0.003000 seconds, MB/s: 0.73
20. I/O Number: 18, Duration: 0.003000 seconds, MB/s: 0.81

Top 20 Slowest Read I/O Operations:
1. I/O Number: 962, Duration: 17.874000 seconds, MB/s: 0.00
2. I/O Number: 1537, Duration: 11.481000 seconds, MB/s: 0.00
3. I/O Number: 1478, Duration: 1.919000 seconds, MB/s: 0.00
4. I/O Number: 727, Duration: 1.316000 seconds, MB/s: 0.00
5. I/O Number: 601, Duration: 1.223000 seconds, MB/s: 0.00
6. I/O Number: 360, Duration: 0.555000 seconds, MB/s: 0.47
7. I/O Number: 375, Duration: 0.304000 seconds, MB/s: 0.01
8. I/O Number: 450, Duration: 0.302000 seconds, MB/s: 0.01
9. I/O Number: 462, Duration: 0.289000 seconds, MB/s: 0.89
10. I/O Number: 506, Duration: 0.273000 seconds, MB/s: 0.05
11. I/O Number: 426, Duration: 0.269000 seconds, MB/s: 0.01
12. I/O Number: 533, Duration: 0.224000 seconds, MB/s: 0.01
13. I/O Number: 474, Duration: 0.222000 seconds, MB/s: 1.16
14. I/O Number: 560, Duration: 0.202000 seconds, MB/s: 0.13
15. I/O Number: 996, Duration: 0.177000 seconds, MB/s: 5.65
16. I/O Number: 1024, Duration: 0.125000 seconds, MB/s: 0.50
17. I/O Number: 672, Duration: 0.097000 seconds, MB/s: 0.05
18. I/O Number: 992, Duration: 0.097000 seconds, MB/s: 1.29
19. I/O Number: 914, Duration: 0.093000 seconds, MB/s: 0.06
20. I/O Number: 1062, Duration: 0.086000 seconds, MB/s: 0.73
Detailed I/O operations have been logged to io-write.log and io-read.log
nsr-vproxy01:~ #

Affected Products

Data Domain, NetWorker

Products

NetWorker Family
Article Properties
Article Number: 000200394
Article Type: How To
Last Modified: 07 ربيع الأول 1448
Version:  23
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.