H100이 탑재된 PowerEdge XE8640: GPU 성능 문제 - HW 파워 브레이크 속도 저하 - 활성

경우에 따라 GPU 성능이 저하되고 nvsmi-q 로그에 HW Power Brake Slowdown이 Active로 표시될 수 있습니다.

nvidia-smi 및 GPU_burn 로그 출력,

nvsmi-q 로그 출력

    Clocks Throttle Reasons
        Idle                              : Not Active
        Applications Clocks Setting       : Not Active
        SW Power Cap                      : Not Active
        HW Slowdown                       : Active
            HW Thermal Slowdown           : Not Active
            HW Power Brake Slowdown       : Active
        Sync Boost                        : Not Active
        SW Thermal Slowdown               : Not Active
        Display Clock Setting             : Not Active


nvidia-smi --query-gpu=index,timestamp,power.draw,clocks.sm [clocks.sm],clocks.mem,clocks.gr [clocks.gr] --format=csv -l 1 로그 출력

해결 방법: BIOS, CPLD 및 iDRAC를 최신 버전으로 업데이트합니다. 최근 현장 사례에 따르면 CPLD를 버전 1.2.2로, iDRAC를 버전 7.10.30으로 업데이트하여 문제를 해결한 것으로 나타났습니다 

** 스니펫 게시물 업데이트 **

gpu_burn ~ 300k Gflops에서 작동하고 있습니다. nvidia-smi 100% 활용도에서 각 GPU ~700W를 보여줍니다.

nvsmi-q BIOS 업데이트 후 로그 출력.

 Clocks Throttle Reasons
        Idle                              : Active
        Applications Clocks Setting       : Not Active
        SW Power Cap                      : Not Active
        HW Slowdown                       : Not Active
            HW Thermal Slowdown           : Not Active
            HW Power Brake Slowdown       : Not Active
        Sync Boost                        : Not Active
        SW Thermal Slowdown               : Not Active
        Display Clock Setting             : Not Active


nvidia-smi & GPU_burn BIOS 업데이트 후 로그 출력.