PowerEdge: Що таке самовідновлення DDR4 з масштабованими процесорами Intel Xeon

Постійно вдосконалюються та вдосконалюються BIOS Dell PowerEdge для покращення повідомлень пам'яті, обробки помилок і «самовідновлення», які відбуваються після перезавантаження сервера. Це уникає потреби у запланованому ремонтному вікні або присутності на місці для заміни DDR4 пам'яті DIMM, який фіксував події помилок.

Існує два основних покращення BIOS, пов'язані з пам'яттю, які були реалізовані для серверів PowerEdge з DDR4 на BIOS версії 2.1.x і новішою. Ці покращення змінюють рекомендовані кроки або дії, які слід виконати, якщо трапляються події пам'яті і реєструються в журналі LifeCycle.

1. Покращення перенавчання пам'яті

Перезавантаження пам'яті, яке відбувається під час завантаження (на ранніх етапах налаштування пам'яті), оптимізує таймінг сигналу та запас для кожного DIMM/слота для найкращого доступу. Характеристики таймінгу сигналу пам'яті та маржування DIMM можуть змінюватися з часом з кількох причин:

• Зміни в конфігурації серверної пам'яті
• Зміни в BIOS (Memory Reference Code - MRC)
• Різні робочі температури сервера або DIMM
• Загальний вік DIMM

Раніше виявлення оновлень BIOS або змін у конфігурації пам'яті призводили до повторного навчання пам'яті під час наступного завантаження. Починаючи з BIOS 2.1.x, були додані додаткові «тригери» помилок пам'яті, які можна виправити та не виправляти, для запланованого перенавчання:

Warning - MEM0701 - "Correctable memory error rate exceeded for DIMM_XX."
Critical - MEM0702 - "Correctable memory error rate exceeded for DIMM_XX."
Critical - MEM0005 - "Persistent correctable memory error limit reached for a memory device at location XX."

Будь-яка з цих помилок, що фіксується в журналах SEL або Lifecycle, призводить до запланування перенавчання пам'яті на наступне перезавантаження (тепле чи холодне). BIOS автоматично примушує холодне перезавантаження незалежно від того, що було запущено.

Critical - MEM0001 - "Multi-bit memory errors detected on memory device at location DIMM_XX."

Ця багатобітна помилка може призвести до перезавантаження сервера через фатальну помилку, якщо операційна система не зможе її обробити. Перезавантаження пам'яті відбувається автоматично під час цього завантаження. Якщо багатобітна помилка виникає в некритичній пам'яті, яку може обробляти ця операційна система, необхідно запланувати перезавантаження.

Перенавчання пам'яті під час POST може «самовідновити» несправний DIMM і відповідний слот шляхом оптимізації таймінгу та маргінгу сигналу. Заміна DIMM для цих помилок не потрібна, якщо не вдасться перезавантаження пам'яті (UEFI0106) під час завантаження або ці ж самі помилки не повторюються.
 

2. Після ремонту посилки (PPR)

Друге «самозцілююче» покращення пам'яті — це PPR. PPR відновлює несправну адресу пам'яті, вимикаючи локацію або адресу на апаратному рівні, що дозволяє використовувати вільний рядок пам'яті. Точна кількість доступних рядків вільної пам'яті залежить від DRAM-пристрою та розміру DIMM.

Раніше ця функціональність обмежувалася лише виробничим процесом. Як і в згаданих раніше покращеннях перезавантаження пам'яті, існують певні виправні помилки пам'яті, через які PPR планується на певний слот DIMM для наступного перезавантаження (теплого чи холодного). BIOS автоматично примушує холодне перезавантаження незалежно від того, що було запущено. Оскільки операція PPR планується на конкретному слоті DIMM, НЕ змінюйте розташування слотів DIMM, доки не буде виконано операцію PPR. Приклади помилок:

Warning - MEM0701- "Correctable memory error rate exceeded for DIMM_XX."
Critical - MEM0702 - "Correctable memory error rate exceeded for DIMM_XX."
Critical - MEM0005 - "Persistent correctable memory error limit reached for a memory device at location XX."

Будь-яка з цих подій у журналах призводить до того, що PPR планується на наступне перезавантаження (тепле або холодне) на початку фази конфігурації пам'яті

Після перезавантаження переконайтеся, що операція PPR була успішною. Приклад успішної операції PPR схожий на:

MEM9060 - "The Post Package Repair operation is successfully completed on the Dual In-line Memory Module (DIMM) device that was failing earlier."

Заміна DIMM для цих виправних помилок пам'яті не потрібна, якщо тільки не використовується операція PPR. Приклад невдалого критичного повідомлення PPR:

UEFI0278 - "Unable to complete the Post Package Repair (PPR) operation because of an issue in the DIMM memory slot X."

Нещодавно опублікований Whitepaper (версія 1.0), що описує функції надійності, доступності та сервісної (RAS) пам'яті Dell PowerEdge, який описує різні функції та можливості RAS, доступні на серверах PowerEdge — Memory Errors та Dell PowerEdge YX4X Server Memory RAS Features.

Оновлено 24 квітня 2020 року

Dell продовжує вдосконалювати наші можливості «самозцілення». У наступному розділі наведено оновлення та покращення, пов'язані з різними версіями BIOS.

BIOS 2.1.x — Початкова публікація статті про можливості «самовідновлення», які доступні, починаючи з BIOS 2.1.6 і вище, включаючи приклади повідомлень про помилки та рекомендовані дії.

BIOS 2.4.x та новіші зміни (грудень 2019)

• MEM0702 (Коефіцієнт коригованої помилки перевищено...) - Повідомлення оновлено з критичного рівня на попередження. З оновленням рекомендованих дій для перезавантаження сервера, щоб дозволити «самозцілення» — наприклад, після ремонту пакета.
  • У грудні 2019 року або новіші iDRAC також мають бути встановлені для отримання оновленого повідомлення
  • Рекомендовані дії: Перезавантажте сервер, щоб дозволити запустити PPR
• MEM9060 - Опис повідомлення оновлено, щоб вказати, що «самозцілення» було успішно завершено

BIOS 2.5.x та новіші зміни (лютий 2020)

• Було додано опцію BIOS «Коригуване журналування помилок», яка дозволяла клієнтам вимикати всі логування життєвого циклу або SEL, пов'язані з виправляними помилками. Усі функції «самовідновлення» продовжують працювати — наприклад, PPR і перенавчання пам'яті все ще плануються і запускаються під час наступного перезавантаження (на початку процесу налаштування пам'яті).
• Додавання помилок MEM08xx для RDIMM і LRDIMM, замінюючи існуючі повідомлення про помилки та дії. Існуючі повідомлення про помилки все ще використовуються для платформ, які не підтримують можливості «самовідновлення».
  • Для логування нових повідомлень потрібен iDRAC у лютому 2020 року або новіше.

• MEM0802 - Замінено MEM0702 - рівень коригованої помилки перевищено
  • Рекомендовані дії: Перезавантажте сервер, щоб дозволити запустити PPR. Підтвердити, що PPR був успішним (MEM0802)
• MEM0804 - Замінено MEM9060 вказує на успішність PPR. Тепер включає розташування слотів DIMM, яке запускало PPR
  • Рекомендовані дії: Жодної, ця подія свідчить про «самовідновлення», заміна DIMM не потрібна.
• MEM0805 - Замінено UEFI0278 що вказує на невдалий PPR
  • Рекомендовані дії: Замініть несправний DIMM

Оновлено 10 липня 2020 року

BIOS 2.7.x та новіші зміни (блок BIOS липня 2020 року — орієнтований на середину липня для веб-публікацій)

• MEM8000 (вимкнено кориговане журналування помилок) — починаючи з BIOS ~2.0.x, інженерія Dell внесла зміну в BIOS для підвищення частоти виправляльного виявлення помилок, що може вплинути на продуктивність. Ця зміна призвела до зростання кількості MEM8000 подій, які не були підтверджені результатами аналізу відмов DIMM. Починаючи з BIOS 2.7.x, є дві зміни, пов'язані з MEM8000. Перша полягає в тому, що сигналізація події MEM8000 була змінена. По-друге, BIOS планує самовідновлення (PPR) для наступного перезавантаження. Повідомлення iDRAC ще не оновлюються для відображення нових дій.
  • Рекомендовані дії: Перезавантажте сервер, щоб дозволити запустити самолікування/PPR. Підтверджіть, що PPR був успішним (MEM0804).
• MEM0001 (Невиправна помилка) — призводить до запланування на наступне перезавантаження (PPR). Повідомлення iDRAC ще не оновлюються для відображення нових дій.
  • Рекомендовані дії: Не потрібно, якщо MEM0001 пов'язаний із критичною сторінкою, яку операційна система не може відновити — це все одно фатальна помилка, що призводить до перезавантаження. Якщо MEM0001 пов'язаний із некритичною сторінкою, з якої Операційна Система може відновитися, перезавантаження має бути заплановане на всі самовідновлювані процеси (PPR). Підтверджіть, що PPR був успішним (MEM0804).

ОНОВЛЕНО 13 січня 2021 року

BIOS 2.8.2 та новіші зміни (блок BIOS, вересень 2020)

• MEM9072 (Невиправна помилка, виявлена процесом очищення патруля пам'яті — сторінка не використовується або не використовується) — Призводить до запланування самовідновлення (PPR) на наступне перезавантаження. Повідомлення iDRAC ще не оновлюються для відображення нових дій.
  • Рекомендовані дії: Заплануйте перезапуск незабаром. Затримка перезавантаження може призвести до поглинання сторінки, що призведе до MEM0001 помилки, яка може призвести до перезавантаження. Під час цього перезавантаження запускається система самовідновлення пам'яті (PPR). Підтверджіть, що PPR був успішним (MEM0804).

Оцінюються додаткові покращення функцій RAS для включення в майбутні оновлення BIOS.

Ця стаття оновлюється у міру появи нової інформації.


Завантаження та драйвери: Драйвери та завантаження