Isilon: пара одноранговых узлов DE Gen6 генерирует события и сообщения консоли, указывающие на проблемы с каналом NTB

Пара одноранговых узлов Gen6 DE (H400, A200, A2000) иногда может начать генерировать сообщения об ошибках, указывающие на проблемы с их каналом NTB. Ошибки могут включать повторяющиеся сообщения «link up/down» и ошибки согласования скорости соединения, например:

mnv0: HW link down event
mnv0: HW link up event
mnv0: Failed to negotiate PCIe lane speed; expected 3 lane speed, got 2.
mnv0: transport link up
mnv0: peer up

Кроме того, в журналах и/или консоли ссылка NTB может отображаться как неработающая и не загружается. По-видимому, существует несколько возможных причин этой проблемы, некоторые из которых все еще расследуются. Эта проблема может возникнуть, если один или оба затронутых узла были недавно перемещены в другой разъем корпуса. Это также может применяться, если их вычислительный модуль был недавно заменен. Эта проблема не затрагивает узлы EP (F800, H600, H500).

Одноранговые узлы обмениваются данными друг с другом по специальному каналу связи, называемому непрозрачным мостом (NTB), встроенному в распределительную плату шасси. В нормальном режиме оба узла в одноранговой паре должны иметь разные значения PPD, чтобы иметь возможность взаимодействовать друг с другом через NTB. Значения PPD назначаются на основе идентификатора разъема узла в корпусе. Эта проблема возникала, когда BIOS сохраняла старый идентификатор разъема, а не обнаруживала новый после перемещения узла или вычислительного модуля. Это может привести к неправильной установке значения PPD, что приведет к конфликту, который не позволит узлам установить канал NTB.

Выполните следующую команду на обоих узлах в затронутой одноранговой паре, чтобы проверить, применима ли проблема , описанная в этой статье базы знаний:

# sysctl dev.ntb_hw.0.debug_info.ppd

Каждый узел отвечает одним из следующих сообщений:

dev.ntb_hw.0.debug_info.ppd: 73

Или

dev.ntb_hw.0.debug_info.ppd: 93

• Если один узел в паре отвечает 73, а другой — 93, проблема, описанная в этой статье базы знаний, не влияет на эти узлы.
  Обратитесь в службу технической поддержки Isilon для получения дополнительной помощи.

• Если оба узла отвечают с одинаковым номером, 73 или 93, то они затронуты проблемой, описанной в этой статье базы знаний. Эта проблема устранена в обновленной микропрограмме узла в пакете Node Firmware Package 10.1.6 и более поздних версий, а также в исправлении кода в OneFS 8.1.0.4 и более поздних версиях. Хотя каждое обновление устраняет проблему отдельно, оба выпуска содержат другие важные исправления, поэтому рекомендуется установить оба обновления.