Data Domain: прямое подключение к сети между системами защиты данных
Summary: Прямое подключение — это топология сети, в которой две системы Data Domain, PowerProtect Data Domain, IDPA или другие системы защиты данных соединены напрямую через выделенные интерфейсы без промежуточного коммутатора или маршрутизатора. В этой статье описываются требования к сети с прямым подключением, распространенные сценарии развертывания, известные проблемы и методы поиска и устранения неисправностей подключения, маршрутизации, производительности и сбоев, связанных с интерфейсами. ...
Symptoms
- Системы, подключенные напрямую, не могут проверить связь друг с другом.
- Отчеты о репликации
"No route to host",connection failedилиdestination unreachableОшибка - Отображается состояние интерфейса
DOWN,DisconnectedилиNot Connected. Interface Connectivity DownОповещения отправляются:- Скорость соединения будет ниже ожидаемой.
- Пропускная способность во время тестирования ниже ожидаемой.
- Интерфейсы изменяются или периодически теряют возможность подключения.
- Операции репликации MTree, репликации коллекции, резервного копирования, восстановления, переноса или хранения данных завершаются сбоем в сети с прямым подключением.
- Порты прямого подключения переходят в оперативный режим только во время определенных окон в средах Cyber Recovery.
- После настройки новые установленные каналы прямого подключения остаются в автономном режиме.
Cause
- Проблемы с конфигурацией сети
- Интерфейсы, подключенные напрямую, настроены в разных подсетях.
- Неправильные маски подсетей создают проблемы с маршрутизацией.
- Статические маршруты отсутствуют при наличии нескольких сетевых путей.
- Трафик направляется не по пути прямого подключения, а через другой интерфейс.
- Конфигурация подключения-хоста или назначения ссылается на неверный IP-адрес.
- Проблемы с физическим подключением
- Подключены не те физические порты.
- Неисправные кабели, оптические модули, кабели DAC или модули SFP/QSFP.
- Неподдерживаемые или несоответствующие приемопередатчики.
- Сбои автоматического согласования скорости соединения.
- Дефекты микропрограммы или оборудования сетевой платы.
- Проблемы конфигурации интерфейса
- Интерфейс отключен администратором.
- Несоответствие конфигурации соединения.
- Несоответствие значений MTU между конечными точками.
- Неправильная конфигурация veth.
- Неправильно настроенный протокол LACP.
- Поведение при восстановлении в случае кибератак
- Интерфейсы хранилища могут быть намеренно отключены между окнами синхронизации.
- Контексты репликации могут быть отключены автоматизацией Cyber Recovery.
- В случае блокировки хранилища могут возникать оповещения об отключении интерфейса.
- Проблемы, связанные с платформой
- Некоторые комбинации сетевых плат 25 Гбит/с и SFP демонстрируют нестабильность или разрывы интерфейсов в развертываниях с прямым подключением.
- В конфигурациях с прямым подключением FC могут возникать проблемы с топологией или обнаружением инициаторов.
- Неверное имя хоста или неправильная конфигурация репликации могут помешать использованию нескольких путей прямого подключения должным образом.
Resolution
- Проверка уровня 1
Всегда начинайте поиск и устранение неисправностей с физического уровня.
Проверьте:
-
- В обеих системах горят индикаторы каналов связи.
- Правильные интерфейсы соединены кабелями.
- Кабель сертифицирован на согласованную скорость.
- Модули SFP/QSFP подходят для обоих концов.
- Проблема связана с кабелем или сохраняется на порте во время проверки.
- Проверить сопоставление физических портов
При развертывании с прямым подключением не всегда очевидно, какой физический порт сетевой платы на задней панели устройства соответствует интерфейсу, настраиваемому в DDOS. Это особенно часто встречается в системах с несколькими сетевыми платами, платами расширения, связанными интерфейсами или после модернизации аппаратного обеспечения.
Часто возникает, когда администратор считает, что кабель подключен к одному интерфейсу, хотя на самом деле он подключен к другому физическому порту.
Пошаговые инструкции по поиску и устранению неисправностей:
-
- Настройте временные (фиктивные) IP-адреса на нескольких интерфейсах-кандидатах в обеих системах.
- Административное включение интерфейсов.
- Наблюдайте за тем, какие интерфейсы устанавливают несущую и переходят в состояние UP.
- Проверьте физические индикаторы соединения на обоих устройствах.
- Используйте команды состояния интерфейса и оборудования для определения правильного сопоставления портов.
- После определения нужных портов удалите временную конфигурацию и примените необходимые производственные настройки.
Такой подход позволяет быстро устранить неопределенность, связанную с выбором физического порта, и избежать ненужного исследования проблем маршрутизации, репликации, производительности или проблем, связанных с программным обеспечением, когда реальная проблема заключается в простом неправильном сопоставлении кабеля с интерфейсом.
Почему это помогает
Многие проблемы с прямым подключением в конечном итоге сводятся к следующим причинам:
-
- Кабель подключен к неправильной сетевой плате.
- Неверные предположения о сопоставлении интерфейса и порта.
- Несколько сетевых плат с одинаковой маркировкой портов.
- Интерфейс, настроенный в DDOS, не соответствует порту, используемому установщиком.
- Связанные члены соединены не так, как ожидалось.
Подтверждение сопоставления физических портов перед переходом к устранению неполадок более высокого уровня может значительно сократить время, затрачиваемое на изучение маршрутизации, подсети, репликации или поведения Cyber Recovery, когда они не являются фактической корневой причиной.
- Проверка конфигурации сети
Наиболее распространенной проблемой прямого подключения является неправильное разделение на подсети.
Для прямого подключения
-
- Оба интерфейса должны находиться в одной подсети.
- Для выделенных интерфейсов прямого подключения следует использовать подсеть, отдельную от всех остальных интерфейсов.
- Сеть A/30 (
255.255.255.252) рекомендуется, так как он предоставляет только два необходимых адреса хостов и упрощает маршрутизацию.
Пример.
System A: 192.168.100.1/30
System B: 192.168.100.2/30
Преимущества /30:
-
-
- Упрощенный поиск и устранение неисправностей.
- Минимальный ARP-трафик.
- Нет требований к шлюзу по умолчанию.
- Четкая маршрутизация «точка-точка».
-
Если выделенная подсеть не может быть использована:
-
-
- Настройка статического маршрута.
- Убедитесь, что трафик использует нужный интерфейс прямого подключения.
-
- Проверка состояния интерфейса
Убедитесь, что используются следующие интерфейсы:
-
- Включено в обеих системах.
- Назначен правильный IP-адрес.
- Работа с ожидаемой скоростью.
- Настроено с соответствующими значениями MTU.
Интерфейс прямого подключения не может взаимодействовать, если:
-
- Удаленный интерфейс отключен.
- Канал связи не установлен перевозчиком.
- Одна конечная точка настроена неправильно.
- Проверка конфигурации соединения
Если используется несколько кабелей прямого подключения:
-
- Убедитесь, что настройки перемычки совпадают в обеих системах.
- Убедитесь, что интерфейсы-участники принадлежат к правильной связке.
- Проверка конфигурации балансировки нагрузки и агрегирования.
Опыт эксплуатации показал, что после перехода на LACP некоторые среды, в которых обеспечивалась более низкая, чем ожидалось, скорость соединения, была устранена.
Протокол LACP, как правило, является предпочтительным методом соединения, если он поддерживается на обеих конечных точках.
- Понимание поведения при восстановлении в случае кибератак
Развертывания Cyber Recovery часто приводят к проблеме с сетью, хотя на самом деле это ожидаемое поведение.
Приложение Cyber Recovery может:
-
- Отключите интерфейс хранилища.
- Включайте интерфейс только во время синхронизации.
- Отключите контексты репликации после завершения синхронизации.
Это означает следующее.
-
- Производственные системы могут сообщать об этом
InterfaceConnectivityDownПредупреждение: - Сбои проверки связи могут происходить вне окон синхронизации.
- Репликация может сообщать
"No route to host."
- Производственные системы могут сообщать об этом
Перед эскалацией выполните следующие действия.
-
- Убедитесь, что хранилище разблокировано.
- Убедитесь, что окно синхронизации активно.
- Убедитесь, что интерфейс не был намеренно отключен автоматизацией Cyber Recovery.
- Поиск и устранение неисправностей при более низкой, чем ожидалось, скорости соединения
Если канал 100 Гбит/с согласовывается на скорости 25 Гбит/с или другой сниженной скорости:
Проверьте:
-
- Сопоставление типов оптических модулей.
- Поддерживаемые длины кабеля.
- Совместимые приемопередатчики.
- Конфигурация соединения.
- Уровни микропрограммы сетевых плат.
Несоответствие связей или согласования может помешать работе интерфейсов с нужной скоростью.
- 8. Устранение неполадок низкой пропускной способности
Низкая пропускная способность не всегда указывает на проблему в сети.
Рассмотреть:
-
- Ограничения ЦП для инструментов тестирования, таких как iPerf.
- Узкие места в одноядерных процессорах.
- Распределение сессий по ядрам процессора.
- Использование исходной и целевой систем.
При оценке производительности:
-
- Просмотр статистики приложений или репликации.
- Проверьте наличие фактических задержек или задержек.
- Сравнение производительности рабочих нагрузок с результатами синтетических тестов.
При определении общей производительности передачи данных не полагайтесь исключительно на результаты iPerf.
- Проблемы, связанные с оборудованием
В ходе практических кейсов были выявлены проблемы, связанные со следующими факторами:
-
- Нестабильность сетевой платы 25 Гбит/с.
- Проблемы совместимости SFP.
- Прерывание интерфейса, требующее сброса портов.
- Каналы прямого подключения, требующие операций восстановления интерфейса.
Если конфигурация программного обеспечения отображается правильно, выполните следующие действия.
-
- Проверьте совместимость оборудования.
- Проверьте известные дефекты и примечания к выпуску.
- Замените подозрительные оптические компоненты или кабели.
- Проверка версий микропрограммы и DDOS.
Дополнительная информация
Сеть прямого подключения может использоваться для:
- Репликация MTree
- Репликация коллекции
- Хранилище Cyber Recovery
- Обмен данными между IDPA и IDPA
- Обмен данными между IDPA и Data Domain
- Миграция данных
- Рекомендации по резервному копированию и восстановлению
- Тестирование производительности
- Поиск и устранение неисправностей сети
- Подключение для временного развертывания
MRepl и CRepl Может работать по сети с прямым подключением. С точки зрения Data Domain, подключенное устройство не обязательно должно быть коммутатором, маршрутизатором или другим сетевым устройством. Если оператор связи установлен и интерфейсы настроены правильно, связь между подключенными конечными точками может осуществляться напрямую.
Для интерфейсов, подключаемых напрямую:
- Обе конечные точки должны быть настроены в одной подсети, если маршрутизация не введена намеренно.
- По возможности следует использовать выделенную подсеть.
- Если сеть прямого подключения перекрывается с другими интерфейсами, могут потребоваться статические маршруты, чтобы гарантировать, что трафик использует предполагаемый путь.
- Поиск и устранение неисправностей прямого подключения обычно используется для изоляции внешних сетевых устройств как потенциального источника проблем с подключением или производительностью.
Additional Information
Data Domain: поиск и устранение неполадок интерфейсов для пользователей
Data Domain — настройка физических интерфейсов с помощью графического интерфейса пользователя (UI)
Data Domain — настройка физических интерфейсов с помощью интерфейса командной строки (CLI)
Data Domain: двухскоростная сетевая плата Intel E810 10/25 Гбит/с может не подключаться к модулю M14MK на скорости 10 Гбит/с
Используйте эту статью базы знаний, если двухскоростной адаптер Intel E810 не устанавливает соединение со скоростью 10 Гбит/с при использовании модуля M14MK. В нем рассматриваются вопросы совместимости, признаки и корректирующие действия для восстановления правильного согласования каналов.
Data Domain: сетевая плата Intel X710 может не установить корректную метку VLAN, если она перейдет в режим восстановления.
Укажите эту статью базы знаний, если трафик VLAN неправильно передается через интерфейс Intel X710. В этой статье объясняется, как режим восстановления сетевой платы может повлиять на маркировку VLAN, и приводятся инструкции по выявлению и устранению этой проблемы.
Data Domain: ошибка «SMS command failed: No interfaces found» в интерфейсе командной строки и графическом интерфейсе
DDИспользуйте эту статью базы знаний, если интерфейс командной строки или графический интерфейс пользователя DD сообщают о том, что интерфейсы не найдены. Оно помогает определить проблемы обнаружения интерфейсов и описать действия по устранению неполадок для восстановления нормальной видимости сетевого интерфейса.
Data Domain. Новая версия ядра 5.4.x может вызывать критические ошибки истечения времени ожидания DDFS HMON/CRON/RPC
Эту статью базы знаний следует использовать при возникновении нестабильной системы, критических ошибок или ошибок, связанных с истечением времени ожидания системы после обновления ядра. В нем подробно описывается влияние конкретных версий ядра 5.4.x и рекомендуемые меры по их устранению.
Data Domain: поиск и устранение ошибки, связанной с ошибкой «Net Set Up Flag Failure»
См. эту статью базы знаний, если при изменении конфигурации сети появляется сообщение «Net Setup Flag Failure». В нем содержатся рекомендации по диагностике несогласованности конфигурации и восстановлению функциональности интерфейса.
PowerProtect DD и IDPA: после обновления ethVX не может установить связь
Используйте эту статью базы знаний, если интерфейсы ethVX перестают обмениваться данными после обновления ПО. В нем описаны распространенные причины, этапы проверки и корректирующие действия для восстановления подключения.
Data Domain: интерфейсы Intel связаны с tx_timeout
См. эту статью базы знаний, если сетевые интерфейсы на базе процессоров Intel неожиданно выходят из строя и наблюдаются ошибки tx_timeout. Эта статья помогает определить, связана ли проблема с драйвером, микропрограммой или оборудованием, и содержит процедуры восстановления.
Data Domain: отключение FEC в Cyber Recovery не допускается
Эта статья базы знаний применяется, когда конфигурации сети Cyber Recovery не работают из-за отключенной функции прямой коррекции ошибок (FEC). В нем разъясняются требования FEC и настройка поддерживаемых параметров.
Data Domain: плата Intel X710 не обнаружена при загрузке с подключенными сетевыми кабелями
Используйте эту статью базы знаний, если адаптер Intel X710 отсутствует или не обнаружен во время загрузки системы с подсоединенными сетевыми кабелями. В этой статье описываются условия, при которых возникает проблема, и рекомендуемое решение.
Data Domain: изменение типа связки с помощью конфигурации коммутатора LACP Отключение интерфейсов
См. эту статью базы знаний при изменении режимов объединения на интерфейсах, подключенных к коммутаторам, настроенным на основе LACP. В нем описывается, как изменения типа связки могут привести к недоступности интерфейсов и как безопасно выполнить переход.
Data Domain: ошибка неверной настройки конфигурации сети, вызванная платами
qlogicЭта статья базы знаний полезна, когда не удается изменить конфигурацию сети из-за неверных настроек, связанных с адаптерами QLogic. В нем описаны действия по поиску и устранению неисправностей и рекомендации по исправлению конфигурации.
Data Domain: недопустимое значение MTU приводит к сбою интерфейса VLAN после перезагрузки
См. эту статью базы знаний, если интерфейсы VLAN не могут перейти в оперативный режим после перезагрузки из-за проблем конфигурации, связанных с MTU. В этой статье описывается признак, основная причина и надлежащие требования к проверке MTU.
Data Domain: оповещение связанного интерфейса из-за несоответствия
скоростей рядового интерфейсаИспользуйте эту статью базы знаний, если объединенные интерфейсы создают оповещения из-за того, что порты-участники работают на разных скоростях. В нем описывается, как несоответствие скорости влияет на работоспособность связи и какие шаги необходимо предпринять для устранения этого состояния.
Data Domain: сетевые интерфейсы могут не работать из-за конфигурации
временного решения IntelУкажите ссылку на эту статью базы знаний, если сетевые интерфейсы неожиданно становятся недоступными после применения временных настроек, связанных с Intel. В нем описывается поведение, затронутые конфигурации и рекомендации по поддержанию стабильного сетевого подключения.