Isilon OneFS:事件通知:节点离线 — 事件 ID:200010001、300010003、399990001、900160001、910100006、400150007
Summary: Isilon OneFS:事件通知:节点离线 — 事件 ID:200010001、300010003、399990001、900160001、910100006、400150007
This article applies to
This article does not apply to
This article is not tied to any specific product.
Not all product versions are identified in this article.
Symptoms
事件
您收到“节点离线”事件通知。Event ID: 200010001。
当群集中的其他节点报告某个节点离线时,将生成“节点离线”事件。当任何节点上的内部链接丢失时,也会生成此事件。
注意:如果节点未打开,则执行“如何重启并耗尽 Isilon 节点 ”。
Cause
详细信息
发生以下情况之一:
- 一个或多个节点重新启动。
- 一个或多个节点关闭。
- 一个节点缺少后端网络 (InfiniBand (IB)) 连接。(后端连接是指节点与其他节点通信的能力。)
- 一个节点无法加入组。
Resolution
响应
在开始对问题进行故障处理之前,请确认事件与群集上的维护无关。确认没有正在进行的维护后,继续进行以下故障处理。
如果节点重新启动
- 打开到节点的 SSH 连接,使用“root”帐户登录。
- 运行以下命令以确认节点重新加入群集:
isi statusisi
status命令返回类似于以下内容的输出。如果节点成功重新加入群集,则 Health 列将不会显示 D(关闭):
运行状况吞吐量 (bps) 硬盘存储 SSD 存储
ID |IP 地址 |DASR公司 | 输入输出总计|用/尺寸|已用/大小
-------------------+-----+-----+-----+-----+-----------------+-----------------
1|10.111.183.10 |好的 |11.5 万|220K|335K|531M/ 10T(< 1%)| (无 SSD)
2|10.111.183.11 |好的 | 0| 0| 0|519M/ 10T(< 1%)| (无 SSD)
3|10.111.183.12 |好的 | 0| 2.6万| 2.6万|521M/ 10T(< 1%)| (无 SSD)
-------------------+-----+-----+-----+-----+-----------------+-----------------
群集总计: |11.5 万|246K|361K|1.5克/ 31吨(< 1%)| (无 SSD)
运行状况字段:D = Down, A = Attention, S = Smartfailed, R = Read-Only
- 运行以下命令以确认正常运行持续时间:
正常运行时间
输出类似于以下内容:
8:41PM up 10 mins, 1 user, load averages: 0.08、0.18、0.14
如果节点最近重新启动,正常运行持续时间将相对较短,以分钟为单位。
- 通过运行以下命令收集日志并将日志发送给 Isilon 技术支持进行分析:
isi_gather_info
如果您可以 ping 关闭节点的外部 IP 地址
- 确认节点的状态:
- 打开到节点的 SSH 连接,使用“root”帐户登录。
- 运行以下命令:
ifconfig |grep -A4 ib1
ifconfig命令应返回以下状态,指示内部接口处于活动状态:
IB1: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 2004
lladdr 0.15.1b.0.10.bd.4c.77
inet 172.10.111.200 netmask 0xffffff00 broadcast 1.10.111.255 zone 1
media:Infiniband 自动选择
状态:活动
- 如果状态为 inactive,请执行以下检查:
- IB 卡上的端口的活动指示灯是亮起还是熄灭?
- 如果指示灯熄灭,请转至步骤 b。
- IB 线缆是否牢固地连接到节点和 IB 交换机?
- 如果没有,请重新拔插节点和交换机的线缆。
- IB 交换机是否接通电源?
- 如果没有,请接通电源。
- 目测节点,观察电源指示灯是否亮起。
- IB 卡上的端口的活动指示灯是亮起还是熄灭?
如果节点已关闭
- 尝试开启节点。
提醒:
最好可以建立对节点的串行访问,以便在启动时进行监视,以捕获可能有助于故障处理的任何信息。有关详细信息,请参阅 Isilon:如何连接到节点的管理端口。 - 如果节点开启,请确认它是否已重新加入群集:
- 打开与群集中另一个节点的 Secure Shell (SSH) 连接,然后使用 root 帐户登录。
- 运行以下命令以确定节点是否已重新加入群集:
isi statusisi
status命令返回类似于以下内容的输出。如果节点成功重新加入群集,则 Health 列将不会显示 D(关闭):
运行状况吞吐量 (bps) 硬盘存储 SSD 存储
ID |IP 地址 |DASR公司 | 输入输出总计|用/尺寸|已用/大小
-------------------+-----+-----+-----+-----+-----------------+-----------------
1|10.111.183.10 |好的 |11.5 万|220K|335K|531M/ 10T(< 1%)| (无 SSD)
2|10.111.183.11 |好的 | 0| 0| 0|519M/ 10T(< 1%)| (无 SSD)
3|10.111.183.12 |好的 | 0| 2.6万| 2.6万|521M/ 10T(< 1%)| (无 SSD)
-------------------+-----+-----+-----+-----+-----------------+-----------------
群集总计: |11.5 万|246K|361K|1.5克/ 31吨(< 1%)| (无 SSD)
运行状况字段:D = Down, A = Attention, S = Smartfailed, R = Read-Only
- 如果节点重新加入群集,通过运行以下命令收集日志并将日志发送给 Isilon 技术支持进行分析:
isi_gather_info
- 如果节点未重新加入群集,请转至下一部分。
- 如果节点未开启,请确保断路器正常工作并且电源插座处于活动状态。
- 如果节点未通电,请解决电源问题。
- 如果节点关闭并已接通电源,请联系 Isilon 技术支持寻求问题的故障处理支持。
如果节点已通电,但未重新加入群集
- 尝试通过 Secure Shell (SSH) 会话建立远程访问。如果 SSH 会话失败,则尝试通过串行控制台建立远程访问。
- 如果 SSH 会话和串行控制台均无响应,请在 SSH 会话或串行控制台内按 CTRL+T。
- 如果按 CTRL+T 生成输出,则记录输出,然后联系 Isilon 技术支持进行故障分析。
- 如果节点无响应,请按三次电源按钮,然后等待五分钟,以便节点关闭电源。
- 如果节点未关闭电源,请按住电源按钮,直到节点关闭。
- 再次按下电源按钮以开启节点。
- 如果节点开启并返回登录提示,请使用“root”帐户登录。
- 通过运行以下命令收集日志,并将其发送给 Isilon 技术支持进行分析
isi_gather_info
- 如果节点未重新加入群集,请联系 Isilon 技术支持寻求问题的故障处理支持。
Additional Information
事件 ID:200010002 - NODE_STATUS_ONLINE
事件 ID:200010003 - XTND_OFFLINE
事件 ID:200010005 - DISKNODE_OFFLINE
事件 ID:299990001 - NODE_COALESCE
事件 ID:300020001 - RO_TRANS_FAILED
事件 ID:300010002 - NODE_SHUTDOWN
事件 ID:300020002 - NODE_REBOOT_JRNL_BKUP_FAIL
OneFS 错误:无法恢复日志
https://www.dell.com/support/kbdoc/32508
如何在计划断电
之前安全关闭 Isilon 群集https://www.dell.com/support/kbdoc/18989
事件 ID:300010003 - BOOT_TIMEOUT
事件 ID:399990001 - MAINT_REBOOT_COALESCE
事件 ID:300020003 - MAINT_REBOOT_SHUTDOWN_FAILED
事件 ID:300010001 - NODE_REBOOT
Affected Products
IsilonProducts
Isilon, PowerScale OneFSArticle Properties
Article Number: 000055936
Article Type: Solution
Last Modified: 29 Mar 2025
Version: 5
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.