PowerScale: Viewing Statistics for a PowerScale Node

Here are a few basic commands to investigate the status of a node:

Overall status including network, storage capacity, drive, and throughput information

# isi status -n 1
Node LNN:             1
Node ID:              1
Node Name:            example-1
Node IP Address:      1.1.1.x
Node Health:          -A--
Node SN:              SS200-x-x
Member of Disk Pools: n/a
Member of Node Group: n/a
Member of Tier:       n/a
Node Capacity:       5.9T
Available:           5.7T (96%)
Used:                227G ( 4%)

Network Status:
        See 'isi networks list interfaces -v' for more detail or man(8) isi.
Internal:            2 IB network interfaces (1 up, 1 down)
External:            2 GbE network interfaces (1 up, 1 down)
                     2 10GbE network interfaces (2 up, 0 down)
                     2 Aggregated network interfaces (0 up, 2 down)

Disk Drive Status:
  Bay  1 <25>      Bay  2 <26>      Bay  3 <27>      Bay  4 <20>
      0b/s             0b/s             0b/s             0b/s
  [L3]             [HEALTHY]        [HEALTHY]        [HEALTHY]

  Bay  5 <24>      Bay  6 <18>      Bay  7 <17>      Bay  8 <16>
      0b/s             0b/s             0b/s             0b/s
  [REPLACE]        [HEALTHY]        [HEALTHY]        [HEALTHY]

  Bay  9 <15>      Bay 10 <14>      Bay 11 <13>      Bay 12 <12>
      0b/s             0b/s             0b/s             0b/s
  [HEALTHY]        [HEALTHY]        [HEALTHY]        [HEALTHY]

  Bay 13 <11>      Bay 14 <10>      Bay 15 <9>       Bay 16 <8>
      0b/s             0b/s             0b/s             0b/s
  [HEALTHY]        [HEALTHY]        [HEALTHY]        [HEALTHY]

  Bay 17 <7>       Bay 18 <6>       Bay 19 <5>       Bay 20 <4>
      0b/s             0b/s             0b/s             0b/s
  [HEALTHY]        [HEALTHY]        [HEALTHY]        [HEALTHY]

  Bay 21 <3>       Bay 22 <2>       Bay 23 <1>       Bay 24 <0>
      0b/s             0b/s             0b/s             0b/s
  [HEALTHY]        [HEALTHY]        [HEALTHY]        [HEALTHY]

You can filter the alerts for one or multiple nodes.

# isi alert list --nodes 1
ID      STARTED     ENDED SEV LNN MESSAGE
1.16958 08/17 08:24 --    C   1   Hardware Monitoring failure:
1.16959 08/17 08:24 --    C   1   Redundant power supply 1 failure
1.16960 08/17 08:24 --    C   1   Redundant power supply 2 failure
1.17005 08/17 08:31 --    C   1   One or more drives (bay(s) 5 / type(s) HDD)...


View processes running, memory utilization and CPU load.

# top
last pid: 79619;  load averages:  0.01,  0.04,  0.06  up 80+02:00:15  12:49:39
665 processes: 1 running, 664 sleeping
CPU:  0.0% user,  0.0% nice,  0.3% system,  0.0% interrupt, 99.7% idle
Mem: 748M Active, 28G Inact, 17G Wired, 12G Buf, 1342M Free
Swap:

  PID USERNAME       THR PRI NICE   SIZE    RES STATE   C   TIME   WCPU COMMAND
 4699 root             1   8    0 75852K 11636K nanslp  2 157:53  0.00% isi_sasphymon
 4766 root             1  20    0   139M 23980K select  3  75:08  0.00% isi_rpc_d
91851 root             1   4    0 60456K  8728K kqread  2  65:38  0.00% isi_mcp
 4488 root             1   4    0 78324K 10440K kqread  0  57:56  0.00% isi_flexnet_d
 4805 root             1  20    0   101M 16908K select  2  40:18  0.00% snmpd
 4904 root             2  20    0   234M 45160K select  4  29:33  0.00% isi_celog_notificat
 5282 root             1   4    0 61508K  7512K kqread  0  20:55  0.00% isi_dnsiq_d
 5496 root             1   4    0   195M 22828K kqread  3  12:16  0.00% isi_drive_repurpose
 4857 root             1 -22  r30 63540K 11320K select  5   8:59  0.00% isi_drive_d
88852 root             1  20    0 70728K  8892K select  4   8:55  0.00% syslogd
 4481 root             1  20    0   127M 12908K select  1   8:34  0.00% isi_hangdump
<snipped>

SMB connections

# isi smb sessions list -v
   Computer: 10.x.x.x
       User: root
Client Type: DOS LM 2.0
     # open: 1
     Active: 4s
       Idle: 2s
Guest Login: False
 Encryption: False


Client activity

# isi statistics client --nodes 1
       Ops         In        Out    TimeAvg       Node      Proto            Class   UserName        LocalName       RemoteName
       N/s        B/s        B/s         us
       1.4      139.2      175.4      223.1          1       smb1           create       root   10.111.x.x            x.emc.com
       1.8       98.2       54.6      113.9          1       smb1       file_state       root   10.111.x.x            x.emc.com
       2.4      220.0      400.0      219.9          1       smb1   namespace_read       root   10.111.x.x            x.emc.com
       0.2        8.0        0.0       38.0          1       smb1            other       root   10.111.x.x            x.emc.com
       0.8       83.2       31.2       45.5          1       smb1    unimplemented    UNKNOWN   10.111.x.x            x.emc.com

View connected and active NFS count

# isi statistics query --nodes=1 --stats=node.clientstats.connected.nfs,node.clientstats.active.nfs
  NodeID node.clientstats.connected.nfs node.clientstats.active.nfs
       1                              1                           0
 average                              1                           0


Load and network throughput information by interface

# systat -ifstat
                    /0   /1   /2   /3   /4   /5   /6   /7   /8   /9   /10
     Load Average

      Interface           Traffic               Peak                Total
            ib1  in      4.126 KB/s          4.126 KB/s           10.071 GB
                 out     0.574 KB/s          1.528 KB/s           13.101 GB

            lo0  in      0.784 KB/s         32.747 KB/s           26.866 GB
                 out     0.784 KB/s         32.747 KB/s           26.865 GB

            em0  in     19.756 KB/s         19.756 KB/s           67.203 GB
                 out     6.854 KB/s          6.854 KB/s          766.543 MB

          cxgb1  in      8.422 KB/s          9.012 KB/s           66.705 GB
                 out     0.000 KB/s          0.000 KB/s            0.000 KB

          cxgb0  in      8.422 KB/s          9.012 KB/s           16.918 GB
                 out     0.000 KB/s          0.000 KB/s            0.000 KB


CPU percentage, protocol statistics, network, and drive throughput per node

# isi statistics system --nodes
 Node   CPU   SMB   FTP  HTTP ISCSI   NFS  HDFS Total NetIn NetOut DiskIn DiskOut
  LNN %Used   B/s   B/s   B/s   B/s   B/s   B/s   B/s   B/s    B/s    B/s     B/s
  All   0.6   0.0   0.0   0.0   0.0   0.0   0.0   0.0   72K  149.2    0.0     0.0
    1   1.3   0.0   0.0   0.0   0.0   0.0   0.0   0.0   25K  149.2    0.0     0.0
    2   0.2   0.0   0.0   0.0   0.0   0.0   0.0   0.0   22K    0.0    0.0     0.0
    3   0.3   0.0   0.0   0.0   0.0   0.0   0.0   0.0   25K    0.0    0.0     0.0