PowerPath. Как расширить файловую систему Linux, даже если в томе PowerPath нет таблицы разделов
Summary: PowerPath. Как расширить файловую систему Linux, даже если в томе PowerPath нет таблицы разделов.
Symptoms
Заказчик пытался расширить два в файловой системе SAN LUN LVM, встроенной во встроенную файловую систему Linux LVM, но это не удалось.
VNX5500, обслуживающая несколько LUN через PowerPath 5.3 SP 1 (сборка 111) на серверы RHEL5 и RHEL6, работающая под управлением Linux 2.6.18-128.el5
Заказчик уже увеличил пользовательскую емкость для этих двух LUN в VNX.
Ранее она составляла 82 Гбайт и 60 Гбайт, а затем была увеличена до 136 Гбайт и 90 Гбайт соответственно.
Процедура заказчика была следующей:
lvdisplay -v /dev/[volgroup]/[logicalvolume]- для идентификации физического устройстваfdisk -l /dev/[device]- верифицировать таблицу разделовdf -h /[mountpoint]- для проверки существующих мощностейgrep mpt /sys/class/scsi_host/host?/proc_name- для идентификации шины SCSI для повторного сканированияecho "- - -" > /sys/class/scsi_host/hostX/scan- для повторного сканирования устройства 'hostX'pvs /dev/[device]- для проверки физического размера томаpvresize /dev/[device]- увеличить физический объем до нового размера LUNpvs /dev/[device]- проверить размер нового физического томаvgscan- для восстановления кэша групп томовvgs [volgroup]- для проверки информации о группе томовlvextend -l +100%FREE /dev/[volgroup]/[logicalvolume]- расширить логический том для заполнения дискаresize2fs /dev/[volgroup]/[logicalvolume]- изменить размер файловой системы на логическом томеdf -h /[mountpoint]- для проверки новых мощностей
Похоже, что LUN, смонтированные PowerPath, не имеют действительной таблицы разделов:
fdisk -l /dev/emcpowercb Disk /dev/emcpowercb: 91.2 GB, 91268055040 bytes 255 heads, 63 sectors/track, 11096 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk /dev/emcpowercb doesn't contain a valid partition table
Первые 512 байт /dev/emcpowercb выглядят следующим образом:
hexdump -Cn512 /dev/emcpowercb 00000000 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 |................| * 00000200
Тем не менее, LUN смонтированы и доступны для системы (например):
df -h /DCCDBUNIX/data01 Filesystem Size Used Avail Use% Mounted on /dev/mapper/vg2dccdbnx2pd01-lvdccdbnxd01 84G 67G 13G 84% /DCCDBUNIX/data01
Приведенный выше пример предназначен для следующего LUN, сопоставленного с PowerPath:
vgdisplay -v vg2dccdbnx2pd01 Using volume group(s) on command line Finding volume group "vg2dccdbnx2pd01" --- Volume group --- VG Name vg2dccdbnx2pd01 --- Logical volume --- LV Name /dev/vg2dccdbnx2pd01/lvdccdbnxd01 VG Name vg2dccdbnx2pd01 LV Size 85.00 GB Block device 253:9 --- Physical volumes --- PV Name /dev/emcpowercb Total PE / Free PE 21759 / 0
Cause
Пытаетесь расширить файловую систему Linux, несмотря на отсутствие таблицы разделов в LUN PowerPath?
Resolution
Для Red Hat использование команды для отображения физического тома является правильным.
pvs -o+pv_used /dev/[pseudo_device]
Затем при добавлении диска в систему и расширении группы томов в полосу поверх добавленного диска.
Отображает неиспользуемое необработанное дисковое пространство при расширении исходного LUN.
pvs -av /dev/[pseudo_device]
В дополнение к сканированию устройства с хоста команды blockdev для всех собственных устройств PowerPath РАБОТАЛИ должным образом
.
blockdev --rereadpt /dev/sds blockdev --rereadpt /dev/sdbr blockdev --rereadpt /dev/sddq
Приведенная ниже команда, выводящая подстановочные знаки в /sys/class/scsi_host/hostX/scan, чтобы использование хоста для повторного сканирования всего HBA-адаптера для обновления устройства LUN НЕ РАБОТАЛО.
echo "1" >/sys/block/sds/device/rescan echo "1" >/sys/block/sdbr/device/rescan echo "1" >/sys/block/sddq/device/rescan
Расширение LUN в Unisphere в качестве последнего шага, для его работы необходимо использовать корневой каталог.
# powermt display dev=emcpowerai Pseudo name=emcpowerai VNX ID=APMXXXXXXXXXXX [xxxxx] Logical device ID=xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx [xxxxx_dccdbnx2i02_RV] state=alive; policy=CLAROpt; queued-IOs=0 Owner: default=SP A, current=SP A Array failover mode: 4 ============================================================================== --------------- Host --------------- - Stor - -- I/O Path -- -- Stats --- ### HW Path I/O Paths Interf. Mode State Q-IOs Errors ============================================================================== 3 lpfc sds SP A5 active alive 0 0 3 lpfc sdbr SP B5 active alive 0 0 4 lpfc sddq SP A4 active alive 0 0 pvs -o+pv_used,dev_size |grep /dev/emcpowerai /dev/emcpowerai vg2dccdbnx2qi01 lvm2 a-- 60.00G 0 60.00G 60.00G umount /DCCDBUNIX/index01 blockdev --rereadpt /dev/sds blockdev --rereadpt /dev/sdbr blockdev --rereadpt /dev/sddq pvs -o+pv_used,dev_size |grep /dev/emcpowerai /dev/emcpowerai vg2dccdbnx2qi01 lvm2 a-- 60.00G 0 60.00G 92.00G pvresize /dev/emcpowerai Physical volume "/dev/emcpowerai" changed 1 physical volume(s) resized / 0 physical volume(s) not resized pvs -o+pv_used,dev_size |grep /dev/emcpowerai /dev/emcpowerai vg2dccdbnx2qi01 lvm2 a-- 92.00G 32.00G 60.00G 92.00G pvscan |grep '/dev/emcpowerai' PV /dev/emcpowerai VG vg2dccdbnx2qi01 lvm2 [92.00 GB / 32.00 GB free] vgscan |grep 'vg2dccdbnx2qi01' Found volume group "vg2dccdbnx2qi01" using metadata type lvm2 vgs |grep vg2dccdbnx2qi01 vg2dccdbnx2qi01 1 1 0 wz--n- 92.00G 32.00G lvextend -l +100%FREE /dev/vg2dccdbnx2qi01/lvdccdbnxi01 lvextend -l +100%FREE /dev/vg2dccdbnx2qi01/lvdccdbnxi01 Extending logical volume lvdccdbnxi01 to 92.00 GB Logical volume lvdccdbnxi01 successfully resized resize2fs /dev/vg2dccdbnx2qi01/lvdccdbnxi01 resize2fs 1.39 (29-May-2006) Please run 'e2fsck -f /dev/vg2dccdbnx2qi01/lvdccdbnxi01' first. e2fsck -f /dev/vg2dccdbnx2qi01/lvdccdbnxi01 e2fsck 1.39 (29-May-2006) Pass 1: Checking inodes, blocks, and sizes Pass 2: Checking directory structure Pass 3: Checking directory connectivity Pass 4: Checking reference counts Pass 5: Checking group summary information /dev/vg2dccdbnx2qi01/lvdccdbnxi01: 43/7864320 files (16.3% non-contiguous), 12034277/15727616 blocks resize2fs /dev/vg2dccdbnx2qi01/lvdccdbnxi01 resize2fs 1.39 (29-May-2006) Resizing the filesystem on /dev/vg2dccdbnx2qi01/lvdccdbnxi01 to 24116224 (4k) blocks. The filesystem on /dev/vg2dccdbnx2qi01/lvdccdbnxi01 is now 24116224 blocks long. mount /DCCDBUNIX/index01 df -h /dev/mapper/vg2dccdbnx2qi01-lvdccdbnxi01 91G 45G 41G 53% /DCCDBUNIX/index01
Другой вариант — перезагрузка, которая также работает, так как создает полное повторное сканирование.