☰

MD 突袭中丢失超级区块

tag-icon • tag-icon software-raid mdadm superblock
MD 突袭中丢失超级区块

Red Hat Linux 5 上的问题。

由于沟通不畅，我们环境中的两个 LUN 从 1.2 TB 扩大到 1.7 TB。

现在，重新启动后，mdadm 找不到超级块来再次构建阵列。

通用格式（称为版本 0.90）具有 4K 长的超级块，并写入 64K 对齐的块，该块从设备末尾开始至少 64K 且小于 128K（即，获取围绕设备的超级块的地址）。设备大小减小到 64K 的倍数，然后减去 64K）。

我找到了一些旧文档：

# mdadm -D /dev/md0
/dev/md0:
        Version : 0.90
  Creation Time : Tue Jul 10 17:45:00 2012
     Raid Level : raid1
     Array Size : 1289748416 (1230.00 GiB 1320.70 GB)
  Used Dev Size : 1289748416 (1230.00 GiB 1320.70 GB)
   Raid Devices : 2
  Total Devices : 2
Preferred Minor : 0
    Persistence : Superblock is persistent

    Update Time : Wed Apr 17 15:03:50 2013
         State : active
Active Devices : 2
Working Devices : 2
Failed Devices : 0
  Spare Devices : 0

           UUID : 2799bd51:67eb54d2:1fcd3c90:293311a1
         Events : 0.39

    Number   Major   Minor   RaidDevice State
       0     253       10        0      active sync   /dev/dm-10
       1     253       11        1      active sync   /dev/dm-11

# fdisk -l /dev/dm-10 /dev/dm-11

Disk /dev/dm-10: 1320.7 GB, 1320702443520 bytes
255 heads, 63 sectors/track, 160566 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-10 doesn't contain a valid partition table

Disk /dev/dm-11: 1320.7 GB, 1320702443520 bytes
255 heads, 63 sectors/track, 160566 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-11 doesn't contain a valid partition table

答案1

只需运行mdadm --build -l1 -n2 /dev/md0 /dev/dm-10 /dev/dm11即可恢复您的数据。

在执行此操作之前，请验证设备是否正确（或使用 /dev/mapper 中的别名）！

另外，如果您的内核已经使用（或正在使用）这些设备之一，数据将不一致。您应该将第二个设备设置为简并 1.2 阵列，复制数据，开始使用新的简并 RAID，并向其中添加第一个磁盘。如果您没有当前备份，请在尝试此操作之前让您知道该怎么做。

（无论如何，切换到 1.2 是一个好主意，因为 1.2 RAID 超级块可以防止此类问题。）

答案2

如果是 0.90 超级块的 RAID 1，您应该能够直接挂载，根本不需要使用 RAID 层。数据在磁盘开头没有偏移，所以应该没有问题。使用只读安装选项或只读循环设备进行实验以防万一。

如果可行，最简单的方法是使用另一个磁盘从头开始创建一个新的 RAID（最好是 1.2 元数据，这样可以避免此问题并且不受 2TB 限制），复制数据，然后就可以了完成后，将您复制的磁盘添加到新的 RAID。

答案3

将设备恢复到原始大小应该只是恢复 RAID 设备。

您可以通过执行以下操作来确认：

losetup --sizelimit=$((1230*(2**30))) -r /dev/loop1 /dev/dm-10
mdadm -E /dev/loop1

mdadm如果大小正确，现在应该找到超级块。然后您可以将磁盘大小调整回该大小（-r上面是只读的，因此不会造成任何损害）。

如果您确实想扩大 md0 数组并保留 0.9 元数据，您可以做的一件事是：

dmsetup create d1 --table "0 $((1230*(2**30)/512)) linear /dev/dm-10 0"
dmsetup create d2 --table "0 $((1230*(2**30)/512)) linear /dev/dm-11 0"

再次，

mdadm -E /dev/mapper/d1

应该显示 raid 设备。

在这些映射器设备上组装数组：

mdadm -A /dev/md0 /dev/mapper/d[12]

然后将设备大小调整到最大程度：

dmsetup suspend d1
dmsetup suspend d2
dmsetup reload d1 --table "0 $(blockdev --getsize /dev/dm-10) linear /dev/dm-10 0"
dmsetup reload d2 --table "0 $(blockdev --getsize /dev/dm-11) linear /dev/dm-11 0"
dmsetup resume d1
dmsetup resume d2

然后，您可以使用--grow该额外空间：

mdadm /dev/md0 --grow --size max

等待多余的空间重新同步，停止阵列，清理多余的 dm 设备并在原始设备上重新组装：

mdadm --stop /dev/md0
dmsetup remove d1
dmsetup remove d2
mdadm -A /dev/md0 /dev/dm-1[01]

您可以使用循环设备预先进行测试以验证过程。这是我为验证其是否有效所做的操作的屏幕截图：

~# truncate -s 1230G a
~# truncate -s 1230G b
~# losetup /dev/loop1 a
~# losetup /dev/loop2 b
~# lsblk /dev/loop[12]
NAME  MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
loop1   7:32   0   1.2T  0 loop
loop2   7:64   0   1.2T  0 loop
~# mdadm --create /dev/md0 --metadata 0.9 --level 1 --raid-devices 2 --assume-clean /dev/loop[12]
mdadm: array /dev/md0 started.
~# lsblk /dev/md0
NAME MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
md0    9:0    0   1.2T  0 raid1
~# truncate -s 1700G a
~# truncate -s 1700G b
~# losetup -c /dev/loop1
~# losetup -c /dev/loop2
~# lsblk /dev/loop[12]
NAME  MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
loop1   7:32   0   1.7T  0 loop
└─md0   9:0    0   1.2T  0 raid1
loop2   7:64   0   1.7T  0 loop
└─md0   9:0    0   1.2T  0 raid1
~# mdadm -E /dev/loop1
mdadm: No md superblock detected on /dev/loop1.
(1)~# mdadm --stop /dev/md0
mdadm: stopped /dev/md0
~# dmsetup create d1 --table "0 $((1230*(2**30)/512)) linear /dev/loop1 0"
~# dmsetup create d2 --table "0 $((1230*(2**30)/512)) linear /dev/loop2 0"
~# mdadm -A /dev/md0 /dev/mapper/d[12]
mdadm: /dev/md0 has been started with 2 drives.
~# lsblk /dev/mapper/d[12]
NAME       MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
d1 (dm-19) 253:19   0   1.2T  0 dm
└─md0        9:0    0   1.2T  0 raid1
d2 (dm-20) 253:20   0   1.2T  0 dm
└─md0        9:0    0   1.2T  0 raid1
~# dmsetup suspend d1
~# dmsetup suspend d2
~# dmsetup reload d1 --table "0 $(blockdev --getsize /dev/loop1) linear /dev/loop1 0"
~# dmsetup reload d2 --table "0 $(blockdev --getsize /dev/loop2) linear /dev/loop2 0"
~# dmsetup resume d1
~# dmsetup resume d2
~# lsblk /dev/mapper/d[12]
NAME       MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
d1 (dm-19) 253:19   0   1.7T  0 dm
└─md0        9:0    0   1.2T  0 raid1
d2 (dm-20) 253:20   0   1.7T  0 dm
└─md0        9:0    0   1.2T  0 raid1
~# mdadm /dev/md0 --grow --assume-clean --size max
mdadm: component size of /dev/md0 has been set to 1782579136K
~# lsblk /dev/md0
NAME MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
md0    9:0    0   1.7T  0 raid1
~# cat /proc/mdstat
Personalities : [raid1]
md0 : active raid1 dm-19[0] dm-20[1]
      1782579136 blocks [2/2] [UU]

unused devices: <none>
~# mdadm --stop /dev/md0
mdadm: stopped /dev/md0
~# dmsetup remove d1
~# dmsetup remove d2
~# mdadm -A /dev/md0 /dev/loop[12]
mdadm: /dev/md0 has been started with 2 drives.
~# lsblk /dev/md0
NAME MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
md0    9:0    0   1.7T  0 raid1
~# uname -rs
Linux 3.7-trunk-amd64

相关内容