Восстановление программного RAID-6

[Alexey A. Stepanenko]

Здравствуйте, други!

Ситуация такова: перевозил сервер, на котором было 2 программных RAID-6 массива. Первый собран на 6-ти 2Tb винтах, второй на 5-ти 3Tb. На новом месте (сервер перевозили в разобранном состоянии) после сборки и подключения выяснилось, что не определяются 2 винта: системный и один 2Tb. Оба даже не показываются через fdisk -l.
После переустановки ОС, массив из 3Tb винтов стартанул без проблем, а вот массив из 2Tb не заработал (Результат cat /proc/mdstat ниже, строку "Personalities..." пришлось удалить, изза нее текст поста почемуто не отображался):

Код: [Выделить]

md0 : active raid6 sdj1[5] sdd1[6] sda1[7] sdb1[8] sdc1[4]
      8790770688 blocks super 1.2 level 6, 512k chunk, algorithm 2 [5/5] [UUUUU]

md127 : active (auto-read-only) raid6 sdg1[2] sdi1[1] sdh1[5] sdf1[4] sde1[0]
      7813500928 blocks super 1.2 level 6, 512k chunk, algorithm 2 [6/5] [UUU_UU]
      bitmap: 0/15 pages [0KB], 65536KB chunk

unused devices: <none>

Проверяю диски, входящие в массив:

Код: [Выделить]

# mdadm -E /dev/sde1
/dev/sde1:
          Magic : a92b4efc
        Version : 1.2
    Feature Map : 0x1
     Array UUID : fb7b1700:013ae4a6:34ee1e9c:b708e127
           Name : MediaServer:1  (local to host MediaServer)
  Creation Time : Mon Apr 24 21:20:42 2017
     Raid Level : raid6
   Raid Devices : 6

 Avail Dev Size : 3906750640 (1862.88 GiB 2000.26 GB)
     Array Size : 7813500928 (7451.54 GiB 8001.02 GB)
  Used Dev Size : 3906750464 (1862.88 GiB 2000.26 GB)
    Data Offset : 262144 sectors
   Super Offset : 8 sectors
   Unused Space : before=262056 sectors, after=176 sectors
          State : clean
    Device UUID : 10b31c65:32c11330:738f138e:bb1fb36b

Internal Bitmap : 8 sectors from superblock
    Update Time : Mon Apr 24 21:20:42 2017
  Bad Block Log : 512 entries available at offset 72 sectors
       Checksum : 3d205742 - correct
         Events : 0

         Layout : left-symmetric
     Chunk Size : 512K

   Device Role : Active device 0
   Array State : AAA.AA ('A' == active, '.' == missing, 'R' == replacing)


Код: [Выделить]

# mdadm -E /dev/sdi1
/dev/sdi1:
          Magic : a92b4efc
        Version : 1.2
    Feature Map : 0x1
     Array UUID : fb7b1700:013ae4a6:34ee1e9c:b708e127
           Name : MediaServer:1  (local to host MediaServer)
  Creation Time : Mon Apr 24 21:20:42 2017
     Raid Level : raid6
   Raid Devices : 6

 Avail Dev Size : 3906750640 (1862.88 GiB 2000.26 GB)
     Array Size : 7813500928 (7451.54 GiB 8001.02 GB)
  Used Dev Size : 3906750464 (1862.88 GiB 2000.26 GB)
    Data Offset : 262144 sectors
   Super Offset : 8 sectors
   Unused Space : before=262056 sectors, after=176 sectors
          State : clean
    Device UUID : 95d05900:8fd24c89:df99e80f:f38e16eb

Internal Bitmap : 8 sectors from superblock
    Update Time : Mon Apr 24 21:20:42 2017
  Bad Block Log : 512 entries available at offset 72 sectors
       Checksum : 32ceffc9 - correct
         Events : 0

         Layout : left-symmetric
     Chunk Size : 512K

   Device Role : Active device 1
   Array State : AAA.AA ('A' == active, '.' == missing, 'R' == replacing)


Код: [Выделить]

# mdadm -E /dev/sdg1
/dev/sdg1:
          Magic : a92b4efc
        Version : 1.2
    Feature Map : 0x1
     Array UUID : fb7b1700:013ae4a6:34ee1e9c:b708e127
           Name : MediaServer:1  (local to host MediaServer)
  Creation Time : Mon Apr 24 21:20:42 2017
     Raid Level : raid6
   Raid Devices : 6

 Avail Dev Size : 3906750640 (1862.88 GiB 2000.26 GB)
     Array Size : 7813500928 (7451.54 GiB 8001.02 GB)
  Used Dev Size : 3906750464 (1862.88 GiB 2000.26 GB)
    Data Offset : 262144 sectors
   Super Offset : 8 sectors
   Unused Space : before=262056 sectors, after=176 sectors
          State : clean
    Device UUID : cfc0fe58:093f7173:5e49e3b9:56a6d712

Internal Bitmap : 8 sectors from superblock
    Update Time : Mon Apr 24 21:20:42 2017
  Bad Block Log : 512 entries available at offset 72 sectors
       Checksum : 47542360 - correct
         Events : 0

         Layout : left-symmetric
     Chunk Size : 512K

   Device Role : Active device 2
   Array State : AAA.AA ('A' == active, '.' == missing, 'R' == replacing)


Код: [Выделить]

# mdadm -E /dev/sdf1
/dev/sdf1:
          Magic : a92b4efc
        Version : 1.2
    Feature Map : 0x1
     Array UUID : fb7b1700:013ae4a6:34ee1e9c:b708e127
           Name : MediaServer:1  (local to host MediaServer)
  Creation Time : Mon Apr 24 21:20:42 2017
     Raid Level : raid6
   Raid Devices : 6

 Avail Dev Size : 3906750640 (1862.88 GiB 2000.26 GB)
     Array Size : 7813500928 (7451.54 GiB 8001.02 GB)
  Used Dev Size : 3906750464 (1862.88 GiB 2000.26 GB)
    Data Offset : 262144 sectors
   Super Offset : 8 sectors
   Unused Space : before=262056 sectors, after=176 sectors
          State : clean
    Device UUID : d3bcc6fd:09cb5ffb:1673a3f8:1b734c78

Internal Bitmap : 8 sectors from superblock
    Update Time : Mon Apr 24 21:20:42 2017
  Bad Block Log : 512 entries available at offset 72 sectors
       Checksum : 183fa1e5 - correct
         Events : 0

         Layout : left-symmetric
     Chunk Size : 512K

   Device Role : Active device 4
   Array State : AAA.AA ('A' == active, '.' == missing, 'R' == replacing)


Код: [Выделить]

# mdadm -E /dev/sdh1
/dev/sdh1:
          Magic : a92b4efc
        Version : 1.2
    Feature Map : 0x1
     Array UUID : fb7b1700:013ae4a6:34ee1e9c:b708e127
           Name : MediaServer:1  (local to host MediaServer)
  Creation Time : Mon Apr 24 21:20:42 2017
     Raid Level : raid6
   Raid Devices : 6

 Avail Dev Size : 3906750640 (1862.88 GiB 2000.26 GB)
     Array Size : 7813500928 (7451.54 GiB 8001.02 GB)
  Used Dev Size : 3906750464 (1862.88 GiB 2000.26 GB)
    Data Offset : 262144 sectors
   Super Offset : 8 sectors
   Unused Space : before=262056 sectors, after=176 sectors
          State : clean
    Device UUID : f6b540d3:d32f43f1:a8fe60d8:231f4595

Internal Bitmap : 8 sectors from superblock
    Update Time : Mon Apr 24 21:20:42 2017
  Bad Block Log : 512 entries available at offset 72 sectors
       Checksum : e053376c - correct
         Events : 0

         Layout : left-symmetric
     Chunk Size : 512K

   Device Role : Active device 5
   Array State : AAA.AA ('A' == active, '.' == missing, 'R' == replacing)

Вроде все ОК, Пытаюсь пересобрать массив:

Код: [Выделить]

# mdadm -S /dev/md127
mdadm: stopped /dev/md127
# mdadm --assemble --scan

Никакого результата. Второй массив не появляется. Пытаюсь второй раз:

Код: [Выделить]

mdadm --assemble --scan -v
mdadm: looking for devices for /dev/md/0
mdadm: No super block found on /dev/md/0 (Expected magic a92b4efc, got 00000401)
mdadm: no RAID superblock on /dev/md/0
mdadm: No super block found on /dev/sdk5 (Expected magic a92b4efc, got 00000405)
mdadm: no RAID superblock on /dev/sdk5
mdadm: /dev/sdk2 is too small for md: size is 2 sectors.
mdadm: no RAID superblock on /dev/sdk2
mdadm: No super block found on /dev/sdk1 (Expected magic a92b4efc, got 20222222)
mdadm: no RAID superblock on /dev/sdk1
mdadm: No super block found on /dev/sdk (Expected magic a92b4efc, got 6ab0e607)
mdadm: no RAID superblock on /dev/sdk
mdadm: cannot open device /dev/sr0: No medium found
mdadm: /dev/sdj1 is busy - skipping
mdadm: No super block found on /dev/sdj (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdj
mdadm: /dev/sdi1 has wrong uuid.
mdadm: No super block found on /dev/sdi (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdi
mdadm: /dev/sdh1 has wrong uuid.
mdadm: No super block found on /dev/sdh (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdh
mdadm: /dev/sdg1 has wrong uuid.
mdadm: No super block found on /dev/sdg (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdg
mdadm: /dev/sdf1 has wrong uuid.
mdadm: No super block found on /dev/sdf (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdf
mdadm: /dev/sde1 has wrong uuid.
mdadm: No super block found on /dev/sde (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sde
mdadm: /dev/sdd1 is busy - skipping
mdadm: No super block found on /dev/sdd (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdd
mdadm: /dev/sdc1 is busy - skipping
mdadm: No super block found on /dev/sdc (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdc
mdadm: /dev/sdb1 is busy - skipping
mdadm: No super block found on /dev/sdb (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sdb
mdadm: /dev/sda1 is busy - skipping
mdadm: No super block found on /dev/sda (Expected magic a92b4efc, got 00000000)
mdadm: no RAID superblock on /dev/sda

Подскажите пожалуйста, есть шанс завести массив? Или уже все? И в чем может быть причина неработоспособности? Впринципе, самое важное, что было на этом массиве забэкаплено, однако есть кое какая информация, которую потерять некритично, но все же нежелательно.

Заранее благодарю