Установка Ubuntu 12.04 server на UEFI + MD RAID

[thunderamur]

Имею мат. плату Asus с UEFI, 3 HDD.
Создал EFIboot раздел на всех 3-х дисках, чтобы RAID ровный был.

EFIboot (100 MB) (sd a/b/c 1)
RAID5 (10 GB) / (sd a/b/c 2)
RAID0 (33 GB) swap (sd a/b/c 3)
RAID5 (4 TB) /mnt/data (sd a/b/c 4)

При загрузке вылезла консоль GRUB. Как правильно ставить?

[rudra108]

swap в рейд собирать не надо, а вот boot сделай рейд 1, или просто на 1 диск поставь, а на остальные пустые разделы потом руками установишь.

[thunderamur]

swap в рейд собирать не надо

думаю не в этом трабла

а вот boot сделай рейд 1, или просто на 1 диск поставь, а на остальные пустые разделы потом руками установишь.

Думаешь проблема с загрузкой из-за того, что /boot на RAID5? И на RAID1 будем норм?

[rudra108]

⚡ Thunde® ⚡,
ну с райд 1 должно грузится нормально, у меня по крайне мере грузится, думаю могут возникнуть некоторые траблы с UEFI, по этому и предлагаю бут просто на один диск сделать, а потом уже поставить на остальные

[thunderamur]

В общем, нашел в UEFI настройку, позволяющую включить legacy загрузку.
После чего загрузка после установки пошла.

RAID1 - /boot
подкачка
RAID5 - /
RAID5 - /mnt/data

Вроде загрузка пошла, но уже несколько минут черный экран и горящий индикатор работы диска. Это нормально для RAID5? Мб массив собирается, объемы то больше /mnt/data (2+2+2 == 4 TB RAID5).

[rudra108]

⚡ Thunde® ⚡,
собирается во время установки, если объём большой, то может долго собираться, у меня 6 дисков по 2 тб часов 12 собирались в 5 рейд
Пользователь решил продолжить мысль 30 Мая 2013, 12:23:53:имеет смысл поставить систему и не собирать RAID5 - /mnt/data, а сделать это на уже установленной системе, и пока он собираться заняться дальнейшей настройкой.

[thunderamur]

rudra108,
При установке не было задержки на сборку массива. Точнее она наверное была, но только для / (который всего 10 ГБ (5+5+5)), а большой массив для данных на 4 ТБ собирается при первом монтировании, т.е. как раз сейчас.

Выходит в моем случае это дело на 4-5 часов. Оставлю на ночь, у меня уже 18.30 время.

[rudra108]

⚡ Thunde® ⚡,
да наверное, он же пустой был, а при старте системы какраз инициализировался

[thunderamur]

rudra108,
можешь показать

Код: [Выделить]

tiotest -d /своего массива, а то чота у меня мало показывает, всего в 1.5 раза быстрее чем диск на 1 ТБ.

Я в итоге сделал RAID10 из 4-х дисков на 2ТБ.

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

Tiotest results for 4 concurrent io threads:
,----------------------------------------------------------------------.
| Item                  | Time     | Rate         | Usr CPU  | Sys CPU |
+-----------------------+----------+--------------+----------+---------+
| Write          40 MBs |    0.2 s | 173.468 MB/s |  13.9 %  |  83.3 % |
| Random Write   16 MBs |    0.6 s |  25.320 MB/s |  41.5 %  |  36.3 % |
| Read           40 MBs |    0.0 s | 10083.186 MB/s | 806.7 %  | 806.8 % |
| Random Read    16 MBs |    0.0 s | 10761.019 MB/s |   0.0 %  | 1101.9 % |
`----------------------------------------------------------------------'
Tiotest latency results:
,-------------------------------------------------------------------------.
| Item         | Average latency | Maximum latency | % >2 sec | % >10 sec |
+--------------+-----------------+-----------------+----------+-----------+
| Write        |        0.004 ms |        0.036 ms |  0.00000 |   0.00000 |
| Random Write |        0.003 ms |        0.016 ms |  0.00000 |   0.00000 |
| Read         |        0.001 ms |        0.028 ms |  0.00000 |   0.00000 |
| Random Read  |        0.001 ms |        0.006 ms |  0.00000 |   0.00000 |
|--------------+-----------------+-----------------+----------+-----------|
| Total        |        0.003 ms |        0.036 ms |  0.00000 |   0.00000 |
`--------------+-----------------+-----------------+----------+-----------'


(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

Tiotest results for 4 concurrent io threads:
,----------------------------------------------------------------------.
| Item                  | Time     | Rate         | Usr CPU  | Sys CPU |
+-----------------------+----------+--------------+----------+---------+
| Write          40 MBs |    0.4 s | 103.932 MB/s |   0.0 %  |  37.4 % |
| Random Write   16 MBs |    1.0 s |  16.026 MB/s |   0.0 %  |   4.9 % |
| Read           40 MBs |    0.0 s | 13684.571 MB/s |   0.0 %  | 1642.1 % |
| Random Read    16 MBs |    0.0 s | 14427.516 MB/s | 1477.4 %  |   0.0 % |
`----------------------------------------------------------------------'
Tiotest latency results:
,-------------------------------------------------------------------------.
| Item         | Average latency | Maximum latency | % >2 sec | % >10 sec |
+--------------+-----------------+-----------------+----------+-----------+
| Write        |        0.002 ms |        0.026 ms |  0.00000 |   0.00000 |
| Random Write |        0.001 ms |        0.315 ms |  0.00000 |   0.00000 |
| Read         |        0.001 ms |        0.162 ms |  0.00000 |   0.00000 |
| Random Read  |        0.001 ms |        0.002 ms |  0.00000 |   0.00000 |
|--------------+-----------------+-----------------+----------+-----------|
| Total        |        0.002 ms |        0.315 ms |  0.00000 |   0.00000 |
`--------------+-----------------+-----------------+----------+-----------'


[rudra108]

⚡ Thunde® ⚡,
у меня медленные диски Western Digital 2 Тб Caviar Green WD20EARX, массивы из 6 дисков, поверх raid 5 lvm.
ну все в работе, (постоянно пишется читается) так что данные не совсем корректны. И колеблются довольно сильно.
raid 10

Код: [Выделить]

Tiotest results for 4 concurrent io threads:
,----------------------------------------------------------------------.
| Item                  | Time     | Rate         | Usr CPU  | Sys CPU |
+-----------------------+----------+--------------+----------+---------+
| Write          40 MBs |    0.5 s |  88.128 MB/s |   5.3 %  |  52.9 % |
| Random Write   16 MBs |    0.4 s |  40.377 MB/s |   0.0 %  |  33.1 % |
| Read           40 MBs |    0.0 s | 5520.287 MB/s |   0.0 %  | 496.9 % |
| Random Read    16 MBs |    0.0 s | 4952.456 MB/s |   0.0 %  | 380.3 % |
`----------------------------------------------------------------------'
Tiotest latency results:
,-------------------------------------------------------------------------.
| Item         | Average latency | Maximum latency | % >2 sec | % >10 sec |
+--------------+-----------------+-----------------+----------+-----------+
| Write        |        0.004 ms |        0.294 ms |  0.00000 |   0.00000 |
| Random Write |        0.004 ms |        3.297 ms |  0.00000 |   0.00000 |
| Read         |        0.001 ms |        0.033 ms |  0.00000 |   0.00000 |
| Random Read  |        0.001 ms |        0.024 ms |  0.00000 |   0.00000 |
|--------------+-----------------+-----------------+----------+-----------|
| Total        |        0.003 ms |        3.297 ms |  0.00000 |   0.00000 |
`--------------+-----------------+-----------------+----------+-----------'raid 5

Код: [Выделить]

tiotest -d /media/raznoe/
Tiotest results for 4 concurrent io threads:
,----------------------------------------------------------------------.
| Item                  | Time     | Rate         | Usr CPU  | Sys CPU |
+-----------------------+----------+--------------+----------+---------+
| Write          40 MBs |   11.5 s |   3.469 MB/s |   0.1 %  |   5.9 % |
| Random Write   16 MBs |    6.2 s |   2.506 MB/s |   0.1 %  |   5.4 % |
| Read           40 MBs |    0.0 s | 1670.495 MB/s |  66.8 %  |  83.5 % |
| Random Read    16 MBs |    0.0 s | 8400.538 MB/s |   0.0 %  | 860.2 % |
`----------------------------------------------------------------------'
Tiotest latency results:
,-------------------------------------------------------------------------.
| Item         | Average latency | Maximum latency | % >2 sec | % >10 sec |
+--------------+-----------------+-----------------+----------+-----------+
| Write        |        0.009 ms |        5.821 ms |  0.00000 |   0.00000 |
| Random Write |        0.010 ms |        0.616 ms |  0.00000 |   0.00000 |
| Read         |        0.004 ms |       20.410 ms |  0.00000 |   0.00000 |
| Random Read  |        0.002 ms |        0.030 ms |  0.00000 |   0.00000 |
|--------------+-----------------+-----------------+----------+-----------|
| Total        |        0.006 ms |       20.410 ms |  0.00000 |   0.00000 |
`--------------+-----------------+-----------------+----------+-----------'

tiotest -d /media/school/
Tiotest results for 4 concurrent io threads:
,----------------------------------------------------------------------.
| Item                  | Time     | Rate         | Usr CPU  | Sys CPU |
+-----------------------+----------+--------------+----------+---------+
| Write          40 MBs |    1.4 s |  28.006 MB/s |   0.0 %  |  40.3 % |
| Random Write   16 MBs |    8.7 s |   1.786 MB/s |   0.0 %  |   3.3 % |
| Read           40 MBs |    0.0 s | 5159.293 MB/s |  51.6 %  | 464.3 % |
| Random Read    16 MBs |    0.0 s | 8333.333 MB/s |   0.0 %  | 1706.9 % |
`----------------------------------------------------------------------'
Tiotest latency results:
,-------------------------------------------------------------------------.
| Item         | Average latency | Maximum latency | % >2 sec | % >10 sec |
+--------------+-----------------+-----------------+----------+-----------+
| Write        |        0.009 ms |        4.914 ms |  0.00000 |   0.00000 |
| Random Write |        0.009 ms |        1.091 ms |  0.00000 |   0.00000 |
| Read         |        0.002 ms |        0.030 ms |  0.00000 |   0.00000 |
| Random Read  |        0.002 ms |        0.026 ms |  0.00000 |   0.00000 |
|--------------+-----------------+-----------------+----------+-----------|
| Total        |        0.005 ms |        4.914 ms |  0.00000 |   0.00000 |
`--------------+-----------------+-----------------+----------+-----------'
spoiler как то криво вставляется 

[thunderamur]

Ясно, я просто ожидал скорости в районе 300, т.к. по отдельности эти диски судя по отзывам жмут под 200 при линейных чтении/записи (там другой тест, поэтому сравнивать в общем-то не очень корректно).
Ну значит, все в порядке, рост от RAID на HDD просто не особый.

А зеленая серия да, никуда не спешат.