Скорость дисковой подсистемы Proxmox

[golive]

Скорость дисковой подсистемы не превышает 70 МБ/сек. Можно как-то повысить?
конфиг: софтовый Raid1 mdadm, диски GPT, файловая система Ext3, формат виртуалок RAW + Virtio драйвера, кэш - отключен, виртуалки хранятся на одном разделе, LVM не использую.
На ESXI с хардварным зеркальным рейдом скорость около 200 МБ/сек.

[oermolaev]

golive,
а каким образом измеряете?

У меня на хосте в ext4 - 56,2 MB/c, в ext3 - 43,6 MB/c
В виртуальной машине OpenVZ в ext3 - 44,9 MB/c
Возможны погрешности в измерениях. Какова ваша методика?

[golive]

# dd if=/dev/sda of=/dev/null bs=1024k count=1024 1024+0 records in 1024+0 records out 1073741824 bytes (1.1 GB) copied, 5.67747 s, 189 MB/s

# dd if=/dev/md5 of=/dev/null bs=1024k count=1024 1024+0 records in 1024+0 records out 1073741824 bytes (1.1 GB) copied, 5.7245 s, 188 MB/s

# sync;dd if=/dev/zero of=/usr/data#1/tempfile bs=1M count=1024;sync 1024+0 records in 1024+0 records out 1073741824 bytes (1.1 GB) copied, 6.85525 s, 157 MB/s (Это как раз примонтированный рейд1 в каталог data#1)

hdparm -tT /dev/sda

/dev/sda: Timing cached reads: 13174 MB in 2.00 seconds = 6594.29 MB/sec Timing buffered disk reads: 544 MB in 3.01 seconds = 180.81 MB/sec

Скорость копирования в гостевой Win7 - 70 MB/s

[oermolaev]

Вот в этой части, полагаю, тест необъективен:

# dd if=/dev/sda of=/dev/null bs=1024k count=1024 1024+0 records in 1024+0 records out 1073741824 bytes (1.1 GB) copied, 5.67747 s, 189 MB/s

Так как, могу похвастаться такими фантастическими результатами:

Код: [Выделить]

~# dd if=/dev/md1 of=/dev/null bs=1024k count=1024
1024+0 записей считано
1024+0 записей написано
 скопировано 1073741824 байта (1,1 GB), 0,550684 c, 1,9 GB/c

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

~# hdparm -tT /dev/sda

/dev/sda:
 Timing cached reads:   3196 MB in  2.00 seconds = 1597.82 MB/sec
 Timing buffered disk reads: 622 MB in  3.01 seconds = 206.70 MB/sec
~# hdparm -tT /dev/sdb

/dev/sdb:
 Timing cached reads:   3186 MB in  2.00 seconds = 1592.98 MB/sec
 Timing buffered disk reads: 604 MB in  3.01 seconds = 200.83 MB/sec

~# hdparm -tT /dev/md1

/dev/md1:
 Timing cached reads:   3240 MB in  2.00 seconds = 1620.04 MB/sec
 Timing buffered disk reads: 624 MB in  3.00 seconds = 207.84 MB/sec

А этот ваш тест также необъективен:

/dev/sda: Timing cached reads: 13174 MB in 2.00 seconds = 6594.29 MB/sec Timing buffered disk reads: 544 MB in 3.01 seconds = 180.81 MB/sec

поскольку, с увеличением объёма данных видим что результат может различаться почти в три раза:

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

~# sync;dd if=/dev/zero of=/var/lib/vz/dump/temp.file bs=1M count=1024;sync
1024+0 записей считано
1024+0 записей написано
 скопировано 1073741824 байта (1,1 GB), 9,57658 c, 112 MB/c
~# sync;dd if=/dev/zero of=/var/lib/vz/dump/temp1.file bs=1M count=10240;sync
10240+0 записей считано
10240+0 записей написано
 скопировано 10737418240 байт (11 GB), 247,477 c, 43,4 MB/c

[golive]

ну так выход то из этого положения какой?

[oermolaev]

Если бы я знал наверняка - я бы с того и начал
А вообще, я пользовался вот этими рекомендациями

[golive]

да этот мануал я видел...по поводу скорости...есть вариант поставить LVM на рейд и в нем уже держать виртуалки.

[oermolaev]

У меня lvm. Но какие надежды вы на него питаете? Скорости уж точно не прибавит.
А по поводу скорости - может вы уже достигли своего высшего предела? 
Я так понимаю, производительность дисковой подсистемы зависит не только от самих дисков.

(Нажмите, чтобы показать/скрыть)

4xIntel(R)Celeron(R) CPU J1900 @ 1.99GHz (1 Socket) => 46,6 MB/c
4xIntel(R)Core(TM)2 Quad CPU Q9300 @ 2.50GHz (1 Socket) => 79,9 MB/c
Винты и ОС одинаковые

[golive]

да вот не знаю даже...на соседнем сервере ESXI, скорость около 200, правда рейд хардварный, но без батарейки. Вообщем погоняю данные как есть, а там если что, то Raid10 соберу. Спасибо за общение!!!

[oermolaev]

golive,
вот на такую старенькую машинку

(Нажмите, чтобы показать/скрыть)

# lshw -short
H/W path         Device     Class       Description
===================================================
                            system      System Product Name (To Be Filled By O.E.M.)
/0                          bus         P5KPL-CM
/0/0                        memory      64KiB BIOS
/0/4                        processor   Pentium(R) Dual-Core  CPU      E5300  @ 2.60GHz
/0/4/5                      memory      64KiB L1 cache
/0/4/6                      memory      2MiB L2 cache
/0/32                       memory      2GiB System Memory
/0/32/0                     memory      1GiB DIMM DDR2 Synchronous 800 MHz (1,2 ns)
/0/32/1                     memory      1GiB DIMM DDR2 Synchronous 800 MHz (1,2 ns)
/0/100                      bridge      82G33/G31/P35/P31 Express DRAM Controller
/0/100/2                    display     82G33/G31 Express Integrated Graphics Controller
/0/100/1b                   multimedia  NM10/ICH7 Family High Definition Audio Controller
/0/100/1c                   bridge      NM10/ICH7 Family PCI Express Port 1
/0/100/1c.1                 bridge      NM10/ICH7 Family PCI Express Port 2
/0/100/1c.1/0    eth0       network     AR8121/AR8113/AR8114 Gigabit or Fast Ethernet
/0/100/1d                   bus         NM10/ICH7 Family USB UHCI Controller #1
/0/100/1d.1                 bus         NM10/ICH7 Family USB UHCI Controller #2
/0/100/1d.2                 bus         NM10/ICH7 Family USB UHCI Controller #3
/0/100/1d.3                 bus         NM10/ICH7 Family USB UHCI Controller #4
/0/100/1d.7                 bus         NM10/ICH7 Family USB2 EHCI Controller
/0/100/1e                   bridge      82801 PCI Bridge
/0/100/1f                   bridge      82801GB/GR (ICH7 Family) LPC Interface Bridge
/0/100/1f.1                 storage     82801G (ICH7 Family) IDE Controller
/0/100/1f.2      scsi2      storage     NM10/ICH7 Family SATA Controller [IDE mode]
/0/100/1f.2/0    /dev/sda   disk        500GB ST500DM002-1BC14
/0/100/1f.2/0/1  /dev/sda1  volume      1023KiB BIOS Boot partition
/0/100/1f.2/0/2  /dev/sda2  volume      127MiB Windows FAT volume
/0/100/1f.2/0/3  /dev/sda3  volume      465GiB EFI partition
/0/100/1f.2/1    /dev/sdb   disk        500GB ST3500630NS
/0/100/1f.2/1/1  /dev/sdb1  volume      1023KiB BIOS Boot partition
/0/100/1f.2/1/2  /dev/sdb2  volume      127MiB Windows FAT volume
/0/100/1f.2/1/3  /dev/sdb3  volume      465GiB EFI partition
/0/100/1f.2/2    /dev/sdc   disk        500GB ST3500413AS
/0/100/1f.2/2/1  /dev/sdc1  volume      465GiB OS X ZFS partition or Solaris /usr partition
/0/100/1f.2/2/9  /dev/sdc9  volume      8191KiB reserved partition
/0/100/1f.2/3    /dev/sdd   disk        500GB ST3500630NS
/0/100/1f.2/3/1  /dev/sdd1  volume      465GiB OS X ZFS partition or Solaris /usr partition
/0/100/1f.2/3/9  /dev/sdd9  volume      8191KiB reserved partition
/0/100/1f.3                 bus         NM10/ICH7 Family SMBus Controller

установил последний ProxMox и получил такие результаты:

Код: [Выделить]

# sync;dd if=/dev/zero of=/var/lib/vz/dump/temp1.file bs=1M count=102400;sync
102400+0 записей считано
102400+0 записей написано
 скопировано 107374182400 байт (107 GB), 168,992 c, 635 MB/c