Злая пергрузка диска на чтение при нехватке RAM (НЕ SWAP!) - как вылечить?

[S-trace]

Здравствуйте.

У меня стоит Kubuntu 13.10 AMD64, на компьютере 2 Гб оперативной памяти.

При загрузке памяти примерно до 75% система начинает странно себя вести - возникает бешеная нагрузка на дисковую подсистему (на чтение) - вплоть до 270 МБ/c (физический предел установленного диска), в результате чего начинает очень сильно тормозить вся система (вплоть до курсора мышки на экране), а если не принять срочных мер к освобождению памяти - система вообще подвисает (с непрерывно горящим индикатором активности диска), и остаётся только нажать Alt+SysRQ+F чтобы заставить систему убить сожравшую много памяти программу (чаще всего это оказывается один из процессов Chromium, как наиболее любящего память приложения).

Странно то, что по показаниям iotop жрёт диск в основном всё тот же (к примеру) Chromium.
https://dl.dropboxusercontent.com/u/100376233/slowdown.png - скриншот состояния top и iotop незадолго до подвисания системы.

При этом это не SWAP - его отключение не исправляет проблему.

Как выяснить причину этого явления и побороть его?
И почему в данной ситуации не срабатывает OOM-killer? На мой взгляд, проще было бы если бы зажравшаяся программа быстренько здохла и не мешала жить другим.

Также наблюдаются странные явления связанные с памятью и SWAP, к примеру невозможность отключения SWAP:

Код: [Выделить]

Чт. марта 13 15:26:55-root@desktop:/proc/sys/vm
^_^ free -m
             total       used       free     shared    buffers     cached
Память:       2001       1914         87          0          0        569
-/+ буферы/кэш:       1344        657
Swap:         4095         93       4002

Чт. марта 13 15:26:56-root@desktop:/proc/sys/vm
^_^ swapoff -a
swapoff: /dev/sdb1: не удалось выполнить swapoff: Невозможно выделить память
И полностью непонятное поведение при отключении SWAP:

Код: [Выделить]

Чт. марта 13 15:41:53-root@desktop:/proc/sys/vm
^_^ free -m
             total       used       free     shared    buffers     cached
Память:       2001       1470        530          0          3        363
-/+ буферы/кэш:       1103        898
Swap:         4095        572       3523

Чт. марта 13 15:42:03-root@desktop:/proc/sys/vm
^_^ swapoff -a

Чт. марта 13 15:42:26-root@desktop:/proc/sys/vm
^_^ free -m
             total       used       free     shared    buffers     cached
Память:       2001       1863        138          0          4        831
-/+ буферы/кэш:       1027        974
Swap:            0          0          0
Почему до отключения SWAP было занято 1103 мегабайта, а после отключения SWAP (и соответственно, по идее - перекачки всех данных из него в количестве 572 мегабайт в оперативку) стало занято 1027 мегабайт?

Спасибо.

[mahinist]

Когда это началось и  что за процессор на ПК
 

Код: [Выделить]

cat /proc/cpuinfo  ?

[S-trace]

Чт. марта 13 17:10:37-root@desktop:/proc/sys/vm
O_O cat /proc/cpuinfo

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

processor       : 0
vendor_id       : GenuineIntel
cpu family      : 6
model           : 23
model name      : Pentium(R) Dual-Core  CPU      E5300  @ 2.60GHz
stepping        : 10
microcode       : 0xa07
cpu MHz         : 1200.000
cache size      : 2048 KB
physical id     : 0
siblings        : 2
core id         : 0
cpu cores       : 2
apicid          : 0
initial apicid  : 0
fpu             : yes
fpu_exception   : yes
cpuid level     : 13
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe syscall nx lm constant_tsc arch_perfmon pebs bts rep_good nopl aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm xsave lahf_lm dtherm tpr_shadow vnmi flexpriority
bogomips        : 7043.04
clflush size    : 64
cache_alignment : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor       : 1
vendor_id       : GenuineIntel
cpu family      : 6
model           : 23
model name      : Pentium(R) Dual-Core  CPU      E5300  @ 2.60GHz
stepping        : 10
microcode       : 0xa07
cpu MHz         : 1200.000
cache size      : 2048 KB
physical id     : 0
siblings        : 2
core id         : 1
cpu cores       : 2
apicid          : 1
initial apicid  : 1
fpu             : yes
fpu_exception   : yes
cpuid level     : 13
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe syscall nx lm constant_tsc arch_perfmon pebs bts rep_good nopl aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm xsave lahf_lm dtherm tpr_shadow vnmi flexpriority
bogomips        : 7043.04
clflush size    : 64
cache_alignment : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

Началось сильнее с того момента, как система переехала на SSD, но в той или иной мере было всегда

[mahinist]

S-trace

Совет -  можно попробовать добавить оперативы - 1ГБ (для этого процессора по моему нет смысла более 3ГБ ставить)  или перейти на более легкие версии ubuntu 
 

[S-trace]

Думаю, что это не поможет. Хотя, могу в принципе попробовать добавить (как раз есть плашка на гиг в соседнем компе).

[mahinist]

Вот процессор у моего ПК с оперативой 6гб -

(Нажмите, чтобы показать/скрыть)

v@v-53:~$ cat /proc/cpuinfo
processor   : 0
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 0
cpu cores   : 4
apicid      : 0
initial apicid   : 0
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 1
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 1
cpu cores   : 4
apicid      : 2
initial apicid   : 2
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 2
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 2
cpu cores   : 4
apicid      : 4
initial apicid   : 4
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 3
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 3
cpu cores   : 4
apicid      : 6
initial apicid   : 6
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 4
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 0
cpu cores   : 4
apicid      : 1
initial apicid   : 1
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 5
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 1
cpu cores   : 4
apicid      : 3
initial apicid   : 3
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 6
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 2
cpu cores   : 4
apicid      : 5
initial apicid   : 5
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

processor   : 7
vendor_id   : GenuineIntel
cpu family   : 6
model      : 26
model name   : Intel(R) Core(TM) i7 CPU         950  @ 3.07GHz
stepping   : 5
microcode   : 0x11
cpu MHz      : 1596.000
cache size   : 8192 KB
physical id   : 0
siblings   : 8
core id      : 3
cpu cores   : 4
apicid      : 7
initial apicid   : 7
fdiv_bug   : no
f00f_bug   : no
coma_bug   : no
fpu      : yes
fpu_exception   : yes
cpuid level   : 11
wp      : yes
flags      : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe nx rdtscp lm constant_tsc arch_perfmon pebs bts xtopology nonstop_tsc aperfmperf pni dtes64 monitor ds_cpl vmx est tm2 ssse3 cx16 xtpr pdcm sse4_1 sse4_2 popcnt lahf_lm ida dtherm tpr_shadow vnmi flexpriority ept vpid
bogomips   : 6207.28
clflush size   : 64
cache_alignment   : 64
address sizes   : 36 bits physical, 48 bits virtual
power management:

v@v-53:~$

Так вот , когда устанавливал ДЕ KDE и при средней загрузке ,  оперативы сжирало  до 1,5 - 1,7 гб 

[hon]

swap может быть невозможно отключить например, если свободной память 100 МиБ, а в свопе 150 МиБ. Что будет если пожить без swap? Если chromium не запускать, то все нормально?

[mahinist]

swap может быть невозможно отключить например, если свободной память 100 МиБ, а в свопе 150 МиБ. Что будет если пожить без swap? Если chromium не запускать, то все нормально?

Если я правильно понял на ПК у ТС установлена   kubuntu -64  , тогда  вооще - swap не нужен

[S-trace]

Во первых неясно, чем процессор вообще может влиять на поведение подсистемы памяти. Архитектуру я привёл лишь для того, чтобы можно было исключить архитектурно-зависимые глюки. На ноуте крутится такая же Kubuntu AMD64, тоже на 2 Гб памяти - там такого аномального поведения дисковой подсистемы нет. Кончилась память - начал свопиться. Просвопился - приложение на переднем плане продолжает работать нормально, пока не потребуется память что свопнулась на диск (ессно, после этого тормоза на время своппинга обратно). Отключил своп, кончилась память - процесс жручий здох тихо-мирно и всё снова хорошо...

Надо кстати протестировать данную ОС на ноуте путём пересадки SSD. Но, боюсь что баг аппаратно-специфичный, потому как комп проблемный этот поражён бедой под именем 12309((

[soarin]

http://lurkmore.to/12309

[S-trace]

swap может быть невозможно отключить например, если свободной память 100 МиБ, а в свопе 150 МиБ. Что будет если пожить без swap? Если chromium не запускать, то все нормально?

Chromium тут не при чём (просто как образец охочей до рамы программы). Firefox или OOo - та же картина поведения системы. Если без свопа жить - пушной зверёк приходит быстрее (потому как своп хоть немного нивелирует загрузку рамы всяким хламом, складируя данные которые вроде как и нужны, но нафиг никому не сдались).

http://lurkmore.to/12309

Да, под фряхой такого эффекта нет. Но она мало-мало непривычная пока после линукса.

[Tear]

http://lurkmore.to/12309

Тоже так думаю...