BTRFS. Готова ли к использованию в 16.04?

[EvangelionDeath]

ну что господа... Наверное это стоит добавить таки в FAQ.
Сегодня я таки встретился с "врагом" лицо к лицу (скажу честно проявлялось это и ранее, но я так как еще не обжигался, то не придал особого значения происходящему).
И так: при попытке обновления получил - No left space on device. Но как же так... Места полно (больше половины), а оно - неа, нету... После ребута система вообще отказалась загружаться ( ну по крайней мере в GUI, хотя потом и вовсе).

Везде рекомендуют сделать балансировку. Но, увы, да ах, если места нету, то... Нашелся "запасной" неразмеченый раздел, куда и было решено скинуть бэкап и пересоздать фс... но было слишком все медленно. Благо нашлось пару "лишних" файлов и каталогов... Работа восстановлена.

Суть сего: хоть нигде и не написано, что желательно делать балансировку, но делать ее надо, и желательно вовремя, а не тогда, когда надо было еще на вчера

[AnrDaemon]

А что говорит документация? Не может быть, чтобы не было способов реанимации FS в столь тривиальной ситуации.
И, да, простой df на BTRFS показывает фазы луны. Надо смотреть btrfs fs df
Пользователь добавил сообщение 24 Апреля 2018, 12:31:28:

Код: [Выделить]

$ btrfs files df /mnt/transraid/
Data, single: total=846.01GiB, used=679.55GiB
System, single: total=36.00MiB, used=112.00KiB
Metadata, single: total=6.01GiB, used=1.98GiB
Пока живём…

[EvangelionDeath]

А что говорит документация? Не может быть, чтобы не было способов реанимации FS в столь тривиальной ситуации.

Есть... Там так и написано - освободите место, после чего занимайтесь реанимацией.

Код: (bash) [Выделить]

btrfs filesystem df /
Data, single: total=9.00GiB, used=8.57GiB
System, single: total=32.00MiB, used=16.00KiB
Metadata, single: total=1.00GiB, used=432.67MiB
GlobalReserve, single: total=160.00MiB, used=0.00B

btrfs filesystem df /home
Data, single: total=20.00GiB, used=19.49GiB
System, single: total=32.00MiB, used=16.00KiB
Metadata, single: total=512.00MiB, used=179.83MiB
GlobalReserve, single: total=64.00MiB, used=0.00B
Сейчас примерно так. Что самое печальное, пришлось с /home убрать игрушки, сделать fstrim и только после этого пошла балансировка, для балансировки корня удлил пару тестовых сайтов... Короче как-то так... Игрушки вернул на место, балансировка запускается спокойно

А потому: балансировку далеть надо и желательно не забывать о ней

[ALiEN]

EvangelionDeath, точно, забыл)

Код: [Выделить]

sudo btrfs filesystem usage /

(Нажмите, чтобы показать/скрыть)

упс, случайно отредактировал своё предыдущее сообщение вместо создания нового)

[EvangelionDeath]

ALiEN175, у меня / и /home это не только ценный мех subvolume, но и разные разделы =) Потому все правильно.
Реальный размер / - 20GiB, /home - 25GiB. BTRFS занимает не сразу весь раздел, а по мере необходимости

(Нажмите, чтобы показать/скрыть)

Код: (bash) [Выделить]

sudo btrfs filesystem usage /
Overall:
    Device size:   19.07GiB
    Device allocated:   10.03GiB
    Device unallocated:    9.04GiB
    Device missing:      0.00B
    Used:    9.00GiB
    Free (estimated):    9.47GiB (min: 9.47GiB)
    Data ratio:       1.00
    Metadata ratio:       1.00
    Global reserve: 160.00MiB (used: 0.00B)

Data,single: Size:9.00GiB, Used:8.57GiB
   /dev/sda4    9.00GiB

Metadata,single: Size:1.00GiB, Used:432.67MiB
   /dev/sda4    1.00GiB

System,single: Size:32.00MiB, Used:16.00KiB
   /dev/sda4   32.00MiB

Unallocated:
   /dev/sda4    9.04GiB


sudo btrfs filesystem usage /home
Overall:
    Device size:   23.84GiB
    Device allocated:   20.53GiB
    Device unallocated:    3.31GiB
    Device missing:      0.00B
    Used:   19.67GiB
    Free (estimated):    3.82GiB (min: 3.82GiB)
    Data ratio:       1.00
    Metadata ratio:       1.00
    Global reserve:   64.00MiB (used: 0.00B)

Data,single: Size:20.00GiB, Used:19.49GiB
   /dev/sda5   20.00GiB

Metadata,single: Size:512.00MiB, Used:179.59MiB
   /dev/sda5 512.00MiB

System,single: Size:32.00MiB, Used:16.00KiB
   /dev/sda5   32.00MiB

Unallocated:
   /dev/sda5    3.31GiB



[ALiEN]

EvangelionDeath, а что такое было-то? метадата сожрала место?

(Нажмите, чтобы показать/скрыть)

У себя на виртуалке запустил баланс -
До:
Data, single: total=6.51GiB, used=4.24GiB
System, DUP: total=32.00MiB, used=16.00KiB
Metadata, DUP: total=665.56MiB, used=147.92MiB
GlobalReserve, single: total=16.00MiB, used=0.00B

После:
Data, single: total=4.88GiB, used=4.23GiB
System, DUP: total=32.00MiB, used=16.00KiB
Metadata, DUP: total=256.00MiB, used=148.39MiB
GlobalReserve, single: total=16.00MiB, used=0.00B

[EvangelionDeath]

ALiEN175, может быть))) Это было рано утром... Еще и времени особо не было, что бы записывать все (на все про все было лишь менее 30 минут к началу рабочего дня, а то четко по графику еще надо было попасть на онлайн конференцию). То есть, как выше написал: это надо было сделать еще на вчера.

Но по факту, даже у тебя на виртуалке видно, что после баланса свободного места стало почти на 2ГБ больше. Я же балансировку не делал 2 года (с момента установки)

Да, теперь после балансировки и fstrim стал в разы шустрее

Добавил в wiki инфу, что балансировку делать нужно... Любая ФС требует к себе внимания)

[Venom13]

Больше 2х лет назад ставил систему.
На SSD никаких нареканий нет..
Часто пользуюсь снепшотами, особенно на этапе тестирования Ubuntu.
Ни разу не делал балансировку.

Прочитал последние сообщения - решил сделать.
Сходу не получилось.
Ругалось на нехватку места.
1/3 раздела свободна - а места недостаточно.. 
На втором разделе половина свободна, то же самое.
По удалял все снепшоны.. Пошло.

Сделал довольно быстро. 3-4 минуты.
После этого fstrim и перезагрузка...

После первой перезагрузки все начало дико тупить.
Причем как-то набегами.. 1-2 операции моментально, 3-я залипает на несколько секунд....

Вторая перезагрузка все починила.
По ощущениям работает так-же как и до балансировки.

Ну да ладно. Главное не хуже.. 

Следующую балансировку буду делать еще года через 3.... 

[AnrDaemon]

1/3 раздела свободна - а места недостаточно.. 

Ещё раз - как именно смотрели свободное место?

[EvangelionDeath]

Ещё раз - как именно смотрели свободное место?

походу через df -h =)

[Venom13]

Ещё раз - как именно смотрели свободное место?

походу через df -h =)

Проверял разными способами, когда словил ошибку нехватки места.

Но допустим только df -h ..
А что не так то?

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

root@iBug:/mnt# df -h ./root
Файл.система   Размер Использовано  Дост Использовано% Cмонтировано в
/dev/sda4         21G          11G  9,7G           52% /mnt/root

root@iBug:/mnt# btrfs filesystem df ./root
Data, single: total=10.00GiB, used=9.58GiB
System, single: total=32.00MiB, used=16.00KiB
Metadata, single: total=768.00MiB, used=454.33MiB
GlobalReserve, single: total=38.19MiB, used=0.00B

root@iBug:/mnt# btrfs filesystem usage ./root
Overall:
    Device size:   20.00GiB
    Device allocated:   10.78GiB
    Device unallocated:    9.22GiB
    Device missing:      0.00B
    Used:   10.02GiB
    Free (estimated):    9.64GiB (min: 9.64GiB)
    Data ratio:       1.00
    Metadata ratio:       1.00
    Global reserve:   38.19MiB (used: 0.00B)

Data,single: Size:10.00GiB, Used:9.58GiB
   /dev/sda4   10.00GiB

Metadata,single: Size:768.00MiB, Used:454.33MiB
   /dev/sda4 768.00MiB

System,single: Size:32.00MiB, Used:16.00KiB
   /dev/sda4   32.00MiB

Unallocated:
   /dev/sda4    9.22GiB


Уже года полтора как df -h показывает довольно правильно. Погрешность незначительна.
Исключение - многодисковые массивы, с дисками разных размеров и режимом хранения не single..
Там да, нехватку места можно схватить довольно неожиданно.
Если своевременно не балансировать...

А на однодисковой конфигурации в режиме single,
свободного места может оказаться только больше чем показывают все 3 утилиты.
Например..
Свободно 10 Gb.
Скопировали туда 6 Gb данных, и стало свободно 6 Gb...
Такая магия бывает из-за сжатия налету.

[AnrDaemon]

df МОЖЕТ врать, особенно на разделах с нерегулярной структурой.
Сейчас, конечно, уже бесполезно что-то обсуждать, смотреть надо было до того, как всё перелопатили.

[ALiEN]

смотреть надо было до того, как всё перелопатили.

интересно, а можно ли как-то "воспроизвести" ситуацию?

[pfg21]

тож была мысля поиграться с граничными состояниями бутера.
создать маленькую файлову систему в памяти и натравить на нее кучу записей перезаписей и посмотреть что там CoW наделает...

кстати есть утилита чтобы перезаписывать содержимое файла без измения размеров ??
т.е. записать в существующий файл какие либо данные в середину файла, не дописать и не перезаписать.
что спросил сам не понял...

[ALiEN]

pfg21, хм. Принципиально в середину?

Код: [Выделить]

for i in {1..100}; do head --bytes=100M /dev/urandom > file ;doneПользователь добавил сообщение 25 Апреля 2018, 17:52:28:хотя, нет. Перезапись получается.