Переехать на SSD или оставаться на HDD (много пишется на диск)?

[scsiman]

Пребываю в процессе борьбы с земноводным на тему "переехать на SSD или купить очередной HDD и забить".

Это корень:
$ cat /sys/fs/ext4/sda1/lifetime_write_kbytes
5982442902
(старый винт ещё не умеет Total LBAs Written), что означает примерно 5 петабайт записанных на корень на уровне файловой системы данных. За два с половиной года.

Это /home, винт поновее:
240 Head_Flying_Hours       0x0000   100   253   000    Old_age   Offline      -       9800h+43m+14.281s
241 Total_LBAs_Written      0x0000   100   253   000    Old_age   Offline      -       249863411841381


Ну, вот такой профиль использования машинки.

В соответствии с результатами тестирования разных SSD на 3Д-ньюс (дабы не попасть на рекламу стороннего ресурса, прямую ссылку дам после одобрениия местным начальством), такой объём записи могут прожевать единицы из SSD. Одним из наиболее бюджетных вариантов является Samsung Pro-серии. Да, Optane тоже так может, но он не SATA (принципиально важно). Серверные модели не рассматриваем, ибо бюджет.

В принципе, я знаю, что конкретно люто пишет на диск и могу выносить /var и ещё кое-что на HDD. Но тогда не вижу смысла в SSD (мне плевать, что комп загружается 2 минуты вместо 20 секунд), ибо иного профита я не получу.

Более того:
1. Опять же по 3Д-ньюс, большинство SSD отказало путём окирпичивания и прочитать с них что-то уже было нельзя (кроме того же Optane и неожиданно какого-то дешёвого Crucial). Причём самсунг (850 Pro) у них окирпичился после 7,5 петабайт, никак не показав в мониторинге, что ему становится плохо.
2. Большинство прошедших через меня HDD, сплошь покрытых бэдами, позволяли спасти с себя хоть что-то.
3. Про бэкапы в курсе, на ежедневные нет бюджета, еженедельные актуальны примерно так же, как двухмесячные.

Any ideas?

[ALiEN]

От "окирпичивания" ни один винт не застрахован. RAID в помощь.

(Нажмите, чтобы показать/скрыть)

ну и похвастаюсь 

ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   100   100   051    Pre-fail  Always       -       307
  2 Throughput_Performance  0x0026   252   252   000    Old_age   Always       -       0
  3 Spin_Up_Time            0x0023   093   091   025    Pre-fail  Always       -       2330
  4 Start_Stop_Count        0x0032   098   098   000    Old_age   Always       -       2220
  5 Reallocated_Sector_Ct   0x0033   252   252   010    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   252   252   051    Old_age   Always       -       0
  8 Seek_Time_Performance   0x0024   252   252   015    Old_age   Offline      -       0
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       65025
 10 Spin_Retry_Count        0x0032   252   252   051    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   100   000    Old_age   Always       -       194
 12 Power_Cycle_Count       0x0032   099   099   000    Old_age   Always       -       1747
191 G-Sense_Error_Rate      0x0022   100   100   000    Old_age   Always       -       558
192 Power-Off_Retract_Count 0x0022   252   252   000    Old_age   Always       -       0
194 Temperature_Celsius     0x0002   064   057   000    Old_age   Always       -       34 (Min/Max 11/43)
195 Hardware_ECC_Recovered  0x003a   100   100   000    Old_age   Always       -       0
196 Reallocated_Event_Count 0x0032   252   252   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   252   099   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   252   252   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0036   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x002a   100   100   000    Old_age   Always       -       33
223 Load_Retry_Count        0x0032   100   100   000    Old_age   Always       -       194
225 Load_Cycle_Count        0x0032   001   001   000    Old_age   Always       -       1227826

[Пользователь]

Правильно говорят, что хорошо составленный вопрос содержит половину ответа.

Пребываю в процессе борьбы с земноводным на тему "переехать на SSD или купить очередной HDD и забить".

3. Про бэкапы в курсе, на ежедневные нет бюджета, еженедельные актуальны примерно так же, как двухмесячные.

HDD дешевле, а надежность хранения зависит от админа.

[PahomUbuntu]

Насколько я в курсе, лучше всего на работу с SSD (оптимальность, щадящий режим работы, ориентация на надёжность и долговечность использования и т.п.) НА ТЕКУЩИЙ МОМЕНТ заточена десятая Windows. А линукс, пока что, лучше ставить на HDD. Он на нём будет жить дольше и счастливее.

[ALiEN]

PahomUbuntu, не выдумывайте. Почитайте про ntfs vs btrfs для начала.  И вообще, про винду - оффтоп и холивар..

[EvangelionDeath]

scsiman, покажите таки смарты обоих дисков. меня очень смущают такие показатели смартов (я бы сказал второй меня вообще поверг в шок).

И так, на примере второго диска:
249863411841381 - это 116351.72 (если блок 512 байт) или 930813.74 (блок 4кб) TB.
С помощью несложных манипуляций с калькулятором получаем 11.87 или 94.98 ТБ в час
Далее считаем в секунду 0.003 или 0.026 ТБ в секунду.
Ну как видно это 3ГБ или 26ГБ в секунду. Такое просто невозможно, учитывая, что самые быстрые накопители NVMe пропускают 1,5ТБ на секунду, показатели для SATA куда скромнее. О бюджетных HDD вообще можем молчать, так как там интерфейс максимум SATA3 (3GiB), если воспользоватся калькулятором, то это менее 400 МБ на секунду, вот правда 400 МБ выдаст SSD, а не HDD, у HDD потолок будет в пределах 150 (и это речь далеко не о бюджетных барракудах 10800).
так что никаким способом в любой из существующих HDD столько инфы за 9800 часов попросту не залить


Так, материться нельзя. Но расскоройте тайну, каким Вы калькулятором пользовались?
А то мой говорит, что 5982442902 не более 5 петабайт, а как минимум в 1024 раза меньше - 5982442902kB = 5.57158 TB

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

smartctl 6.5 2016-01-24 r4214 [x86_64-linux-4.4.0-92-generic] (local build)
Copyright (C) 2002-16, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 1
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  5 Reallocated_Sector_Ct   0x0033   100   100   010    Pre-fail  Always       -       0
  9 Power_On_Hours          0x0032   095   095   000    Old_age   Always       -       24020
 12 Power_Cycle_Count       0x0032   099   099   000    Old_age   Always       -       25
177 Wear_Leveling_Count     0x0013   096   096   005    Pre-fail  Always       -       1406
179 Used_Rsvd_Blk_Cnt_Tot   0x0013   100   100   010    Pre-fail  Always       -       0
180 Unused_Rsvd_Blk_Cnt_Tot 0x0013   100   100   010    Pre-fail  Always       -       3863
181 Program_Fail_Cnt_Total  0x0032   100   100   010    Old_age   Always       -       0
182 Erase_Fail_Count_Total  0x0032   100   100   010    Old_age   Always       -       0
183 Runtime_Bad_Block       0x0013   100   100   010    Pre-fail  Always       -       0
184 End-to-End_Error        0x0033   100   100   097    Pre-fail  Always       -       0
187 Reported_Uncorrect      0x0032   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel 0x0032   059   053   000    Old_age   Always       -       41
195 Hardware_ECC_Recovered  0x001a   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   100   100   000    Old_age   Always       -       0
199 UDMA_CRC_Error_Count    0x003e   100   100   000    Old_age   Always       -       0
202 Unknown_SSD_Attribute   0x0033   100   100   010    Pre-fail  Always       -       0
235 Unknown_Attribute       0x0012   099   099   000    Old_age   Always       -       22
241 Total_LBAs_Written      0x0032   099   099   000    Old_age   Always       -       634334619430
242 Total_LBAs_Read         0x0032   099   099   000    Old_age   Always       -       234571819958
243 Unknown_Attribute       0x0032   100   100   000    Old_age   Always       -       0
244 Unknown_Attribute       0x0032   100   100   000    Old_age   Always       -       0
245 Unknown_Attribute       0x0032   100   100   000    Old_age   Always       -       65535
246 Unknown_Attribute       0x0032   100   100   000    Old_age   Always       -       65535
247 Unknown_Attribute       0x0032   100   100   000    Old_age   Always       -       65535
251 Unknown_Attribute       0x0032   100   100   000    Old_age   Always       -       1464879449736


(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  5 Reallocated_Sector_Ct   0x0032   100   100   000    Old_age   Always       -       2
  9 Power_On_Hours_and_Msec 0x0032   100   100   000    Old_age   Always       -       14945h+00m+00.000s
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       1109
170 Available_Reservd_Space 0x0033   078   100   010    Pre-fail  Always       -       0
171 Program_Fail_Count      0x0032   100   100   000    Old_age   Always       -       2
172 Erase_Fail_Count        0x0032   100   100   000    Old_age   Always       -       0
174 Unexpect_Power_Loss_Ct  0x0032   100   100   000    Old_age   Always       -       36
183 SATA_Downshift_Count    0x0032   100   100   000    Old_age   Always       -       1
184 End-to-End_Error        0x0033   100   100   090    Pre-fail  Always       -       0
187 Uncorrectable_Error_Cnt 0x0032   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel 0x0032   031   100   000    Old_age   Always       -       31 (Min/Max 17/49)
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       36
199 UDMA_CRC_Error_Count    0x0032   100   100   000    Old_age   Always       -       39
225 Host_Writes_32MiB       0x0032   100   100   000    Old_age   Always       -       212364
226 Workld_Media_Wear_Indic 0x0032   100   100   000    Old_age   Always       -       17193
227 Workld_Host_Reads_Perc  0x0032   100   100   000    Old_age   Always       -       43
228 Workload_Minutes        0x0032   100   100   000    Old_age   Always       -       878322
232 Available_Reservd_Space 0x0033   078   100   010    Pre-fail  Always       -       0
233 Media_Wearout_Indicator 0x0032   080   100   000    Old_age   Always       -       0
241 Host_Writes_32MiB       0x0032   100   100   000    Old_age   Always       -       212364
242 Host_Reads_32MiB        0x0032   100   100   000    Old_age   Always       -       160766
249 NAND_Writes_1GiB        0x0032   100   100   000    Old_age   Always       -       37627



Пользователь добавил сообщение 18 Декабря 2018, 21:18:39:PahomUbuntu, Вам нужно к нашим админам, на собеседование, срочно. Им это расскажите хД. И сделают из вас пример: "как делать не надо"

(Нажмите, чтобы показать/скрыть)

Для инфы: любая журналируемая ФС пишет данные (метаданные). Вот только в *nix многие журналируемые фс разрешают отключать журнал, так вот ntfs вам такого никогда не позволит!. Так в чем же лучше NTFS? Или ляпнули лишь бы ляпнуть

[scsiman]

EvangelionDeath,

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

$ cat /sys/fs/ext4/sda1/lifetime_write_kbytes
7483226797
ибо винт старый и LBAs written не знает
$ sudo smartctl -a /dev/sda
Model Family:     Fujitsu MHV
Device Model:     FUJITSU MHV2160BT PL
Serial Number:    NY05T752AV3W
LU WWN Device Id: 5 00000e 0402fdb40
Firmware Version: 0000004F
User Capacity:    160 041 885 696 bytes [160 GB]
Sector Size:      512 bytes logical/physical
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA/ATAPI-7 T13/1532D revision 4a
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000f   100   100   046    Pre-fail  Always       -       203773
  2 Throughput_Performance  0x0005   100   100   030    Pre-fail  Offline      -       52887552
  3 Spin_Up_Time            0x0003   100   100   025    Pre-fail  Always       -       1
  4 Start_Stop_Count        0x0032   099   099   000    Old_age   Always       -       2122
  5 Reallocated_Sector_Ct   0x0033   100   100   024    Pre-fail  Always       -       0 (2000 0)
  7 Seek_Error_Rate         0x000f   100   100   047    Pre-fail  Always       -       88
  8 Seek_Time_Performance   0x0005   100   100   019    Pre-fail  Offline      -       0
  9 Power_On_Seconds        0x0032   070   070   000    Old_age   Always       -       15090h+30m+42s
 10 Spin_Retry_Count        0x0013   100   100   020    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       2027
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       32
193 Load_Cycle_Count        0x0032   099   099   000    Old_age   Always       -       36963
194 Temperature_Celsius     0x0022   100   100   000    Old_age   Always       -       36 (Min/Max 13/44)
195 Hardware_ECC_Recovered  0x001a   100   100   000    Old_age   Always       -       228
196 Reallocated_Event_Count 0x0032   100   100   000    Old_age   Always       -       0 (0 6782)
197 Current_Pending_Sector  0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0010   100   100   000    Old_age   Offline      -       1
199 UDMA_CRC_Error_Count    0x003e   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x000f   100   100   060    Pre-fail  Always       -       28532
203 Run_Out_Cancel          0x0002   100   100   000    Old_age   Always       -       4827571487467
240 Head_Flying_Hours       0x003e   200   198   000    Old_age   Always       -       0


Один оффлайн сектор во внимание не принимаю, ему уже года полтора "по пробегу" и более 4 лет "по сроку".

Считаем: (я буду делить на 1000!!!, а не 1024, для удобства) ext4 посчитала на запись 7483226797 кБайт => 7483226,797 МБайт => 7483,226797 ГБайт => 7,4 ТБайт. Да, я в прошлый раз жестоко облажался. Это /home, из которого вынесена файлопомойка, плюс полтора ТБайта на корень => вывод: сюда можно ставить крепкий SSD.

За 2,5 месяца влилось 1 500 783 895 кБайт => 1 500 783, 895 МБайт => 1 500, 783 895 ГБайт => ~ 1,5 ТБайт. Таким образом, в среднем на /home с вынесенной с него файлопомойкой льётся примерно 20ГБ в день. Хм, верю, ибо раз в 20 минут пересохраняется 600-мегабайтная база QuiteRSS. Плюс кэши браузеров и т.п.

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

Model Family:     Seagate Barracuda 7200.14 (AF)
Device Model:     ST2000DM001-9YN164
Serial Number:    Z2409CJ5
LU WWN Device Id: 5 000c50 04eb54073
Firmware Version: CC4B
User Capacity:    2 000 398 934 016 bytes [2,00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    7200 rpm
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA8-ACS T13/1699-D revision 4
SATA Version is:  SATA 3.0, 6.0 Gb/s (current: 6.0 Gb/s)

SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000f   120   099   006    Pre-fail  Always       -       239500480
  3 Spin_Up_Time            0x0003   092   092   000    Pre-fail  Always       -       0
  4 Start_Stop_Count        0x0032   099   099   020    Old_age   Always       -       1087
  5 Reallocated_Sector_Ct   0x0033   100   100   036    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x000f   082   060   030    Pre-fail  Always       -       172964991
  9 Power_On_Hours          0x0032   089   089   000    Old_age   Always       -       10268
 10 Spin_Retry_Count        0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   099   099   020    Old_age   Always       -       1087
183 Runtime_Bad_Block       0x0032   100   100   000    Old_age   Always       -       0
184 End-to-End_Error        0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect      0x0032   100   100   000    Old_age   Always       -       0
188 Command_Timeout         0x0032   100   100   000    Old_age   Always       -       0 0 0
189 High_Fly_Writes         0x003a   099   099   000    Old_age   Always       -       1
190 Airflow_Temperature_Cel 0x0022   065   058   045    Old_age   Always       -       35 (Min/Max 25/35)
191 G-Sense_Error_Rate      0x0032   100   100   000    Old_age   Always       -       0
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       18
193 Load_Cycle_Count        0x0032   100   100   000    Old_age   Always       -       1831
194 Temperature_Celsius     0x0022   035   042   000    Old_age   Always       -       35 (0 15 0 0 0)
197 Current_Pending_Sector  0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x003e   200   200   000    Old_age   Always       -       2
240 Head_Flying_Hours       0x0000   100   253   000    Old_age   Offline      -       10289h+41m+55.065s
241 Total_LBAs_Written      0x0000   100   253   000    Old_age   Offline      -       42158293866588
242 Total_LBAs_Read         0x0000   100   253   000    Old_age   Offline      -       30557785568499

SMART Error Log Version: 1
No Errors Logged



Считаем (опять буду делить на 1000): 42158293866588 512-байтных секторов (будем оптимистами) => 2,107914693×10¹³ кБайт => 21 079 146 930 МБайт => 21 079 146, 930 ГБайт => 21 079, 146 930 ТБайт => 21 ПБайт. За 10289 часов => в среднем пишется 2 048 707,058995043 МБайт/час или 34 145,117649917 МБайт/сек (34 ГБ/с). Это -- бред полный. Либо в Total_LBAs_Written, либо в Head_Flying_Hours пишется погода на Марсе, либо я опять неправильно подсчитал.

Кажется, я понял. 2 октября было 249863411841381, сегодня 42158293866588, что МЕНЬШЕ! предыдущего значения. Выскажу предположение, что счётчик Total_LBAs_Written тупо наматывает N-й круг. Интересно, какова разрядность этого счётчика? И выходит, что делать выводы, исходя из этого атрибута, на барракуде бессмысленно?!

А вот по

Код: [Выделить]

$ cat /sys/fs/ext4/sdb1/lifetime_write_kbytes
86848541095получается, что записано 86848541095 кБайт => 86848541,095 МБайт => 86848,541095 ГБайт => ~86 ТБайт. Интересно будет посмотреть на это значение через месяц-два.

[Tear]

И выходит, что делать выводы, исходя из этого атрибута, на барракуде бессмысленно?!

На сигейтах, в частности, барракудах, показатели SMART имеют свои особенности и правильно интерпретируются сигейтовскими утилитами. Там с таким когда-то столкнулся.

[EvangelionDeath]

Кажется, я понял. 2 октября было 249863411841381, сегодня 42158293866588, что МЕНЬШЕ! предыдущего значения. Выскажу предположение, что счётчик Total_LBAs_Written тупо наматывает N-й круг. Интересно, какова разрядность этого счётчика? И выходит, что делать выводы, исходя из этого атрибута, на барракуде бессмысленно?!

Могу поинтересоваться. Но точно знаю, что на Seagate полагаться на показатели SMART точно нельзя.

А потому, чуть выше я уже показал данные двух SSD (один серверный, второй личный). И как видно домашний и маленький и прокачал поболее вашего (гарантия 5 лет, 20ГБ в день, как-то так у него біло указано, и єто для 120ГБ, для большего обїема лимиты поболее).

А потому переходите на SSD и не мучайтесь.

P.S. Когда SSD умирает, то переходит в read-only и у вас еще около года, что бы снять оттуда инфу

[scsiman]

правильно интерпретируются сигейтовскими утилитами

К сожалению, насколько помню, эти утилиты windows-only...

Когда SSD умирает, то переходит в read-only

В read-only переходят в основном intel (и то не все), большинство же окирпичивается наглухо. Что самое поганое, окирпичивание происходит зачастую на ровном месте, когда (по показаниям) резервных секторов ещё пруд пруди. А менять SSD при распечатывании резерва или выработке гарантийного объёма записанных данных -- никакого бюджета не напасёшься...

В принципе, мнение сформировано, осталось прикинуть оверхед из-за ecryptfs (меняем 1 байт, переписываем весь файл).

[EvangelionDeath]

В read-only переходят в основном intel (и то не все), большинство же окирпичивается наглухо. Что самое поганое, окирпичивание происходит зачастую на ровном месте, когда (по показаниям) резервных секторов ещё пруд пруди.

1) Бекапы никто не отменял
2) Если диск окирпичивается, не выработав ресурса и в пределах гарантии - вам его меняют бесплатно (на ССД гарантия поболее, чем ХДД).
А поменять диск раз в 5 лет...