Форум русскоязычного сообщества Ubuntu


Считаете, что Ubuntu недостаточно дружелюбна к новичкам?
Помогите создать новое Руководство для новичков!

Автор Тема: Множество мелких файлов - стоит ли менять метод хранения и файловую систему?  (Прочитано 2159 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Nick222

  • Автор темы
  • Активист
  • *
  • Сообщений: 622
    • Просмотр профиля
Здравствуйте! :)

Сижу под Xubuntu 25.04

С помощью Thunderbird получаю сообщения из RSS-лент.
Внутренняя индексация для поиска сообщений в Thunderbird включена.
Сейчас всё хранится в виде одного файла на папку почтовой программы (mbox).
Файловая система ext4.
Всего таких сообщений - мелких - в нескольких папках до 500 тыс. штук - где-то 1,5 Гб.
Использую для индексации и поиска по этим сообщениям также Recoll.

Думаю - не перейти ли на хранение информации в виде одного файла на письмо (maildir).
Мне это будет легче для поиска и фильтрации (Thunderbird не поддерживает поиск по служебным заголовкам, кроме самых общих - приходится пользоваться другими инструментами).
Но не создаст ли это слишком больших нагрузок для файловой системы? Не будет ли замедления работы? Не повысится ли вероятность выхода SSD-диска из строя?
Не стоит ли сделать отдельный раздел - и использовать для хранения данной информации другую файловую систему?

Или проще вообще перейти на СУБД - куда импортировать эти сообщения?

Спасибо :)
Xubuntu 25.04

Оффлайн sasha2k

  • Забанен
  • Новичок
  • *
  • Сообщений: 26
    • Просмотр профиля
Здравствуйте!

Сижу под Xubuntu 25.04

С помощью Thunderbird получаю сообщения из RSS-лент.
Внутренняя индексация для поиска сообщений в Thunderbird включена.
Сейчас всё хранится в виде одного файла на папку почтовой программы (mbox).
Файловая система ext4.
Всего таких сообщений - мелких - в нескольких папках до 500 тыс. штук - где-то 1,5 Гб.
Использую для индексации и поиска по этим сообщениям также Recoll.

Думаю - не перейти ли на хранение информации в виде одного файла на письмо (maildir).
Мне это будет легче для поиска и фильтрации (Thunderbird не поддерживает поиск по служебным заголовкам, кроме самых общих - приходится пользоваться другими инструментами).
Но не создаст ли это слишком больших <censored> нагрузок для файловой системы? Не будет ли замедления работы? Не повысится ли вероятность выхода SSD-диска из строя?
Не стоит ли сделать отдельный раздел - и использовать для хранения данной информации другую файловую систему?

Или проще вообще перейти на СУБД - куда импортировать эти сообщения?

Спасибо

Я перешёл с mbox на maildir в Thunderbird как раз из-за Recoll — стало гораздо проще фильтровать и индексировать, особенно по заголовкам. Но да, заметил, что при большом количестве писем (у меня около 300к) ext4 начинает подтормаживать, особенно при первом открытии папки. Решил вынести maildir на отдельный раздел с XFS — стало ощутимо быстрее. SSD жив пока без проблем, но бэкапы делаю регулярно, на всякий случай.









« Последнее редактирование: 04 Июля 2025, 21:09:24 от F12 »

 

Страница сгенерирована за 0.017 секунд. Запросов: 22.