Форум русскоязычного сообщества Ubuntu


Следите за новостями русскоязычного сообщества Ubuntu в Twitter-ленте @ubuntu_ru_loco

Автор Тема: Ubuntu 16.04.04-Gnome3 зависает при копировании на ntfs флешку больших данных  (Прочитано 7843 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн RIOCADM

  • Автор темы
  • Любитель
  • *
  • Сообщений: 74
    • Просмотр профиля
Ubuntu 16.04.04 c графической средой Gnome 3 зависает при копирование на флешку (в файловой системе ntfs) больших объемов данных:
первые 6 Гб копирует быстро, потом скорость падает до 1Гб\ 10 часов.

При этом данные копируются с HDD, система стоит на SSD.
Оперативной памяти 8 Гб
Процессор Ryzen 7 1700
Версия ядра: 4.17.3-041703-generic

vm.dirty_background_ratio = 90
vm.dirty_ratio = 90
« Последнее редактирование: 12 Июля 2018, 17:22:23 от RIOCADM »

Оффлайн firerat

  • Активист
  • *
  • Сообщений: 254
  • Audaces Fortuna Juvat
    • Просмотр профиля
на самом деле - в этот момент идет запись на флешку.
поищите информацию по dirty_bytes - должно помочь...
Ubuntu 20.04 Unity

Оффлайн andytux

  • Заслуженный пользователь
  • Старожил
  • *
  • Сообщений: 6834
    • Просмотр профиля
Цитировать
Искал в Google, но там проблема только на старых версиях Ubuntu наблюдалась
А сегодня я бы сказал, что проблема наблюдается на новых флешках.
Может банально проблема во флешке.
Сейчас полно фуфла, на которое пишет еле-еле. Даже только что из магазина.
Причем, местами может писать более-менее. Местами скорость может падать почти до нуля.
У меня флешка из тех времен, когда 2гб были фантастикой. Стабильно по всей поверхности пишет ~10мб/с.
Более новая на 16гб в среднем пишет ~6-8мб/c. Местами провалы до 4мб/c.
Все, что попадалось более новое, не дотягивает до этого уровня. Причем такое впечатление - чем новее, тем хуже.
Глядя на такое положение я стал бережнее относится к старой флешке - как говорится, только по праздникам.

Оффлайн Vikonrob

  • Активист
  • *
  • Сообщений: 364
    • Просмотр профиля
Все, что попадалось более новое, не дотягивает до этого уровня. Причем такое впечатление - чем новее, тем хуже.
Советую покупать флешки с USB 3.x интерфейсом. Они еще как-то более-менее по скоростям. Те что на USB 2.0, делаются из говна и палок каких-то завалявшихся неликвидов флеш-памяти со скоростью записи 2.5-3 мб\сек.. Это еще терпимо, когда объем флешки 2-4 гб, но когда от 8-ми и выше, то уже никаких нервов не хватает ждать когда она полностью запишется на таких скоростях.

Оффлайн RIOCADM

  • Автор темы
  • Любитель
  • *
  • Сообщений: 74
    • Просмотр профиля
Флешка USB 3.0 Transcendent 128гб.
Проблема не только в одной флешке, во всех внешних накопителях: 3 внешних жестких диска и 5 разных флешек пробовал.
При копировании мелких файлов все нормально. В Windows копирует без проблем.


Пользователь добавил сообщение 27 Июня 2018, 12:57:50:
Зависает вся систма Ubuntu а не копирование файлов. Возможно дело в сыром ryzen 7 :( :( :(

Пока флешку не вытащиш из системника или не закончится копирование все намертво виснит. даже терминал не отвечает.
« Последнее редактирование: 27 Июня 2018, 13:55:17 от RIOCADM »

Оффлайн zg_nico

  • Заслуженный пользователь
  • Почётный модератор
  • Старожил
  • *
  • Сообщений: 3513
  • Nil mortalibus arduum est
    • Просмотр профиля
поищите информацию по dirty_bytes - должно помочь...
firerat, пользуясь случаем, большое Вам спасибо за данную информацию еще по предыдущему топику, где Вы мне это в первый раз посоветовали.
RIOCADM, если я правильно трактую Вашу проблему, то Вам могут помочь, к примеру, такие манипуляции:
echo "vm.dirty_bytes = 4194304" >> /etc/sysctl.conf
echo "vm.dirty_background_bytes = 4194304" >> /etc/sysctl.conf
после описанного перезагрузитесь и проверяйте.
Thunderobot G150-D2: Intel SkyLake Core i7-6700HQ 2.60GHz, 8Gb DDR4 2133 MHz, Intel HD530, NVidia GeForce GTX 960M 2Gb.  Ubuntu 16.04 64x [Unity], KUbuntu 18.04 64x.

Оффлайн RIOCADM

  • Автор темы
  • Любитель
  • *
  • Сообщений: 74
    • Просмотр профиля
Помогло. но скорость записи сильно упала

Оффлайн firerat

  • Активист
  • *
  • Сообщений: 254
  • Audaces Fortuna Juvat
    • Просмотр профиля
Помогло. но скорость записи сильно упала
ну так поиграйтесь с параметром!
а если вы имеете в виду, что ползунок "медленнее ползет", то он как раз нормуль ползет...
Ubuntu 20.04 Unity

Оффлайн RIOCADM

  • Автор темы
  • Любитель
  • *
  • Сообщений: 74
    • Просмотр профиля
Настроил параметры
vm.dirty_background_ratio = 95
vm.dirty_ratio = 95
Но при достижении 6 Гб, процесс копирования останавливается на всегда.
Такое ощущение что система не умеет сама чистить буфер.

Morisson

  • Гость
Попробуй i/o sheduler поменять
cat /sys/block/sd*/queue/schedulerПокажи, что там есть

Оффлайн RIOCADM

  • Автор темы
  • Любитель
  • *
  • Сообщений: 74
    • Просмотр профиля
root@RIOC-340200150:/home/riocadmin# cat /sys/block/sd*/queue/scheduler
noop deadline [cfq]
noop deadline [cfq]
noop deadline [cfq]
noop deadline [cfq]

Пользователь добавил сообщение 28 Июня 2018, 08:06:45:
При копировании большого количества мелких файлов, после скопирования 6 ГБ скорость падает до 1 Гб/ 2 часа.
Мне нужно логи БД выгружать на внешний накопитель по 100гб в день. Как то ведь специалисты работают в Ubuntu.
Должны быть настройки кэширования при копировании в БД.
« Последнее редактирование: 28 Июня 2018, 08:06:45 от RIOCADM »

Morisson

  • Гость
RIOCADM, попробуйте deadline (для внешнего HDD) или noop (для флешки),
echo deadline > /sys/block/sdX/queue/scheduler
echo noop > /sys/block/sdX/queue/scheduler
где sdX- ваше устройство
« Последнее редактирование: 28 Июня 2018, 08:11:53 от Morisson »

Оффлайн RIOCADM

  • Автор темы
  • Любитель
  • *
  • Сообщений: 74
    • Просмотр профиля
Не помогает.
При копировании основной папки такие проблемы. Если же копировать небольшие папки до 6 Гб по очереди, то копируется все очень быстро.
Такая проблема только с Ntfs флешками, в fat32 все работает отлично.
« Последнее редактирование: 28 Июня 2018, 13:27:08 от RIOCADM »

Оффлайн theurs

  • Активист
  • *
  • Сообщений: 470
    • Просмотр профиля

Morisson

  • Гость
Такая проблема только с Ntfs флешками в fat32
Это как?
Файловая система или ntfs или fat32

 

Страница сгенерирована за 0.043 секунд. Запросов: 22.