dd. Копия диска в сжатый файл.

[thunderamur]

Код: [Выделить]

dd if=/dev/sdX of /file.img conv=noerror,syncСоздаст образ диска в файл не обращая внимания на ошибки, заменяя отсутствующие и поврежденные данные на нули.
Но, если диск 1 ТБ, а занято там всего 10 ГБ, то мы получим нехилый файлик в 1 ТБ. Мб есть возможность сделать копию только фактических данных или хотя бы на лету жать данные в архив?

По поводу фактических данных, наверное возможен такой трюк:

1. Дефрагментация ФС на разделах, которая помещает данные в начало раздела.
2.

Код: [Выделить]

dd if=/dev/sdX of /file.img conv=noerror,sync bs=10M count=XГде X - рассчетная величина, равная (объем разделов, кроме последнего + объем занятого места на последнем разделе + зазор) / 10.

Чисто теоритически это возможно ведь?
Пользователь решил продолжить мысль 07 Апреля 2014, 11:00:23:Нашел, что сжатие на лету можно сделать конвеером:

Код: [Выделить]

dd if=/dev/sdX conv=noerror,sync | gzip > file.img.gz
Но возникает вопрос как в последствии такой образ-архив скормить dd, так:

Код: [Выделить]

gzip -d file.img.gz | dd of=/dev/sdXпроканает?

Вопрос с созданием неполной копии, с обрезанием конца, остается открытым.

[Tokuan]

dd не знает где у вас фактические данные, а где нет.
Для этого делают файл и заполняют его нулями, пока место не закончится, а потом его удаляют.
Такой образ можно сжимать.

[Azure]

Встречный вопрос: зачем делать физическое копирование, когда можно брать сами данные?

[hon]

Допустим, архивируемый раздел /dev/sdXY примонтирован в /mnt/. Забьем все свободное пространство нулями, они ведь хорошо сжимаются! (файла tempfile на разделе быть не должно!):

Код: [Выделить]

cd /mnt/
dd if=/dev/zero of=tempfile
rm tempfileПосле этого отмонтируйте раздел и заархивируйте его.

Если вы хотите архивировать не раздел, а весь жесткий диск, то такую операцию необходимо выполнить со всеми разделами (предполагаю, что у вас нет неразмеченного пространства).

[thunderamur]

Tokuan,
Я это понимаю, от того и описал в посте финт ушами.

Azure,
Ну да, данные можно, но я таким образом хочу Win бекапить, там NTFS, которая поддерживается как получилось и то хорошо.

hon,
Да про нули то все ясно и что оно сжимается. ЕМНИП conv=sync, это и делает.
Я же спрашиваю про то, что ЗАЧЕМ ГОНЯТЬ 1 ТБ, когда нужно всего 10 ГБ! И пытаюсь узнать как это сделать. В общем, надо будет на каком-нить компе проверить свою теорию да и все.

[hon]

Чтобы не читать 1 ТиБ, можно скопировать сами данные через cp или tar.

[Azure]

WIN "расшвыривает" данные по всему диску… так что диск копировать весь в данном случае…
1. Есть куча утилить которые делают икрементальный бэкап — то есть только изменения от первоначального.
2. Если чем-то сможете "ужать" данные на ntfs к началу раздела (сомневаюсь), то почему бы Вашему способу не работать…

[hon]

Перекиньте куда-нибуть эти 10 ГиБ, отформатируйте диск в ext4, переместите обратно. Если нужно, чтобы Windows читала, делайте cp или tar.

Ужимть NTFS может и Gparted.

[Sly_tom_cat]

В составе clonezilla есть утилитки (не вспомнить на вскидку название) которые берут в образ только используемые ФС блоки памяти. NTFS они (утилиты) - знают.

Думаю в эту сторону копать надо... та за одно и сжатие есть.... Помню так раскатывали образ винды на новые ноуты - очень шустро получалось (~10 минут на восстановление образа и настройку пользователя) т.к. не смотря на большие HDD сама Windows+офис (свежепоставленные!) съедают не так и много места.

[adawdp]

— Жду рецепта , больно уж идея привлекательна! А пока очень неостро́ решил воспользоваться в похожей ситуации Clonezilla там фантазию вообще применять не нужно…

[thunderamur]

Чтобы не читать 1 ТиБ, можно скопировать сами данные через cp или tar.

Ты можешь гарантировать, что созданный в линуксе раздел NTFS, скорпированные на него файлы, в том числе ОС, будут нормально работать?

Перекиньте куда-нибуть эти 10 ГиБ, отформатируйте диск в ext4, переместите обратно. Если нужно, чтобы Windows читала, делайте cp или tar.

Ужимть NTFS может и Gparted.

Я не могу понять, причем тут ext4 вообще?

Я хочу из живой сессии сделать копию диска с виндой малым размером.
Пользователь решил продолжить мысль 08 Апреля 2014, 05:19:43:

В составе clonezilla есть утилитки (не вспомнить на вскидку название) которые берут в образ только используемые ФС блоки памяти. NTFS они (утилиты) - знают.

О! Ежели так, то зачем городить, надо попробовать. Как попробую, отпишусь.

[adawdp]

— Clonezilla безусловно хорошая программа, но во-первых, она делает не один единый файл а папку с несколькими файлами (только что попробовал) …
— Естественно просмотреть содержимое скопированного раздела (я раздел диска сохранял, не весь диск) нельзя, во всяком случае я не знаю как. Может есть какая спец. программа.
— На флешку копировал предварительно создавал архив просто .tar не захотел возиться с доступами, Clonezilla делает директорию и файлы root.
— Вот если бы чем-то делать копию в файл содержимое которого можно было бы просматривать как архив было бы здорово!
— Есть у меня восьмой Акронис, покупал когда-то, но он пишут с Linux'ом не дружит, по моему там можно было просматривать создаваемый файл.

[Sly_tom_cat]

adawdp, так clonezilla - сборная салянка:

Based on Partclone (default), Partimage (optional), ntfsclone (optional), or dd to image or clone a partition. However, Clonezilla, containing some other programs, can save and restore not only partitions, but also a whole disk.

Не нравится как там заточили - возьмите Partclone/Partimage и юзайте их как вам захочется (и то и другое в репах Ubuntu). Маны у них вполне юзабельные. 

Я хочу из живой сессии сделать копию диска с виндой малым размером.

Тогда clonezilla - самое то.

[adawdp]

— Sly_tom_cat, спасибо, конечно больше понравилась partimage c псевдографическим интерфейсом, похожим на  clonezilla однако не поддерживает ext4 .
— Но partclone не слишком сложная там всё действительно хорошо описано в manual'e и примеры есть.

[Alessias]

Уже 100 лет пользуюсь 2-мя командами для копирования-восстановления

Код: [Выделить]

dd if=dev/sda1 | gzip - | dd of=/path_to_backups/fs.img.gz

Код: [Выделить]

dd if=fs.img.gz | gunzip - | dd of=/dev/sda1
gzip -  без параметров с дефисом сжимает поток со стандартного ввода и передаёт на стандартый вывод
gunzip - аналогично

Пользователь решил продолжить мысль 29 Декабря 2014, 13:02:48:PS: плюс в том, что это работает на самой голой и минимальной системе, не нужны сторонние утилиты.
PSS:кстати, такой способ корректно сжимает большие разделы, на которых мало полезных данных -  с рут-раздела на 20 Гб,  на котором было 2 Гб занято, размер образа был 1Гб +-; это работает на ext3 и ReiserFS, на других не пробовал.