Клонировать весь раздел или жесткий диск в разреженный файл

Мне нравится клонировать весь раздел или весь жесткий диск на больший внешний диск, но мне нравится создавать разреженный файл. Я часто использую ddдля клонирования, но он не поддерживает разреженные файлы. В качестве обходного пути я использовал что-то вроде:

cp --sparse=always <(dd if=/dev/sda1 bs=8M) /mount/external/backup/sda1.raw

Однако, на мой вкус, это слишком сложно и не позволяет мне возобновить процесс, если его прервать. Забавно, что для этого есть инструмент NTFS ( ntfsclone), но для родных файловых систем Linux (EXT2-4) такого инструмента не существует.

Есть ли лучший инструмент для этого, например, ddвариант с разреженной поддержкой? Я не ищу какое-то проприетарное программное обеспечение для резервного копирования дисков, а просто хочу сделать разреженную копию клона, которую я могу при необходимости смонтировать как устройство зацикливания.

Вы хотите dd_rescue.

dd_rescue -a -b 8M /dev/sda1 /mount/external/backup/sda1.raw

Просто для полноты призыва к спасению . --sparseИли -Sфлаг позволяет назначения быть написаны редко:

$ ddrescue -S -b8M /dev/sda1 /mount/external/backup/sda1.raw

Или с длинным вариантом:

$ ddrescue --sparse --block-size 8M /dev/sda1 /mount/external/backup/sda1.raw

Или, если вы предпочитаете MiBs :

$ ddrescue -S -b8Mi /dev/sda1 /mount/external/backup/sda1.raw

Чтобы аварийное восстановление было прервано и возобновлено, вы также можете использовать файл журнала:

$ ddrescue -S -b8Mi /dev/sda1 /mount/external/backup/sda1.raw ~/sda1.rescue.log

Обратите внимание, что GNU ddrescueи dd_rescueесть разные программы. Но GNU ddrescueкажется более распространенным. Например, он уже упакован с GRML .

В 2007 году был предложен патч для обеспечения поддержки разреженных файлов в GNU dd, но, похоже, он не превратил его в coreutils (по крайней мере, не в 8.4). Я сомневаюсь, что dd сильно изменился с тех пор, патч может быть применен к текущей версии без особой работы.

Я также очень впечатлен творческим использованием cpв вашем вопросе, и это заставило меня принять решение использовать его для возобновления (здесь возобновление с ~ 80M в источник):

cp --sparse=always \
  <(dd if=/dev/sda1 bs=8M skip=10) /dev/stdout \
  | dd bs=8M seek=10 of=/mount/external/backup/sda1.raw

Изменить: поцарапать это. Второй dd, конечно, будет искать неправильную позицию в выходном файле, так как он не совпадает с длиной ввода.

Просто добавляю мои 2 цента. Другой способ создать разреженный файл с необработанного диска - использовать qemu-img, используя что-то вроде:

qemu-img convert -f raw /dev/sda /tmp/sda.raw

Вы также можете использовать это на одном разделе. Кроме того, у вас есть возможность преобразовать необработанный диск / раздел в любой другой формат, поддерживаемый qemu-img (QCOW2, VHD [x], vmdk и т. Д.)

Другой вариант rsync . Например:

rsync -SP --copy-devices /dev/sda1 /mount/external/backup/sda1.raw

Объяснение:

• -S/ --sparseпропустить разреженные блоки при записи
• -P/ --partial --progressпоказать прогресс и сохранить частично переданные файлы
• --copy-devices скопировать содержимое устройства

Вы можете добавить, --appendчтобы возобновить прерванную копию (или --append-verifyподтвердить контрольную сумму совпадений как новых, так и старых данных).

Редактировать : я только что понял, что copy-devices.diff находится на рассмотрении и может отсутствовать во многих системах (хотя он включен в Fedora , Ubuntu , Debian и другие)

Примечание: это не работает по причинам, описанным в комментариях, я оставляю это здесь для справки.

Следите за статистикой dd с помощью kill -USR1:

$ cp --sparse=always <(dd if=/dev/urandom bs=8M) \
    /mount/external/backup/sda1.raw&
$ watch kill -USR1 `pidof -s /bin/dd`

Возобновить с помощью skip / seek:

$ i_bytes= # get from the last dd statistic
$ o_bytes=`du -b /mount/external/backup/sda1.raw | cut -f 1`   
$ cp --sparse=always <(dd if=/dev/urandom bs=8M skip=$i_bytes \
    seek=$o_bytes) /mount/external/backup/sda1.raw&
$ watch kill -USR1 `pidof -s /bin/dd`

Без $ i_bytes было бы сложнее возобновить. Вероятно, проще всего записать статистику dd в файл в случае сбоя машины или чего-либо еще.

Существуют xfsdump и xfsrestore для XFS, которые долгое время были родной файловой системой Linux.

Почему бы просто:

cp --sparse=always /dev/sda1 /mount/external/backup/sda1.raw