Подробная информация о разреженных файлах в Linux

У меня есть разреженный файл, в котором размещены только некоторые блоки:

~% du -h --apparent-size example
100K    example
~% du -h example
52K     example

Я хотел бы знать, какие блоки файла на самом деле выделены. Есть ли системный вызов или интерфейс ядра, который можно использовать для получения списка распределений или дыр в файле?

Простая проверка на наличие достаточно длинной строки нулей (подход, используемый GNU cp, rsync и т. Д.) Не работает правильно:

~% cp example example1  
~% du -h example1 
32K     example1

Это обнаружило другие последовательности нулей, которые были фактически распределены.

Есть похожий вопрос по SO . Принято в настоящее время ответ на @ephemient предлагает используя ioctlназывается , fiemapкоторая описана в linux/Documentation/filesystems/fiemap.txt. Цитирование из этого файла:

Fiemap ioctl - это эффективный метод для пространства пользователя для получения отображений экстентов файлов. Вместо блочного отображения (такого как bmap) fiemap возвращает список экстентов.

Похоже, это та информация, которую вы ищете. Поддержка файловыми системами снова необязательна:

Файловые системы, желающие поддерживать fiemap, должны реализовать ->fiemap обратный вызов в своей inode_operationsструктуре.

Поддержка для SEEK_DATAи SEEK_HOLEаргументы lseekвы , упомянутые в Solaris была добавлена в Linux 3.1 согласно странице человека , так что вы можете использовать это , как хорошо. В fiemap ioctlболее старом, так что может быть более переносимыми между различными версиями Linux на данный момент, в то время как lseekможет быть более переносимы между операционными системами , если Solaris имеет то же самое.

Существует коллекция программ на python, называемых sparseutils, которые используют SEEK_HOLEи SEEK_DATAопределяют, какие разделы файла представлены как дыры, а какие - данные. Использование довольно просто. mksparseможет использоваться для создания разреженного файла в соответствии с заданным макетом.

 $ echo hole,data,hole | mksparse --hole-size 4096 --data-size 4096 example
 $ du -sh example
 4.0K   example

sparsemapПрограмма может быть использована для печати макета на стандартный вывод:

 $ sparsemap example
 HOLE 4096
 DATA 4096
 HOLE 4096

Это зависит от файловой системы. Я не верю, что это вызов, поэтому многие инструменты не справляются с копированием разреженных файлов. В цепочке инструментов GNU используется поиск больших блоков нулей, поскольку это позволяет им удалять неиспользуемые выделенные блоки. Многие инструменты копирования преобразуют разреженный файл в файл со всеми выделенными блоками.

Скорее всего, вам придется открыть инод и проанализировать результат. Формат Inode зависит от файловой системы. Некоторые файловые системы могут содержать часть ваших данных в самом inode.