ls -l を使用してサイズを確認すると、「ファイル」のサイズが 15 TB と表示されます。
ls -l
total 16
-rw-r--r-- 1 root root 15393162788865 May 30 13:41 file
du コマンドで「ファイル」のサイズを確認すると、次のように表示されます。
du -a file
12 file
インターネット検索では、そのファイルがまれなファイルである可能性があるという結論に達しました。読むと、less、tail、cat、hexdumpなどのコマンドは時間がかかります。
これはfilefragの出力です。
filefrag -e file
Filesystem type is: ef53
File size of file is 15393162788865 (3758096385 blocks of 4096 bytes)
ext: logical_offset: physical_offset: length: expected: flags:
0: 0.. 0: 22261760.. 22261760: 1:
1: 3169274812..3169274812: 22268860.. 22268860: 1: 3191536572:
2: 3758096383..3758096383: 22271999.. 22271999: 1: 611090431: last
file: 3 extents found
ファイルの穴/ゼロを見ずにLinux端末でファイルの内容だけを見る方法があるかどうか疑問に思います。
答え1
最新のLinuxシステムでは、その拡張機能SEEK_DATA
により、アプリケーションがスパースファイルを読み取るときに「穴」をスキップできます。SEEK_HOLE
lseek(2)
以前のシステムではioctl(FIBMAP)
可能で、基本デバイスから直接データを読み取ることができます(ただし、機能FIBMAP
が必要ですCAP_SYS_RAWIO
)。
残念ながら、私はこれらのユーティリティを使用するcoreutils /標準ユーティリティを知りません。
sparse_cat
以下は、これを使用して非常に大きな希少ファイルからデータをすぐにダンプする小さなデモです。
例:
$ cc -Wall -O2 sparse_cat.c -s -o sparse_cat
$ echo 1st | dd conv=notrunc status=none bs=1 seek=10M of=/tmp/sparse
$ echo 2nd | dd conv=notrunc status=none bs=1 seek=10G of=/tmp/sparse
$ echo 3rd | dd conv=notrunc status=none bs=1 seek=10T of=/tmp/sparse
$ ls -l /tmp/sparse
-rw-r--r-- 1 ahq ahq 10995116277764 May 30 16:29 /tmp/sparse
$ ./sparse_cat </tmp/sparse >/dev/tty
a00000 a01000
1st
280000000 280001000
2nd
a0000000000 a0000000004
3rd
注:簡単にするために、すべてのファイルを開くコード(常に代わりに使用する必要がありますsparse_cat < input
)とsparse_cat input
このフラグで開かれたttyとの間の誤った対話の回避策(明示的に使用されています)を省略しました。sendfile(2)
O_APPEND
>/dev/tty
また、データ/ホール範囲にはブロック単位があります。1st
上記の例の文字列の後には、実際にはblock size - 4
nullバイトが続きます。
sparsecat.c
#define _GNU_SOURCE
#include <err.h>
#include <errno.h>
#include <fcntl.h>
#include <limits.h>
#include <stdio.h>
#include <unistd.h>
#include <sys/sendfile.h>
int main(void){
off_t hole, data, pos, len; typedef unsigned long long ull;
for(hole = 0;; data = hole){
if((data = lseek(0, hole, SEEK_DATA)) == -1){
if(errno == ENXIO) return 0;
err(1, "lseek +data");
}
if((hole = lseek(0, data, SEEK_HOLE)) == -1)
err(1, "lseek +hole");
dprintf(2, "%16llx %16llx\n", (ull)data, (ull)hole);
for(pos = data; pos < hole;){
len = hole - pos; if(len > INT_MAX) len = INT_MAX;
if((len = sendfile(1, 0, &pos, len)) == 0) return 0;
if(len < 0) err(1, "sendfile");
}
}
}