オフセットでファイル処理を開始するには？

データが時系列でソートされているとします。

1. 最後を見て、次のようにしてファイルサイズを確認してくださいftell()。
2. 結果を2で割ります。
3. fseek()場所を見つけるために使用されます。
4. 一度呼び出して、次の行の先頭を見つけますgetline()。
5. strptime()現在の日付を知るために使用されます。
6. バイナリ検索を実行し、目的の行が見つかるまで手順4と5を繰り返します。

dd次のように使用できます。

dd if=log skip=xK bs=1M

その後、サイズが1M（2 ^ 20）のx * 1024ブロックをスキップします。dd(1)デバイスの取り扱いの詳細については、参考資料をご覧ください。

<date> [data]ログが出力をパイプできる一般的な形式であると仮定してバイナリ検索を自動化するには、ログの先頭のhead -n 2日付を確認してください。第二行（「通常」長い行が完了するという合理的な仮定の下で）必要な半分を決定します。

ファイルサイズを求めて2で割ります。これを1024で割ってKiBを得る。 （またはMiBなどを取得するには1024 * 1024）

((fs = $(stat -c %s logfile) / 2 / 1024))

スキップして検索してみてください

dd if=logfile bs=1024 skip=$fs | grep blahblah

ログファイルが次の場合は、さらに拡張できます。非常にデータ量はprと一致します。日count=に値を追加することによってdd。

((cnt = $(stat -c %s logfile) / 5 / 1024))

dd if=logfile bs=1024 skip=$fs count=$cnt | grep blahblah

これはcnt * 1024オフセットバイトでデータバイトを転送しますfs * 1024。

すべてをスクリプトでラップし、スクリプトの外側のパイプをgrep、一時ファイル、または必要に応じて実行します。

正確に何をしたいのか、「プロセス」が何を意味するのかは不明です。私が好きな大容量ファイル用のインタラクティブプログラムですless。このプログラムは大容量ファイルを問題なく処理します。たとえば、を使用して特定の割合に移動することもできます30%。また、/を使って検索できます?。