☰

特殊文字で始まる行を新しいファイルにマージする

tag-icon • tag-icon text-processing awk sed files cat
特殊文字で始まる行を新しいファイルにマージする

次の状況：「dens_Run0_set0.#」という名前のファイルが約2000個あります。ここで # は数値で、ファイルは次のように入力されます。

       1   0 1.000000e-01  6.3043370127282594e-01 -9.0687990423248266e-03  255 9.4509489123595358e-10 
       1   1 1.000000e-01  6.4071465952974904e-01  2.1357878278801461e-02  254 9.6824903650372107e-10 
       1   2 1.000000e-01  6.6258330124264830e-01 -8.3797056064819717e-03  255 9.5136742928048079e-10 
       1   3 1.000000e-01  6.2986715737376164e-01 -8.3306463914899122e-03  254 9.8325203534699313e-10 
       1   4 1.000000e-01  6.2984096793040101e-01 -2.2874605754168442e-03  255 9.7199825965788023e-10 
       1   5 1.000000e-01  6.3544494921916339e-01  4.0850692190967192e-04  255 9.3920704546945899e-10 
       1   6 1.000000e-01  6.1993535905745978e-01  1.6905867851164658e-03  255 9.2219992753328484e-10 
       1   7 1.000000e-01  6.6403589120818651e-01 -7.7065063672989709e-03  255 9.5683005962854395e-10 
       1   8 1.000000e-01  6.6151286798685760e-01  2.2987801390020952e-02  255 9.5036933878134278e-10 
       1   9 1.000000e-01  6.4426718104580993e-01 -9.1829913570412227e-03  255 9.5504193442508267e-10 
       6   0 1.000000e-01  4.0147426676412579e-02 -1.0968071205388696e-01  281 9.5556063062218755e-10 
       6   1 1.000000e-01  3.1792618041921133e-01  1.5324342699326129e-01  281 9.4066654465763122e-10 
       6   2 1.000000e-01  2.0570344663186310e-01 -5.7959543075412512e-02  281 9.4459629007559442e-10 
       6   3 1.000000e-01  1.4426831089076586e-01 -8.0085259971383493e-02  281 9.3488350394466124e-10 
       6   4 1.000000e-01  1.2697447761062600e-01 -7.9212954607404143e-02  281 9.4211360934792765e-10 
       6   5 1.000000e-01  9.4787370490545683e-02 -1.0902733768125472e-01  281 9.6087293677271646e-10 
       6   6 1.000000e-01 -3.6135020945645614e-02 -6.3683751812277478e-02  281 9.6366270518899455e-10 
       6   7 1.000000e-01  1.8645702206170731e-01 -1.1584221723023802e-01  281 9.7691299494329087e-10 
       6   8 1.000000e-01  3.4541099054452690e-01  5.8025780529230055e-02  281 9.4433605379862229e-10 
       6   9 1.000000e-01  2.6448819749081548e-01 -1.3873411819319395e-01  281 9.3928487210348521e-10

「1」で始まるすべての2000ファイルのすべての行を新しいファイルにマージし、「6」で始まるすべてのファイルを別のファイルにマージしたいと思います。どうすればいいですか？

答え1

使用findと電話awk:

find . -maxdepth 1 -type f -name 'dens_Run0_set0.*' \
    -exec awk '{ print >>$1 ".output" }' {} +

このfindコマンドは、現在のディレクトリで名前が指定されたパターンを満たすすべての一般ファイルを検索します。このようなファイル配置の場合、awk非常に短いプログラムが実行されます。

プログラムは、見つかったファイルの各行を、最初のフィールドのデータに似ているか、依存する名前のawk新しいファイルに出力します。1.output6.output

出力ファイルがまだ存在しないとします（または既存のファイルが追加される予定です）。また、最初のフィールドは常に有効な安全なファイル名を形成すると仮定します（ファイルシステムの他の場所にある既存のファイルを上書きするのを防ぐためのチェックはありません）。

最初のフィールドに正確に2つの数字1または6を含む行のみを処理するようにプログラムを制限しますawk（他の希望の数字を含む行がある場合）いいえ抽出したい）awkコードを次のように変更します。

$1 == 1 || $1 == 6 { print >>$1 ".output" }

システムによっては、次の短いコマンドも機能します。それ以外の場合は、ファイルが多すぎるため、「パラメータのリストが長すぎます」というメッセージが表示されます。

awk '{ print >$1 ".output" }' dens_Run0_set0.*

上記のコマンドは、findファイルの配置（一度にすべてのファイルではない可能性があります）で複数回実行してこのエラーを解決します。awk

関連情報