awkはcat -Aを使用して示されているように.gzファイルに列を追加しますが、通常の出力で列名を変更します。

Question 1

すでに述べたように、DOS行の終わりがあります。バラより私のツール出力がそれ自体で上書きされる理由と回避策問題と考えられる回避策の説明（例：awkを使用）：

gunzip -c foo.gz |
  awk -v OFS='\t' '{sub(/\r$/,""); print $0, (NR>1 ? 1 : "INFO")}' |
  gzip > foo.V2.gz

RS="\r\n"最近、1〜2つの異なるawkバリアントに採用されているGNU awk拡張であるマルチキャラRSを使用できます。他のPOSIX準拠のawk設定は、設定したRS="\r\n"ものと同じように扱われます。RS="\r"各POSIXはRS単一のリテラル文字しか使用できないためです。また、awkが表示する前にデフォルトのCプリミティブが行末を\r削除するシステムでは失敗するため、RS="\r?\n"より強力です。 awkの場合は、デフォルトRSのままにしてスクリプトの最初のステートメントとして\n追加できます。{sub(\r$/,"")}

また、不要な値または既に値を持つコード設定変数を削除し、2つの印刷ステートメントを1に変更し、OFSを設計どおりに使用し、パイプシンボルから不要なエスケープを削除するなど、スクリプトからいくつかの他のことも整理しました。その後行末。

Answer

すでに述べたように、DOS行の終わりがあります。バラより私のツール出力がそれ自体で上書きされる理由と回避策問題と考えられる回避策の説明（例：awkを使用）：

gunzip -c foo.gz |
  awk -v OFS='\t' '{sub(/\r$/,""); print $0, (NR>1 ? 1 : "INFO")}' |
  gzip > foo.V2.gz

RS="\r\n"最近、1〜2つの異なるawkバリアントに採用されているGNU awk拡張であるマルチキャラRSを使用できます。他のPOSIX準拠のawk設定は、設定したRS="\r\n"ものと同じように扱われます。RS="\r"各POSIXはRS単一のリテラル文字しか使用できないためです。また、awkが表示する前にデフォルトのCプリミティブが行末を\r削除するシステムでは失敗するため、RS="\r?\n"より強力です。 awkの場合は、デフォルトRSのままにしてスクリプトの最初のステートメントとして\n追加できます。{sub(\r$/,"")}

また、不要な値または既に値を持つコード設定変数を削除し、2つの印刷ステートメントを1に変更し、OFSを設計どおりに使用し、パイプシンボルから不要なエスケープを削除するなど、スクリプトからいくつかの他のことも整理しました。その後行末。

Question 2

入力した内容は、Microsoft 行末がある一種の TSV ファイルのようです。

その後利用できますmlr代わりに、awk2種類のtsvをサポートし、レコード区切り文字を指定できます。

値はabで区切られますが、、、、--tsv vを使用してフィールドにTAB、CR、およびLF文字を挿入できます。ts\\\t\r\n\
値はabで区切られ--tsvlite v、フィールド値に行区切り文字またはタブ文字を挿入することはできません。ts

ここでは、タイトルと値にこれらの文字がまったく含まれていない追加の列を追加したいので、それらのいずれかを使用しても影響はありません。

デフォルトでは、mlrCRLF（Microsoft）またはLF（Unix）行の区切り文字が許可され、LF（Unix）で区切られた行が出力されます。ただし、--rs crlfCRLF（Microsoft）で区切られた出力ラインに渡すことはできます。

だから：

< foo.gz gunzip |
  mlr --tsvlite put '$INFO = 1' |
  gzip > foo.V2.gz

出力時にUnix TSVをインポートし、入力時にMicrosoftまたはUnix TSVを許可します。

< foo.gz gunzip |
  mlr --tsvlite --rs crlf put '$INFO = 1' |
  gzip > foo.V2.gz

出力時にMicrosoft TSVをインポートし、入力時にMicrosoftまたはUnix TSVを許可します。

バージョン6.0.0以降、mlrgzip圧縮ファイル読み取り機能が組み込まれているため、次のこともできます。

mlr --tsvlite put '$INFO = 1' foo.gz |
  gzip > foo.V2.gz

--gzin（ファイルパスがで終わらない場合は、このオプションが渡されます.gz。

mlr（ミラー、通常はmillerパッケージに出荷されます。）はテーブル形式のデータ処理に特化したツールです。これには一部が必要な場合があります。動詞sort、、cut...などのレコードに対してさまざまな操作を実行するためのjoinパラメータfilter

put以下を使用してレコードを変更するために使用されます。シンプルドメイン固有の言語状況はの場合と大きく変わりませんawk。

awkたとえば、その言語では$レコードのフィールドを参照するために使用されます。このフィールドを除いて、名前付き1.の場合、$INFO = 1各レコードのフィールドにINFO数値²値を割り当てます1。フィールドがまだ存在しない場合は、そのフィールドが追加され、追加の列として表示されます。

^{1 ただし、次のように使用することもできます--implicit-csv-header。}

^{² $INFO = "1"JSONなどの出力形式に異なる影響を与える文字列に設定できますが、型の表示がないtsvの場合はそうではありません。}

Answer