システムログに追加されたファイル固有のエントリ

Question 1

既存のターゲットファイルの最後の行を保存します。次に、次のコマンドを使用してシステムログawkファイルを逆方向に解析しますtac。

p=$(tail -n1 output)
tac syslog | awk -v p="$p" '$0 == p{exit} /myentry/' | tac >> output

最後の行が見つかると（戻る）awk終了します。見つからない場合、または出力が最初に空の場合は、ファイル全体を解析します（最初に空の出力に対してsyslogに空白行がないとします）。今回もこのように必要最小限の行数を検索するため、大容量ファイルに対しては良好な性能を発揮すると予想されます。

また、次の簡単で効果的なコマンドをツールボックスに保存します。

awk '!seen[$0]++' output > output.tmp && mv output.tmp output

順序を維持しながら、いつでもターゲットファイルを変更するために実行できます（何らかの理由で重複ファイルがそこに到達した場合）。

Answer

既存のターゲットファイルの最後の行を保存します。次に、次のコマンドを使用してシステムログawkファイルを逆方向に解析しますtac。

p=$(tail -n1 output)
tac syslog | awk -v p="$p" '$0 == p{exit} /myentry/' | tac >> output

最後の行が見つかると（戻る）awk終了します。見つからない場合、または出力が最初に空の場合は、ファイル全体を解析します（最初に空の出力に対してsyslogに空白行がないとします）。今回もこのように必要最小限の行数を検索するため、大容量ファイルに対しては良好な性能を発揮すると予想されます。

また、次の簡単で効果的なコマンドをツールボックスに保存します。

awk '!seen[$0]++' output > output.tmp && mv output.tmp output

順序を維持しながら、いつでもターゲットファイルを変更するために実行できます（何らかの理由で重複ファイルがそこに到達した場合）。

Question 2

簡単な方法は次のとおりです。

$ awk 'NR==FNR{a[$0]++; next}/myentry/ &&  !a[$0]' myentries syslog 
Jan 17 13:03:18 stm32mp1-abc user.info myentry[14300]: Init complete

これにより、一致する新しい行が選択されるため、元のファイルにリダイレクトするだけです。

awk 'NR==FNR{a[$0]++; next}/myentry/ &&  !a[$0]' myentries syslog >> myentries

Answer

簡単な方法は次のとおりです。

$ awk 'NR==FNR{a[$0]++; next}/myentry/ &&  !a[$0]' myentries syslog 
Jan 17 13:03:18 stm32mp1-abc user.info myentry[14300]: Init complete

これにより、一致する新しい行が選択されるため、元のファイルにリダイレクトするだけです。

awk 'NR==FNR{a[$0]++; next}/myentry/ &&  !a[$0]' myentries syslog >> myentries

編集する