![[重複]をソートせずにテキストファイルからすべての重複を削除します。](https://linux33.com/image/98180/%5B%E9%87%8D%E8%A4%87%5D%E3%82%92%E3%82%BD%E3%83%BC%E3%83%88%E3%81%9B%E3%81%9A%E3%81%AB%E3%83%86%E3%82%AD%E3%82%B9%E3%83%88%E3%83%95%E3%82%A1%E3%82%A4%E3%83%AB%E3%81%8B%E3%82%89%E3%81%99%E3%81%B9%E3%81%A6%E3%81%AE%E9%87%8D%E8%A4%87%E3%82%92%E5%89%8A%E9%99%A4%E3%81%97%E3%81%BE%E3%81%99%E3%80%82.png)
簡単に言えば、私が知らないテキスト行を含むファイルがあります。
abaa
dddd
bbbb
cccc
abaa
aaaa
abaa
私が得たい結果は
dddd
bbbb
cccc
aaaa
すべての重複エントリが完全に削除されました。テキスト行が他の場所で繰り返される場合は、その行とそれに続く重複した項目をすべて削除してください。可能ですか？私のすべての検索には重複エントリが削除された出力が表示されるため、削除するインスタンスは1つだけ残ります。
答え1
このアプローチを使用するには、ファイルを2回パスする必要があります。 1 つは各行の発生回数を計算すること、もう 1 つは 1 回だけ表示される行を印刷することです。
awk 'NR == FNR {count[$0]++; next}; count[$0] == 1' file file