タイムスタンプ付きのテキストファイルを処理し、毎秒最後の行を出力します。

Question 1

GNUを使用すると、sort次のことができます。

<file.csv sort -r | sort -suk1,1.19

つまり、sort結果を逆順に並べ替えますが、最初の19文字だけを考慮してサブ秒を無視し（固有の場合）、最初の文字（古い新しい文字と安定した文字のために大きい文字になる-u）の順序を選択します。）同じ19文字のキーを持つものです。sort-s

また、最初の行の前の行部分をソートキーとして選択する-k1,1.19こともできます。-t. -k1,1.

入力ファイルがすでに時系列でソートされている場合は、最初のファイルを（または一部のシステムでは）sort置き換えることができます。tactail -r

Answer

GNUを使用すると、sort次のことができます。

<file.csv sort -r | sort -suk1,1.19

つまり、sort結果を逆順に並べ替えますが、最初の19文字だけを考慮してサブ秒を無視し（固有の場合）、最初の文字（古い新しい文字と安定した文字のために大きい文字になる-u）の順序を選択します。）同じ19文字のキーを持つものです。sort-s

また、最初の行の前の行部分をソートキーとして選択する-k1,1.19こともできます。-t. -k1,1.

入力ファイルがすでに時系列でソートされている場合は、最初のファイルを（または一部のシステムでは）sort置き換えることができます。tactail -r

Question 2

はい、可能です。最後の秒とその行を追跡し、2番目が変更されるたびに記憶された行を出力します。

awk -F. 'NR > 1 && lastsec != $1 { print lastline }
         { lastsec = $1; lastline = $0 }
         END { if (NR) print }'

Answer

はい、可能です。最後の秒とその行を追跡し、2番目が変更されるたびに記憶された行を出力します。

awk -F. 'NR > 1 && lastsec != $1 { print lastline }
         { lastsec = $1; lastline = $0 }
         END { if (NR) print }'

Question 3

使用Pythongroupbyモジュールのメソッドを結合しますitertools。

グループ化は時間（0番目のフィールド）で行われ、グループ内の最後の要素はグループのターゲット行です。

python3 -c 'import itertools as it, sys
fs,rs = ofs,ors = ".","\n"
with open(sys.argv[1]) as f:
  print(*[list(group)[-1].rstrip(rs) for key,group in it.groupby(f,lambda x: x.split(fs)[0]) if key],sep=ors)
' file

ストリーム・エディター sed は、次のように処理できます。

sed -Ee '
  $!N
  /^([^.]+\.).*\n\1/!P
  D
' file

デフォルトでは、2つの連続する行、特に点で区切られた最初のフィールドを比較します。一致しない場合にのみ印刷されます。

Answer