現在時刻から過去15分の間のログを抽出する方法

Question 1

私は次を使うでしょう：

awk -v limit="$(date -d '15 minutes ago' +'[%FT%T')" '
  $0 >= limit' < log-file

これは、GMTオフセットが-04:00から-05:00に変わった場合（夏時間がその時間帯に適用される場合）、年間2時間で発生する可能性のある問題を無視します。

date -dこれはGNUに固有のものですが、すでに使用しています。

Answer

私は次を使うでしょう：

awk -v limit="$(date -d '15 minutes ago' +'[%FT%T')" '
  $0 >= limit' < log-file

これは、GMTオフセットが-04:00から-05:00に変わった場合（夏時間がその時間帯に適用される場合）、年間2時間で発生する可能性のある問題を無視します。

date -dこれはGNUに固有のものですが、すでに使用しています。

Question 2

あなたはほとんどそれを持っています。

ステップ1

他のシステムの中で、GNUとLinuxでこのdateコマンドを使用すると、ユーザーフレンドリーな時間表現を提供する任意の形式の時間仕様を印刷できます。たとえば、次を使用して、過去15分の時間を表す文字列を取得できます。

 date --date='15 minutes ago'

あまり効率的ではありませんが、コードでこれをほぼ完了しました。しかし、あなたはマイクロ秒を無視しています。おそらく実際には気にしないかもしれませんが、一致させる必要があります。タイムゾーンは '%:z' を使用して実行できますが、おそらく既存のタイムゾーンと一致する必要があります。夏時間が切り替えられた直後に問題が発生する可能性があります。複数の時間帯を心配する必要がある場合は、正規表現またはSobriqueのソリューションが必要です。注意すべき点は次のとおりです。

NOW=$(date +"%FT%T.000%-04:00")
T2=$(date --date='15 minutes ago' +"%FT%T.000%-04:00")

ステップ2

NOWとT2を入力として使用できますawk。文字列ベースのマッチングはここでうまく機能しますが、awkを使用すると、文字列比較を超えるか下回って実行して、各行が目的の時間範囲内に収まるようにすることができます。

awk -v TSTART="[$T2]" -v TEND="[$NOW]" '$1>=TSTART && $1<=TEND'

3段階(新規)

タイムスタンプのある行の間にタイムスタンプのないログ行を取得する必要があります。したがって、上記のawkコードを使用してタイムスタンプ行を一致させ、タイムスタンプが正しい範囲内にあるときにフラグを設定します。このフラグが1に設定されている場合にのみ、現在の行が印刷されます。

awk -v TSTART="[$T2]" -v TEND="[$NOW]" \
'/^\[[^ ]*\] / { log = ($1>=TSTART && $1<=TEND) } log { print }'

ステップ4

通常どおりに出力をリダイレクトしますが、15分ごとにスクリプトを実行すると、現在のリダイレクトコードが同じファイルを上書きします。なぜなら、％Hは少なくとも3回の実行で変更されないからです。％H-％Mなどで作成することをお勧めします。ただし、ファイルへのリダイレクトはまったく必要ありません。添付ファイルが必ず必要な場合を除き、メールで直接送信できます。

{  
   echo "$MESSAGE"; echo
   awk -v TSTART="[$T2]" -v TEND="[$NOW]" '$1>=TSTART && $1<=TEND' $LogDir/oim_server1-diagnostic.log    
} | mailx -S smtp="$SMTP" -r "$SENDER" -s "$SUBJECT" "$EMAIL1"

スクリプトの残りの部分はそのまま機能する必要があります。

ただし、上記の設定では、関連する日付タイムスタンプで簡単に保存できる添付ファイルを取得できなくなりました。出力がない場合は、メールを送信したくない場合があります。だからあなたはこれを行うことができます：

OUT=/tmp/oim_server1-diagnostic_$(date +%F-%H-%M)
awk -v TSTART="[$T2]" -v TEND="[$NOW]" '$1>=TSTART && $1<=TEND' $LogDir/oim_server1-diagnostic.log > "$OUT"
test -s $OUT && 
echo -e "$MESSAGE" | mailx -S smtp="$SMTP" -a "$OUT" -r "$SENDER" -s "$SUBJECT" "$EMAIL1"
rm -f "$OUT"

これにより、大容量診断ログファイルが残らないように自動的にクリーンアップされます。

Answer

あなたはほとんどそれを持っています。

ステップ1

他のシステムの中で、GNUとLinuxでこのdateコマンドを使用すると、ユーザーフレンドリーな時間表現を提供する任意の形式の時間仕様を印刷できます。たとえば、次を使用して、過去15分の時間を表す文字列を取得できます。

 date --date='15 minutes ago'

あまり効率的ではありませんが、コードでこれをほぼ完了しました。しかし、あなたはマイクロ秒を無視しています。おそらく実際には気にしないかもしれませんが、一致させる必要があります。タイムゾーンは '%:z' を使用して実行できますが、おそらく既存のタイムゾーンと一致する必要があります。夏時間が切り替えられた直後に問題が発生する可能性があります。複数の時間帯を心配する必要がある場合は、正規表現またはSobriqueのソリューションが必要です。注意すべき点は次のとおりです。

NOW=$(date +"%FT%T.000%-04:00")
T2=$(date --date='15 minutes ago' +"%FT%T.000%-04:00")

ステップ2

NOWとT2を入力として使用できますawk。文字列ベースのマッチングはここでうまく機能しますが、awkを使用すると、文字列比較を超えるか下回って実行して、各行が目的の時間範囲内に収まるようにすることができます。

awk -v TSTART="[$T2]" -v TEND="[$NOW]" '$1>=TSTART && $1<=TEND'

3段階(新規)

タイムスタンプのある行の間にタイムスタンプのないログ行を取得する必要があります。したがって、上記のawkコードを使用してタイムスタンプ行を一致させ、タイムスタンプが正しい範囲内にあるときにフラグを設定します。このフラグが1に設定されている場合にのみ、現在の行が印刷されます。

awk -v TSTART="[$T2]" -v TEND="[$NOW]" \
'/^\[[^ ]*\] / { log = ($1>=TSTART && $1<=TEND) } log { print }'

ステップ4

通常どおりに出力をリダイレクトしますが、15分ごとにスクリプトを実行すると、現在のリダイレクトコードが同じファイルを上書きします。なぜなら、％Hは少なくとも3回の実行で変更されないからです。％H-％Mなどで作成することをお勧めします。ただし、ファイルへのリダイレクトはまったく必要ありません。添付ファイルが必ず必要な場合を除き、メールで直接送信できます。

{  
   echo "$MESSAGE"; echo
   awk -v TSTART="[$T2]" -v TEND="[$NOW]" '$1>=TSTART && $1<=TEND' $LogDir/oim_server1-diagnostic.log    
} | mailx -S smtp="$SMTP" -r "$SENDER" -s "$SUBJECT" "$EMAIL1"

スクリプトの残りの部分はそのまま機能する必要があります。

ただし、上記の設定では、関連する日付タイムスタンプで簡単に保存できる添付ファイルを取得できなくなりました。出力がない場合は、メールを送信したくない場合があります。だからあなたはこれを行うことができます：

OUT=/tmp/oim_server1-diagnostic_$(date +%F-%H-%M)
awk -v TSTART="[$T2]" -v TEND="[$NOW]" '$1>=TSTART && $1<=TEND' $LogDir/oim_server1-diagnostic.log > "$OUT"
test -s $OUT && 
echo -e "$MESSAGE" | mailx -S smtp="$SMTP" -a "$OUT" -r "$SENDER" -s "$SUBJECT" "$EMAIL1"
rm -f "$OUT"

これにより、大容量診断ログファイルが残らないように自動的にクリーンアップされます。

Question 3

正規表現は実際に数値を「理解する」ことができないため、タイムスタンプの一致には適していません。したがって、タイムスタンプを解析することをお勧めします。

#!/usr/bin/env perl
use strict;
use warnings;

use Time::Piece; 

my $now = time();
my $last = $now - 15 * 60; 

while ( <> ) { 
   my ( $timecode ) = m/\[([^\.]+)/;
   print $timecode;
   my $t = Time::Piece -> strptime ( $timecode, '%Y-%m-%dT%H:%M:%S' );  
   print if $t > $last;
}

これは単に次のように表現できます。

perl -MTime::Piece -ne 'print if Time::Piece -> strptime ( m/\[([^\.]+)/, '%Y-%m-%dT%H:%M:%S' ) > time()  - 15 * 60'

Answer

正規表現は実際に数値を「理解する」ことができないため、タイムスタンプの一致には適していません。したがって、タイムスタンプを解析することをお勧めします。

#!/usr/bin/env perl
use strict;
use warnings;

use Time::Piece; 

my $now = time();
my $last = $now - 15 * 60; 

while ( <> ) { 
   my ( $timecode ) = m/\[([^\.]+)/;
   print $timecode;
   my $t = Time::Piece -> strptime ( $timecode, '%Y-%m-%dT%H:%M:%S' );  
   print if $t > $last;
}

これは単に次のように表現できます。

perl -MTime::Piece -ne 'print if Time::Piece -> strptime ( m/\[([^\.]+)/, '%Y-%m-%dT%H:%M:%S' ) > time()  - 15 * 60'

Question 4

このコマンドを試してください。私にとって効果的でした。

sed -n "/$(date --date="15 minutes ago" +%T)/,/$(date +%T)/p" logfile > newfile

date --date="15 minutes ago" "+%T"15分前だった

date "+%T"今時間です

たとえば、上記のように、“+%T”このシステム時間は（％H：％M：％S）形式で表示されます。このコマンドを実行すると、1:15:10現在実行中のタイムスタンプである1:15:10より15分前のログが取得されます。1:01:10

Answer

このコマンドを試してください。私にとって効果的でした。

sed -n "/$(date --date="15 minutes ago" +%T)/,/$(date +%T)/p" logfile > newfile

date --date="15 minutes ago" "+%T"15分前だった

date "+%T"今時間です

たとえば、上記のように、“+%T”このシステム時間は（％H：％M：％S）形式で表示されます。このコマンドを実行すると、1:15:10現在実行中のタイムスタンプである1:15:10より15分前のログが取得されます。1:01:10

現在時刻から過去15分の間のログを抽出する方法

答え1

答え2

ステップ1

ステップ2

3段階(新規)

ステップ4

答え3

答え4

関連情報