ログでパターンリストを見つけてレポートを生成するにはどうすればよいですか？

Question

次のスクリプトを試してください。

#!/bin/bash

logfile="$1"

nfiles=$(grep -c 'checking file' "$logfile")
failed_userid=($(grep -oP 'failed reading user id: \K[^ ]*' "$logfile"))
corrupted_files=($(grep -oP '[^ ]*(?= is corrupt)' "$logfile"))


echo "Total Number of Files Scanned - $nfiles"
echo "Total Number of Unique User ID failed - ${#failed_userid[@]}"
echo "Total Number of Files Corrupted - ${#corrupted_files[@]}"
echo

echo "List of Unique User Id's which are corrupt - "
for uid in "${failed_userid[@]}"; do
   echo "$uid"
done

echo

echo "Files which are corrupted - "
for corf in "${corrupted_files[@]}"; do
   echo "$corf"
done

実行する

$ ./script file.log

ご質問の入力結果は次のとおりです。

Total Number of Files Scanned - 3
Total Number of Unique User ID failed - 3
Total Number of Files Corrupted - 1

List of Unique User Id's which are corrupt - 
18446744073135142816
18446744073698151136
18446744072929739296

Files which are corrupted - 
/database/batch/p1_snapshot//p1_weekly_1980_0_200003_5.data

簡単な説明：

-cgrep オプションは一致する行数を計算します。
-PPerl正規表現構文の有効化
-o一部の行のみ一致
(?=この構成は肯定的な予測（パターンとして扱われますが出力には含まれません）と呼ばれます。
\K逆方向の主張です（全体パターンをとりますが結果からこれまでのすべてを捨てます）。

残りは明確でなければなりません。しかし、ファイル名にスペースがないと仮定することに注意してください！

Answer 1

次のスクリプトを試してください。

#!/bin/bash

logfile="$1"

nfiles=$(grep -c 'checking file' "$logfile")
failed_userid=($(grep -oP 'failed reading user id: \K[^ ]*' "$logfile"))
corrupted_files=($(grep -oP '[^ ]*(?= is corrupt)' "$logfile"))


echo "Total Number of Files Scanned - $nfiles"
echo "Total Number of Unique User ID failed - ${#failed_userid[@]}"
echo "Total Number of Files Corrupted - ${#corrupted_files[@]}"
echo

echo "List of Unique User Id's which are corrupt - "
for uid in "${failed_userid[@]}"; do
   echo "$uid"
done

echo

echo "Files which are corrupted - "
for corf in "${corrupted_files[@]}"; do
   echo "$corf"
done

実行する

$ ./script file.log

ご質問の入力結果は次のとおりです。

Total Number of Files Scanned - 3
Total Number of Unique User ID failed - 3
Total Number of Files Corrupted - 1

List of Unique User Id's which are corrupt - 
18446744073135142816
18446744073698151136
18446744072929739296

Files which are corrupted - 
/database/batch/p1_snapshot//p1_weekly_1980_0_200003_5.data

簡単な説明：

-cgrep オプションは一致する行数を計算します。
-PPerl正規表現構文の有効化
-o一部の行のみ一致
(?=この構成は肯定的な予測（パターンとして扱われますが出力には含まれません）と呼ばれます。
\K逆方向の主張です（全体パターンをとりますが結果からこれまでのすべてを捨てます）。

残りは明確でなければなりません。しかし、ファイル名にスペースがないと仮定することに注意してください！

ログでパターンリストを見つけてレポートを生成するにはどうすればよいですか？

答え1

関連情報