ログからの抽出

Question

awk を使用するのは正しい方法です。ログを読み取り、フィールドをタブで区切って出力するスクリプトを作成する必要があります。次に、column コマンドを使用して列を再配置します。

抽出.awk²:

BEGIN {OFS="\t"; print "Timestamp\tEmailTo:\tEmailFrom:\tIPAddress:\tErrorCodes:"}
{print $1, $6, $7, $NF, $(NF-5)}

次に、次のコマンドで実行します。

awk -f extract.awk logs | column -t -s '^I'

ここで、これは'^I'引用符で囲まれた実際のタブを表します。

唯一の難点は、ログ内のエラーメッセージの処理です。エラーメッセージの単語数はさまざまです。IP とエラーコードフィールドの列を右から数えることでこの問題を解決しました。

出力は次のようになります。

Timestamp   EmailTo:         EmailFrom:                      IPAddress:   ErrorCodes:
2016-06-19  [email protected]   ([email protected])     36.23.21.11  554-
2016-06-20  [email protected]   ([email protected])  36.23.21.14  554-
2016-06-20  [email protected]     F=<[email protected]>           36.23.21.11  421
2016-06-20  [email protected]  F=<[email protected]>     36.23.21.14  421

入力列がどれであるかを指定していないため、入力列について私が間違って推測した可能性があります。3 番目の列の電子メールアドレスをクリーンアップする場合は、awk では深すぎる可能性があります。Python または Perl の使用を検討する必要があります。

¹または、データに含まれない限り、任意の出力セパレーターを使用します。その後、それを-sの引数として使用しますcolumn。

²@Kusalananda が指摘しているように、awk スクリプトをワンライナーとして記述する必要はありません。以下は彼のバージョンです:

BEGIN   {
    OFS="\t";
    print "Timestamp\tEmailTo:\tEmailFrom:\tIPAddress:\tErrorCodes:";
}

{
    print $1, $6, $7, $NF, $(NF-5);
}

私としては、ワンライナーが好きです。

Answer 1