Извлечение из журналов

Question

Вы были на правильном пути, используя awk. Вам следует написать скрипт, который читает ваши логи и выводит данные с полями, разделенными табуляцией¹. Затем используйте команду column, чтобы перевыравнивать столбцы:

извлечение.awk²:

BEGIN {OFS="\t"; print "Timestamp\tEmailTo:\tEmailFrom:\tIPAddress:\tErrorCodes:"}
{print $1, $6, $7, $NF, $(NF-5)}

Затем запустите его с помощью этой команды:

awk -f extract.awk logs | column -t -s '^I'

Где это '^I'представляет собой фактическую табуляцию в кавычках.

Единственной сложной частью было иметь дело с сообщениями об ошибках в журналах, которые могли быть переменным количеством слов. Я решил это, подсчитав столбцы справа для полей IP и кода ошибки.

Вот как выглядел результат:

Timestamp   EmailTo:         EmailFrom:                      IPAddress:   ErrorCodes:
2016-06-19  [email protected]   ([email protected])     36.23.21.11  554-
2016-06-20  [email protected]   ([email protected])  36.23.21.14  554-
2016-06-20  [email protected]     F=<[email protected]>           36.23.21.11  421
2016-06-20  [email protected]  F=<[email protected]>     36.23.21.14  421

Возможно, я ошибся в своих предположениях относительно входных столбцов, поскольку вы не указали, какой из них какой, и если вы хотите очистить адреса электронной почты в третьем столбце, то, возможно, вы слишком глубоко увязли в awk, и пришло время подумать об использовании Python или Perl.

¹или с разделителем вывода по вашему выбору, пока он не будет ни в каких данных. Затем просто используйте это как аргумент -sдля column.

²Как отмечает @Kusalananda, нет причин писать скрипт awk в одну строку. Вот его версия:

BEGIN   {
    OFS="\t";
    print "Timestamp\tEmailTo:\tEmailFrom:\tIPAddress:\tErrorCodes:";
}

{
    print $1, $6, $7, $NF, $(NF-5);
}

Что касается меня, то я люблю однострочные ответы.

Answer 1