☰

Добавление значений во вторых столбцах, если запись в первом столбце такая же в UNIX

tag-icon • tag-icon csv
Добавление значений во вторых столбцах, если запись в первом столбце такая же в UNIX

Я пытаюсь агрегировать файл, содержащий следующие данные в UNIX. Мне нужно сложить суммы, если ключ тот же.

Key,amount,date,Time
abc-xyz-12234,45,15-08-91,23:00
pqr-vgh-5241,15,15-08-91,21:00
abc-xyz-12234,35,15-08-91,23:00
pqr-vgh-5241,24,15-08-91,21:00
abc-xyz-12234,655,15-08-91,23:00
lkj-erf-8542,281,15-08-91,10:00
pqr-vgh-5241,40,15-08-91,21:00

Вывод должен быть следующим:

abc-xyz-12234,735,15-08-91,23:00
pqr-vgh-5241,79,15-08-91,21:00
lkj-erf-8542,281,15-08-91,10:00

Я попробовал следующую команду, но она просто выдает мне uniq

cat file | grep "abc-xyz-12234" | uniq

решение1

Другим возможным решением awkможет быть:

awk 'BEGIN { FS = OFS = "," }
     NR != 1 { y[$1] += $2; $2 = y[$1]; x[$1] = $0; }
     END { for (i in x) { print x[i]; } }' file

Недостаток в том, что он не сохранит ваш заказ. Поэтому результат может быть:

pqr-vgh-5241,79,15-08-91,21:00
abc-xyz-12234,735,15-08-91,23:00
lkj-erf-8542,281,15-08-91,10:00

решение2

Это можно сделать с помощью awk:

#!/bin/sh
sort | awk -F, '
function result() {
    if ( key != "" ) {
            printf "%s,%d,%s\n", key, value, datetime;
    }
}
BEGIN { key = ""; value = 0; datetime = ""; }
$2 ~ /^[0-9]+/ {
    if ( $1 == key ) {
            value += $2;
    } else {
            result();
            key = $1;
            value = $2;
            datetime = $3 "," $4;
    }
}
END { result(); }
'

давая

./foo <input
abc-xyz-12234,735,15-08-91,23:00
lkj-erf-8542,281,15-08-91,10:00
pqr-vgh-5241,79,15-08-91,21:00

решение3

Вот способ на Perl. Назовем его так ./script file.ext:

use warnings;
use strict;

my %data;
my @order;

while (<>){
    next if $. == 1;
    my @line = split /,/;
    if (defined $data{$line[0]}){
        $data{$line[0]}->[1] += $line[1];
    }
    else {
        $data{$line[0]} = \@line;
        push @order, $line[0];
    }
}

for (@order){
    print join(',', @{$data{$_}});
}

решение4

Это использует Miller ( mlr) для вычисления суммы поля amountпо каждому набору записей, сгруппированных по полям Key, dateи Time. Miller добавит сумму как новое поле , amount_sumв конец списка полей, поэтому мы также изменим порядок полей и переименуем их.

mlr --csv \
    stats1 -a sum -f amount -g Key,date,Time then \
    reorder -f Key,amount_sum then \
    label Key,amount file

Вывод с учетом данных в вопросе:

Key,amount,date,Time
abc-xyz-12234,735,15-08-91,23:00
pqr-vgh-5241,79,15-08-91,21:00
lkj-erf-8542,281,15-08-91,10:00

Если вы не хотите, чтобы заголовок отображался в выходных данных, используйте mlrсоответствующую --headerless-csv-outputопцию.

Связанный контент