Analisando arquivo no Linux: armazena apenas carimbos de data/hora

Question

Eu tenho 31 arquivos em um diretório. O formato do arquivo é o seguinte:

TimeStamop      user-id
1471417712595   1936f35c-XXXX-XXXX-XXXX-49898523b8ea
1471417717238   e3153e8d-XXXX-XXXX-XXXX-7710089c77bb
1471417718730   4e470320-XXXX-XXXX-XXXX-29bc448f09a1
1471417719211   e8b6a6c0-XXXX-XXXX-XXXX-dd68d836fb31
1471417723775   cbc009c1-XXXX-XXXX-XXXX-88cda2b1b812
1471417723775   cbc009c1-XXXX-XXXX-XXXX-88cda2b1b812
1471417725790   c332eba7-XXXX-XXXX-XXXX-509c42a621d1
1471417725522   4712acf1-XXXX-XXXX-XXXX-11a24bcbe7c8
1471417601920   502bc0dd-XXXX-XXXX-XXXX-eff38b468461
1471417604615   8c6b2ef9-XXXX-XXXX-XXXX-9efb1223e383

Eu só quero informações de carimbo de data e hora e quero escrever todos os carimbos de data e hora em um arquivo usando o script de shell do Linux. O tamanho total do arquivo (tamanho de 31 arquivos) é de 4,5 GB. Quero um método eficiente para realizar esta tarefa. Eu fiz isso em python. mas quero isso em shell script.

Answer 1

Com awk, no diretório que contém os arquivos:

awk 'FNR>1 {print $1}' * >output.txt

• FNR>1corresponde a todos os registros com número de registro maior que 1 de cada arquivo, ou seja, isso é para eliminar o cabeçalho de cada arquivo

• Para esses registros, {print $1}imprime apenas o primeiro campo que são os carimbos de data e hora