☰

shell script lido da coluna csv e pesquisa de arquivos

tag-icon • tag-icon shell-script csv
shell script lido da coluna csv e pesquisa de arquivos

Estou criando um script de shell para obter entrada de arquivos CSV, tendo duas linhas (uma coluna mencionando o tempo e outra string de arquivo). Meu script funciona quando há uma linha... Mas não está funcionando em várias linhas e também como pode eu sei qual linha ele está pesquisando não obteve os arquivos.

Arquivo de amostra:

1300,N213
1245,N218
1400,N222
1600,N225

Código, estou tentando fazer funcionar.

#!/bin/bash
tr_filepath=/var/opt/data/nms_umts_pms_seg/segment1/
echo "Folder to search for traces ${tr_filepath}"
tr_newpath=/var/opt/ericsson/nms_umts_pms_seg/segment1/edos/4G/
CNTRL_FILE=/home/vx622325/filematch.csv
echo "File Contents of ${CNTRL_FILE} to match with pattern"

for i in $CNTRL_FILE;
do

  t=$(cat $i | awk -F"," '{ print $1}')
  n=$(cat $i | awk -F"," '{ print $2}')
  X=`find "$tr_filepath" -type f -iname "A*."$t"*,*="$n"*.bin.gz"`
  echo -e "Traces To Copy \n $X\n" >> /home/vx622325/result_`date +"%d_%m_%Y"`.csv


if [ -d "$tr_newpath" ]; then
        y= cp -rp $X $tr_newpath
else
        echo "Output folder $tr_newpath not found" > /home/vx622325/result_`date +"%d_%m_%Y"`.csv

fi
done

Arquivos para pesquisar

A20190118.2200+0300-2201+0300_SubNetwork=ONRM_RootMo,SubNetwork=N213,MeContext=N213,ManagedElement=1_rnc_gpehfile_Mp0.bin.gz
A20190118.2200+0300-2201+0300_SubNetwork=ONRM_RootMo,SubNetwork=N213,MeContext=N213,ManagedElement=1_rnc_gpehfile_Mp10.bin.gz
A20190118.2200+0300-2201+0300_SubNetwork=ONRM_RootMo,SubNetwork=N213,MeContext=N213,ManagedElement=1_rnc_gpehfile_Mp11.bin.gz

Responder1

Script simplificado, que assume que o arquivo ~vx622325/filematch.csvé umsimplesArquivo CSV (sem novas linhas ou vírgulas incorporadas):

#!/bin/sh

tr_filepath=/var/opt/data/nms_umts_pms_seg/segment1
tr_newpath=/var/opt/ericsson/nms_umts_pms_seg/segment1/edos/4G

result_out=~vx622325/$( date +'result_%d_%m_%Y.log' )

if [ -d "$tr_newpath" ]; then
    printf 'Destination does not exist: %s\n' "$tr_newpath" >"$result_out"
    exit 1
fi

set --
while IFS=, read -r a b; do
   set -- "$@" -o -name "A*.$a*,*=$b*.bin.gz"
done <~vx622325/filematch.csv
shift   # removes the initial "-o"

find "$tr_filepath" -type f \( "$@" \) -exec sh -c '
    dest=$1; shift
    cp "$@" "$dest"/
    printf "Copied: %s\n" "$@"' sh "$tr_newpath" {} + >"$result_out"

Isso lê cada registro do arquivo CSV de entrada usando read, com uma vírgula como delimitador de campo, nas duas variáveis a​​e b.

As variáveis ​​são usadas para criar -namepadrões OR-ed para find.

findé então usado para procurar arquivos cujos nomes correspondam aos padrões. Os arquivos são copiados para o diretório de destino em lotes e seus nomes são registrados no arquivo de saída.

Usando ferramentas GNU, você poderia fazer o seguinte:

#!/bin/bash

tr_filepath=/var/opt/data/nms_umts_pms_seg/segment1
tr_newpath=/var/opt/ericsson/nms_umts_pms_seg/segment1/edos/4G

printf -v result_out '%s/result_%(%d_%m_%Y)T.log' ~vx622325 -1

if [ -d "$tr_newpath" ]; then
    printf 'Destination does not exist: %s\n' "$tr_newpath" >"$result_out"
    exit 1
fi

namepats=()
while IFS=, read -r a b; do
   namepats+=( -o -name "A*.$a*,*=$b*.bin.gz" )
done <~vx622325/filematch.csv

find "$tr_filepath" -type f \( "${namepats[@]:1}" \) \
    -exec cp -t "$tr_newpath"/ {} + \
    -printf 'Copied: %p\n' >"$result_out"

Responder2

Conforme mencionado por msp9011, o problema está em

for i in $CNTRL_FILE

onde o nome do arquivo é fornecido onde você deve fornecer o conteúdo do arquivo. A maneira mais fácil é preparar o arquivo configurando o separador de campo interno (IFS) da seguinte forma

while IFS=, read -r column1 column2
do
    echo "column1 : $column1, column2 : $column1"
    #Take action using input
done < $CNTRL_FILE

informação relacionada