☰

sed: Excluindo uma lista de caminhos de um conjunto de arquivos

tag-icon • tag-icon linux bash sed text-editing
sed: Excluindo uma lista de caminhos de um conjunto de arquivos

Eu tenho um arquivo chamadocomum.txtque contém uma lista de caminhos absolutos. Por exemplo:

/etc
/etc/group
/var/log/syslog

Eu também tenho um conjunto de arquivos<nome do host>.txtque também contém uma lista de caminhos absolutos. Aqui está um exemplo (chame-ohost1.txt):

/root/.bashrc
/var/log/syslog
/etc/hosts
/bin/true
/etc
/sbin/rtmon
/etc/group

Eu gostaria de remover todos os caminhos que aparecem emcomum.txtde cada arquivo no conjunto de arquivos<nome do arquivo>.txt. Então, o arquivo de exemplohost1.txtacima se tornaria:

/root/.bashrc
/etc/hosts
/bin/true
/sbin/rtmon

Eu escrevi o seguinte script Bash para fazer isso:

#!/bin/bash

set -o nounset
set -o errexit
set -o pipefail

while read -r ONE_PATH
do
   for ONE_FILE in host1.txt host2.txt host3.txt
   do
      sed -i '\:'"$ONE_PATH"':d' "$ONE_FILE"
   done
done < common.txt

Estou tendo dificuldade em acertar o comando sed. O que é mostrado acima resulta em todos os arquivos operados ao ficarem vazios.

Como posso corrigir isso para atingir meu objetivo?

Responder1

#!/bin/bash

set -o nounset
set -o errexit
set -o pipefail

declare -r SCRIPT_DIR="$( cd "$( dirname "${BASH_SOURCE[0]}" )" && pwd )"
declare -r FILES_DIR=${SCRIPT_DIR%/*}

while read -r ONE_PATH
do
   for ONE_FILE in $(find "$FILES_DIR" -maxdepth 1 -type f -print)
   do
      if [[ "$ONE_FILE" == *".swp" ]] ||
         [[ "$ONE_FILE" == *"common.txt" ]]; then
         continue
      fi

      sed -i '\|^'"$ONE_PATH"'$|d' "$ONE_FILE"
   done

echo "Done removing $ONE_PATH"
done < "$SCRIPT_DIR"/../common.txt

exit 0

Responder2

Posso sugerir uma solução que não use sed?

sort common.txt > common.txt.sorted
for f in host1.txt host2.txt host3.txt ; do
    sort $f > $f.sorted
    diff common.txt.sorted $f.sorted | egrep '^>' | sed -e 's/^> //' > $f.output
    rm $f.sorted
done

organizarclassifica listas em ordem alfabética. diferençaencontra as diferenças entre o arquivo a ecomum.txt.egrepseleciona linhas que começam com >, que são linhas emhost1.txt.classificadomas não emcomum.txt.classificado. Finalmente,sedremove o início >(que é > seguido por um espaço) adicionado pordiferença.

A lista de saída também estará em ordem alfabética.

Responder3

Primeiro, a entrada deve ser classificada ao contrário. Não adianta remover /etc e depois procurar por /etc/group. Em seguida, verificamos se o arquivo pode ser gravado (se não, pular). Então ONE_PATH deve ser escapado e então o sed pode fazer seu trabalho,

sort -r common.txt \
| while read -r ONE_PATH
do
   for ONE_FILE in host1.txt host2.txt host3.txt
   do
      if [ -w "$ONE_FILE" ]
      then
        # sed -i '\:'"$ONE_PATH"':d' "$ONE_FILE"
        ONE_PATH_ESC=$(echo "$ONE_PATH" | sed "s!/!\\\/!g")
        sed -i 's/^'"$ONE_PATH_ESC"'//' "$ONE_FILE"
      fi
   done
done

Com os dados de teste fornecidos, você obtém:

$ pr -n host1.txt
1   /root/.bashrc
2
3   /hosts
4   /bin/true
5
6   /sbin/rtmon
7

Existem 3 linhas vazias.

informação relacionada