☰

Вывести список строк, которые являются подстроками других строк в списке.

tag-icon • tag-icon bash shell-script text-processing
Вывести список строк, которые являются подстроками других строк в списке.

У меня есть список таких имен:

dog_bone
dog_collar
dragon
cool_dragon
lion
lion_trainer
dog

Мне нужно извлечь имена, которые встречаются в других именах, например:

dragon
lion
dog

Я просмотрел uniqстраницу man, но, похоже, она сравнивает целые строки, а не строки. Есть ли способ сделать это с помощью функции bash?

решение1

file=/the/file.txt
while IFS= read -r string; do
  grep -Fe "$string" < "$file" | grep -qvxFe "$string" &&
    printf '%s\n' "$string"
done < "$file"

Это приведет к запуску одной read, двух, grepа иногда и одной printfкоманды на строку файла, поэтому будет не очень эффективно.

Вы можете сделать все это за один awkвызов:

awk '{l[NR]=$0}
     END {
       for (i=1; i<=NR; i++)
         for (j=1; j<=NR; j++)
           if (j!=i && index(l[j], l[i])) {
             print l[i]
             break
           }
     }' < "$file"

хотя это означает, что весь файл сохраняется в памяти.

решение2

Баш

names=(
  dog_bone
  dog_collar
  dragon
  cool_dragon
  lion
  lion_trainer
  dog
)

declare -A contained                 # an associative array
for (( i=0; i < ${#names[@]}; i++ )); do 
    for (( j=0; j < ${#names[@]}; j++ )); do 
        if (( i != j )) && [[ ${names[i]} == *"${names[j]}"* ]]; then
            contained["${names[j]}"]=1
        fi 
    done
done
printf "%s\n" "${!contained[@]}"    # print the array keys

dog
dragon
lion

решение3

Вот подход на Perl. Он также требует загрузки файла в память:

perl -le '@f=<>; foreach $l1 (@f){ 
                    chomp($l1); 
                    foreach $l2 (@f){ 
                        chomp($l2); 
                        next if $l1 eq $l2; 
                        $k{$l1}++ if $l2=~/$l1/;
                    }
                } print join "\n", keys %k' file

решение4

Вот bashверсия 4.xрешения:

#!/bin/bash

declare -A output
readarray input < '/path/to/file'

for i in "${input[@]}"; do
  for j in "${input[@]}"; do
    [[ $j = "$i" ]] && continue
    if [ -z "${i##*"$j"*}" ]; then
      if [[ ! ${output[$j]} ]]; then
        printf "%s\n" "$j"
        output[$j]=1
      fi
    fi
  done
done

Связанный контент