Удаление дубликатов

Удаление дубликатов

У меня полно таких дубликатов:

2017-11-22_3083_smokey_brights_-_come_to_terms.mp3
2017-12-01-Smokey_Brights_-_Come_To_Terms.mp3

Как мне сохранить только один из них? К сожалению, их md5sum различаются.

Моя лучшая попытка -

ls *mp3 | tr '[:upper:]' '[:lower:]' | rev | sort | uniq -w 30 -d | rev 

нацеливание на файлы, заканчивающиеся на 30 или более одинаковых символов.

решение1

К сожалению, их md5sum различаются.

тогда они действительно дубликаты? И как вы узнаете, какие из них удалить, не прослушав их?

Я бы посоветовал вам получитьпоиск дубликатов файлови настройте его так, чтобы он просто показывал дубликаты, а не автоматически удалял их, чтобы вы могли прослушать их и принять решение.

Или, если это слишком сложно, настройте автоматическое удаление всех файлов, кроме самых новых, самых больших и т. д.

Вместо простого поиска дубликатов файлов рассмотрите возможность поиска дубликатов музыкальных файлов.

Эта страницаговорит, например

Similarity быстро сканирует вашу музыкальную коллекцию и показывает все дубликаты музыкальных файлов, которые у вас могут быть. Сравнение, основанное на технологии «акустического отпечатка», учитывает фактическое содержимое файлов, а не только теги или имена файлов, и, таким образом, обеспечивает исключительную точность оценки сходства. Более того, сравнение не зависит от формата музыкального файла; приложение полностью поддерживает практически все форматы файлов. Отлично работает на Windows 10 от Microsoft и macOS от Apple.

Благодаря 3-уровневому анализу Similarity предлагает уникально высокий уровень обнаружения дубликатов. Он поддерживает форматы MP3, AAC, M4A, WMA, OGG, WAV, FLAC, APE, WV, MPC, OPUS, TTA и способен находить похожие композиции среди всех них. Фактически, список поддерживаемых форматов поистине безграничен за счет поддержки сторонних кодеков. Similarity имеет встроенный редактор тегов, анализатор спектра, анализатор сонограмм, автоматический конвертер тегов, ускорение вычислений с помощью технологии OpenCL (поддерживает современные видеокарты nVidia и AMD) и множество других интересных функций.

Сходствоэто бесплатно, так почему бы не попробовать?

Связанный контент