Поиск и удаление дубликатов фотографий

Поиск дубликатов фотографий. Сравнение 6 лучших программ

В этой инструкции о нескольких бесплатных и простых способах найти дубликаты файлов на компьютере в Windows 10, 8 или 7 и удалить их при необходимости. Прежде всего речь пойдет о программах, которые позволяют выполнить поиск дубликатов файлов, но, если вас интересуют способы интереснее, в инструкции затронута и тема их поиска и удаления с помощью Windows PowerShell.

Для чего это может потребоваться? Почти у любого пользователя, который достаточно продолжительное время сохраняет архивы фотографий, видео, музыки и документов к себе на диски (не важно, внутренние или внешние хранилища), с огромной вероятностью «образуются» дубликаты одних и тех же файлов, занимающие лишнее место на HDD, SSD или другом накопителе.

Это не особенность Windows или систем хранения, скорее — особенности нас самих и результат значительного объема хранимых данных. И, может оказаться, что найдя и удалив дубликаты файлов, вы сможете освободить значительное место на диске, а это может быть полезным, особенно для SSD. См. также: Как очистить диск от ненужных файлов.

Важно: не рекомендую выполнять поиск и удаление (особенно автоматическое) дубликатов сразу на всём системном диске, указывайте в приведенных программах ваши пользовательские папки. Иначе есть значительный риск удалить необходимые системные файлы Windows, которые нужны более чем в одном экземпляре.

Для кого мы создали Image Comparer

• Для фотографов, снимающих сериями. Image Comparer поможет сгруппировать серии и выбрать наиболее удачный снимок. Специально для профессионалов мы добавили поддержку формата RAW.
• Для вебмастеров, на чьих сайтах большое количество графики. Image Comparer упорядочит графические изображения и избавится от дубликатов, занимающих лишнее место на жёстком диске и хостинге.
• Для коллекционеров картинок, цифровых иллюстраций, обоев для рабочего стола. Image Comparer сделает вашу коллекцию уникальной, избавив её от повторяющихся и немного модифицированных изображений.

Оказывается, что и в обычном домашнем архиве фотографий встречается достаточно дублей. Достаточно дать программе просканировать папку с фото, чтобы в этом бесплатно убедиться. Попробуйте!

Вы можете попробовать Image Comparer™ в работе бесплатно в течение 30 дней. Ознакомительная версия имеет одно функциональное ограничение:

• вы не сможете удалять, копировать, перемещать найденные похожие изображения в автоматическом режиме.

Системные требования Image Comparer

Программа работает на любом компьютере с установленной Windows® Vista/7/8/10/11.

Попробуйте аналогичную программу для ваших аудиофайлов! Поиск похожих композиций по звучанию — Audio Comparer.

Duplicate Video Search — программка, которая поможет вам найти и удалить дубликаты видео по содержимому. Например, программка может найти один и тот же фильм, сохраненный в 720p и 1080p разрешениях.

DupliFinder

Простая и удобная программка для поиска и удаления дубликатов фотографий и прочих изображений. Поиск осуществляется путем сравнения контрольных сумм MD5. В остальном программа похожа на Dup Detector. Поддерживается работа с подкаталогами, вывод процентного соотношения схожести, предпросмотр результатов сравнения. Выбранные дубликаты можно удалить. К недостаткам относятся несколько медленная скорость работы, а также необходимость установки пакета Java. Язык интерфейса — английский.

VisiPics

Еще одна бесплатная программа для поиска дубликатов. Размер – чуть больше 2 мегабайт. Язык интерфейса – английский и иные иностранные.

1. Поиск сразу по всем папкам на компьютере;
2. Создание игнор-листа (игнорирование отдельных фото или групп файлов из списка);
3. Сохранение проектов для быстрого доступа к ним впоследствии;
4. Сохранение фотографий из игнор-листа.

Функции: скрыть/показать размер фото, отображение скрытых папок, сканирование перевернутых фотографий, выбор степени фильтрации, изменение языка, активация медленной обработки, синхронизация потоков.

1. Запустите и установите программу после скачивания;
2. Выберите в активном окне раздел компьютера или конкретную папку, где необходимо выполнить поиск одинаковых фотографий;
3. Нажмите расположенную справа стрелочку со значком «+», указывающую вверх;
4. Переместите ползунок справа с положение «Strict» (максимально точное сравнение), «Basic» или «Loose»;
5. Нажмите кнопку «Play». Дождитесь сканирования, удалите одинаковые фото. Используйте соседние клавиши для временной или полной остановки процесса.

Для удаления файлов кликните в левом окне по дубликатам. Их может быть от 2 и более. На каждом фото появится надпись «Marked». Щелкните «Delete». Все отмеченные дубликаты исчезнут.

Хорошая программа, но процесс отбора дубликатов и их удаление занимает время.

VisiPics — ищем дубликаты

840,289 раз. Именно столько раз скачали программу на момент написания статьи. Судя по статистике, на западе с бесплатными программами такого рода совсем туго.

Интерфейс полностью английский, но типовый, возможно разобраться интуитивно.

Функционал хороший. Есть наглядный механизм регулировки чувствительности. Пусть не такой точный, как у AntiDupl, но есть.

Работа поиска дубликатов тоже не вызывает сомнений — действительно работает, правда чуть более привязан к цвету снимка, чем у остальных.

Скорость поиска средняя. Главный минус программы опять таки в недоработанной системе превью.
Во-первых, сами миниатюры просматриваются в увеличенном виде только после длительного удержания курсора. Да и вообще миниатюра по габаритам всего 48 пикселей! Сейчас уже в большинстве мониторов разрешение 1080p, и, конечно, такой мелкий размер это неудобно. Возникает вопрос о том действительно ли миллион человек мучаются с таким маленькими превью, или разработчики слегка лукавят о цифре скачиваний.

Универсальные программы для поиска дубликатов файлов на компьютере

Как уже говорилось ранее, универсальные программы способны искать дубликаты любых форматов, но уступают по точности более ориентированным версиям. Есть два основных параметра, по которым такие программы сравнивают файлы между собой: размер и контрольная сумма. Такой подход хотя и увеличивает скорость поиска, но позволяет найти лишь полностью идентичные файлы, и то далеко не все. Если вас устроит такой вариант, то давайте рассмотрим самые популярные среди пользователей интернета программы.

DupKiller

Программу DupKiller без преувеличений можно назвать самой популярной у нас на родине. И не удивительно, ведь у неё довольно много плюсов и практически нет минусов. Первое, чем подкупает данная программа – это, конечно же, полная и качественная русификация. Второе – это скорость работы, она здесь весьма высока и это при том, что и точность поиска здесь приятно удивляет. Кроме размера и содержания, DupKiller также сравнивает файлы и по дате их изменения. Не забыли разработчики и о том, что программа универсальна, а потому сравнивает она практически все существующие на данный момент форматы файлов. Добавьте к этому удобный интерфейс и широкую настройку функций и поймете, за что так любят данную программу.

Скачать её можно бесплатно на официальном сайте.

Duplicate Finder

Программа Duplicate Finder мало чем уступает предыдущему варианту и даже имеет несколько индивидуальных плюсов. Так, программа не только находит похожие файлы, но и сортирует их. Кроме поиска и удаления файлов-дубликатов она также удаляет пустые папки и “нулевые” файлы. Поиск же здесь осуществляется по размеру, контрольной сумме и названию файлов.

Несмотря на всё это, программа всё же не столь популярна среди российских пользователей как DupKiller, хотя главной причиной тому, скорее всего, является отсутствие русской версии программы.

Glary Utilities

Третья по популярности программа для поиска дубликатов на компьютере – это Glary Utilities. Особенность данной программы в том, что она выполняет целый ряд различных функций по ускорению работы ПК: от очистки реестра, до управления безопасностью, а удаление одинаковых файлов лишь одна из её многочисленных функций. Программа полностью переведена на русский и находится в свободном доступе. Единственный её минус – это серьёзная нагрузка, оказываемая на систему, из-за чего во время работы программы компьютер может серьёзно зависать.

Поиск совпадающих фото по различным алгоритмам с AntiDupl

Заключительный участник нашего обзора – программа AntiDupl может приглянуться вам сразу по нескольким причинам. Во-первых, она бесплатная. Во-вторых, у неё русский интерфейс. Последнее, впрочем, не очевидно. Для того чтобы включить русский, откройте меню View и в разделе Language выберете соответствующий пункт:

В отличие от других, эта программа не инсталлируется, а находится в самораспаковывающемся архиве, который извлекает её вместе с необходимыми файлами в отдельную папку.

Чтобы подготовить поиск дубликатов кликните по кнопке с подписью Open и в появившемся окне добавьте нужные каталоги:

Следом можно нажимать Ок, а потом активировать на панели инструментов зелёную кнопку «начать поиск». Используя базовый алгоритм, программа нашла для нас несколько групп дубликатов:

Переключив вверху алгоритм на более вольный SSIM, мы получили уже на две группы дубликатов больше, а после увеличения «свободы» поиска с 20 до 35% программа выдала нам ещё более подробный список:

При этом во всех случаях действительно нашлись как минимум заметно похожие друг на друга изображения. Так что не брезгуйте экспериментировать с настройками.

Дополнительных опций у программы немало:

На вкладке «поиск» можно узнать, что AntiDupl поддерживает 13 форматов, среди которых помимо традиционных JPG/PNG, есть ICON, PSD и EXIF. Разумеется, форматы можно выбирать. Ещё в опциях есть проверка на дефекты, блочность и размытость, причём в последних двух случаях можно задавать порог. Есть возможность искать в скрытых и системных каталогах.

• Программа AntiDupl. Официальный сайт;
• Язык: русский;
• Распространение: бесплатно.

Какая программа лучше ищет одинаковые и похожие фотографии?

При поиске дубликатов часть пользователей интересует именно 100% соответствие, чтобы избавиться от дублей в своей коллекции. Однако нередко возникает и задача найти именно похожие картинки.

И вот здесь огромное пространство для возможных отличий. Этот могут быть разные форматы, разрешения, обрезанные версии одного и того же изображения, добавление рамок и водяных знаков, изменённые цвета и подписи на картинках.

Мы постарались учесть большинство из этих факторов и после всех проб создали в итоге небольшой набор с более чем шестью десятками картинок. В них мы создали девять групп дубликатов. Скажем честно, на истину в последней инстанции наш опыт точно не претендует, но попробовать было интересно. Результаты следующие:

• Duplicate Remover Free: нашёл лишь 3 группы дубликатов;
• Similar Images Finder: нашёл 4 группы, но неудобный интерфейс, множество ложных результатов и при этом платность приложения сильно испортили общее впечатление;
• AntiDupl по умолчанию нашёл 3 типа дубликатов, установка алгоритма SSIM увеличила результат поиска до 5 групп;
• VisiPics при базовом уровне поиска нашёл лишь 2 группы дубликатов, однако установка ползунка на уровень Loose позволила найти уже 7 групп;
• Awesome Duplicate Photo Finder нашёл 7 групп дубликатов;
• Image Comparer также сумел обнаружить 7 групп.

При этом Image Comparer сумел найти изображения, которые пропустили Awesome Duplicate Photo Finder и VisiPics, а те, в свою очередь, восполнили пробелы Image Comparer.

Найти и удалить дубликаты картинок — это просто!

Image Comparer™ это утилита для поиска похожих картинок. Цветовая гамма и различное разрешение мало влияют на качество сравнения. Image Comparer™ найдет все похожие изображения даже если одно из них в JPEG формате, а другое в стандартном Windows bitmap формате. Начиная с версии 3.3, Image Comparer научился подсвечивать различия в сравниваемых изображениях, а с версии 3.7 программа оптимизирована для использования с современными многоядерными процессорами.

(загрузка с официального сайта, для Windows, без вирусов)

Если у вас большая коллекция изображений в различных форматах, то вы знаете, как сложно помнить все и удалять одинаковые картинки. А что если они одинаковые, но различного качества (разрешение, степень сжатия)? Мы предоставляем вам возможность простого решения этой проблемы. Image Comparer™ автоматизирует процесс нахождения похожих картинок. Заметьте, что Image Comparer™ ищет не только полностью идентичные картинки, но и просто схожие между собой! В результате сравнения вы получаете список, состоящий из пар изображений с процентом схожести. 100% означает, что картинки абсолютно одинаковые.Затем вы можете удалить повторяющиеся картинки с худшим качеством всего двумя кликами мышки!

Поддерживаемые форматы изображений: RAW, JPEG, J2K, BMP, GIF, PNG, TIFF, TGA и другие.