Поиск дубликатов файлов. Обзор лучших инструментов

5 программ для поиска дубликатов файлов на Windows-устройствах

Проведение эффективной генеральной уборки на дисковом пространстве компьютера, наряду с использованием программ для автоматической очистки Windows, требует еще выполнения ручной работы по удалению ненужных файлов и файлов-дубликатов. Для отслеживания ненужных файлов предназначены специальные программы – анализаторы дискового пространства, они помогают отфильтровать содержимое дисков компьютера по определенным критериям (в частности, по весу), чтобы пользователь мог принять решение об удалении файлов или их оставлении. Для поиска дубликатов файлов также существует специальный софт – либо в виде отдельных программ или небольших утилит, либо в составе комплексного ПО для чистки и оптимизации Windows. Ниже рассмотрим пятерку программ для поиска дубликатов файлов. В пятерку вошли полностью бесплатные программы с поддержкой русского языка.

При проведении поиска дубликатов файлов на системном диске С лучше указывать не весь раздел целиком, а лишь отдельные папки, где хранятся пользовательские файлы. Дубликаты, обнаруженные в рабочих папках Windows, удалять нельзя. При обнаружении на диске С отдельных увесистых папок или файлов с незнакомыми названиями рекомендуется получить о них справку в Интернете.

Поиск дубликатов файлов. Обзор лучших инструментов

dupeGuru [Windows, Mac, Linux]

Эта утилита наверное мой фаворит в инструментах для поиска и удаления дубликатов, потому что имеет массу замечательных возможностей: Она является кросс платформенной, полностью бесплатная, а так же имеет продвинутый алгоритм меток и отбора.

Что такое не явные дубли? Несколько одинаковых файла могут иметь разное имя. Например у вас на компьютере может быть два файла: пример-файла.avi и пример файла(1).avi — утилитка это прекрасно понимает и тоже может пометить их как дубликат.

Кстати утилита имеет и другие издания: Music Edition и Picture Edition, оптимизированные для поиска дублей графических и аудио файлах — даже если они записаны в разных форматах. Это очень важно, ведь именно аудио и графические файлы наиболее часто становятся дублями.

Duplicate Files Finder [Windows, Linux]

Duplicate Files Finder представляет собой приложение, которое осуществляет поиск дублированных файлов (которые имеют одинаковое содержание, но не обязательно с таким же именем) и позволяет удалить пользователю ненужные файлы.

Duplicate Files Finder

Duplicate Files Finder может находить только точные дубликаты. Принцип ее работы — перебор всех файлов на компьютере по размеру и сравнение их по содержанию. С одной стороны это логично, но это совсем печально для видео и графики (ведь они в зависимости от алгоритма сжатия могут иметь разный размер), но для всего остального программа просто отличная.

Благодаря такому алгоритму сравнения Duplicate Files Finder работает гораздо быстрее своих конкурентов.

AllDup [Windows]

AllDup

AllDup является мощным инструментов для поиска дубликатов созданный одним человеком, Michael Thummerer. Утилита имеет ряд настроек для поиска дублей из: имени файла, расширения и типа данных, даты создания и изменения и еще много разных параметров.

AllDup имеет много полезных функций и большую гибкость в условиях поиска дубликатов, однако за функционал нужно заплатить. Интерфейс тут совсем не дружелюбный и это может загнать неуверенного пользователя в тупик. Однако если вы сможете разобраться в программе, то это приложение будет хорошим инструментом для поиска повторяющихся файлов.

Duplicate Cleaner [Windows]

Duplicate Cleaner

Duplicate Cleaner требует тонкой ручной настройки, прежде чем вы сможете использовать функционал данной программы на все сто процентов.

При ручной настройке вы можете выбрать в какой папке нужно найти дубли, а не сканировать весь компьютер как предлагают нам некоторые другие программы. В итоге вы можете эти дубли удалить, переместить их все в отдельную папку или вместо них создать ярлыки на единственный нужный файл. В целом впечатления положительные — так что рекомендую.

SimilarImages [Windows]

SimilarImages

Если вы пользователь Windows, и хотите избавиться от бесконечных копий изображений, то SimilarImages будет вам как никогда кстати. Изображения на мой взгляд самый частый источник дублированного контента на компьютере. Я например знаю что у меня есть куча дублирующихся фотографий в разных папках… а учитывая их количество разбираться с ними вручную у меня нет никакого желания.

Программа имеет гибкие настройки и может обнаруживать неточные дубликаты — это особенно актуально из-за присутствия артефактов появившимся в процессе сжатия изображения.

Самое замечательное в SimilarImages — она показывает вам два изображения когда находит дубли, и вы можете сделать вывод — оставить их или удалить дубль.

Заключение

Все как в реальной жизни, когда ненужное барахло создает ужасный беспорядок в вашем доме, так и дубликаты файлов могут накапливаться на вашем жестком диске. Такие файлы очень трудно удалить, потому что вы о нем забыли, а обычные программы для очистки системы не найдут их — так как они обосновалить на винчестере на вполне законных основаниях.

Используйте программы которые я вам перечислил для поиска дубликатов файлов чтобы освободить место на вашем жестком диске. Если вы знаете о других утилитах — поделитесь с нами в комментариях.

AllDup

AllDup – еще одна программа, которую также нельзя обойти вниманием. Эта мощная бесплатная утилита для Windows позволяет искать повторяющиеся файлы по нескольким параметрам: одинаковое имя, одинаковый размер, повторяющееся время создания и т.д. У предположительно одинаковых файлов программа проверяет контрольные суммы (можно выбрать алгоритм вычисления в настройках), поэтому вероятность удаления разных файлов одного размера нулевая. Также утилита умеет искать похожие изображения в форматах JPG, PNG и т.д. Это может быть полезно при удалении копий из домашнего фотоархива (например, дублей одного и того же снимка – с рамкой и без). AllDup распространяется и в виде классического инсталлятора, и в виде переносной версии, не требующей установки.

Эту утилиту можно порекомендовать любителям кроссплатформенных решений. Программа выпускается в виде пакетов для Ubuntu и Mac OS X (существует неофициальная версия для Windows 7, которая вполне работоспособна и в более поздних версиях ОС). Пользоваться ей довольно просто: выбираем директорию, в которой ищем копии файлов, и запускаем сканирование. Через некоторое время программа найдет дубликаты файлов, и вы сможете их удалить.

DupeGuru

DupeGuru — кроссплатформенное приложение с графическим интерфейсом, назначенное находить повторяющиеся файлы разных типов в системе. Операционная система для корректного запуска должна быть не ниже Windows 7 (хорошо работает для удаления повторяющихся файлов в Windows 10), либо OS X 10.10 и выше. С помощью dupeGuru легко можно находить музыку, имеющую одинаковые теги, дополнительную информацию, а также название, поставив «музыкальный» режим. Для сканирования фото задавайте особый режим работы, чтобы искать фотографии нечётко, позволяя обнаруживать схожие картинки на компьютере, но не обязательно одинаковые.

Добавление папки в DupeGuru

Запуск сканирования папки в DupeGuru

Установите русский язык во вкладке «Options», для облегчения ознакомления с интерфейсом окна программы. Там же вы можете задать, чтобы DupeGuru игнорировал файлы с весом ниже заданного, удалял пустые дублирующиеся папки, игнорировал объекты, ссылающиеся на сам файл (то есть те, что являются ярлыками).

Добавление папки в DupeGuru

Поиск аудио-дубликатов

Если поиск нужно проводить среди аудиофайлов, лучше рассмотреть специализированные решения для этих целей. Даже универсальные варианты неплохо справляются с задачей, но они не могут тягаться с данными программами. Если у вас много песен и их нужно отсортировать, стоит выбрать следующие приложения.

Audio Comparer

Минималистическое меню обеспечивает не только быстрый поиск, но и интуитивно простое меню.

Дубликаты файлов на компьютере

Программа способна оперировать тысячами файлов и обнаружить дубликаты в течение 1-2 часов, а это достаточно внушительные результаты. Программа способна сравнивать и выявлять наличие файлов-клонов даже у мелодий с разным размером и битрейтом.

Music Duplicate Remover

Поиск дубликатов файлов фото 3

Что особенного у приложения:

  • Относительно быстрый поиск;
  • Высокая результативность в выявлении клонов;
  • По сути приложение способно к умной фильтрации, будто оно прослушивает файлы и сравнивает их между собой, из-за этого скорость несколько снижается.

Работа программы крайне редко может превысить несколько часов, поэтому выбору в пользу утилиты вполне оправдан.

Как использовать SearchMyFiles

Если вам понравилась простота номинального средства поиска дубликатов файлов, вы также можете откопать SearchMyFiles. Как и предыдущая запись, эта портативная программа может вызвать у вас ностальгию по прежним версиям Windows. Но его алгоритмы поиска и параметры поиска на одном уровне с лучшими в отрасли на сегодняшний день.

Здесь установка не требуется. Просто извлеките содержимое из загруженного zip-файла и запустите приложение. На SearchMyFiles доступно множество вариантов поиска. Выберите из 5 различных режимов поиска, добавьте базовые папки для сканирования и просмотрите все основные параметры, чтобы сузить область поиска.

Помимо стандартных опций для включения / исключения папок и подпапок и диапазона размеров файлов, вы можете сузить поиск с помощью опций для поиска на основе атрибутов файлов, даты создания, изменения и доступа.

Или вы можете оставить все настройки по умолчанию и продолжить сканирование, нажав на «Начать поиск».

После завершения поиска выберите файлы, которые вы хотите удалить (удерживая Ctrl, щелкните файлы). Затем нажмите кнопку «Удалить». Когда вас попросят подтвердить, нажмите Да.

Помимо устаревшего внешнего вида, единственное, что сдерживает эту программу, — это отсутствие возможности выбрать повторяющиеся файлы для удаления одним щелчком мыши. Если вас это не беспокоит, то это настоящая жемчужина, по крайней мере, в наших книгах.

Программа поиска и удаления копий файлов Duplicate Cleaner Free быстрая и мощная

Лучшие бесплатные утилиты поиска и удаления копий файлов

Возьмем простой пример того, почему вам может понадобиться хорошо спроектированная утилита для поиска копий файлов. Допустим, у вас есть 50 файлов, у каждого из которых есть копии. А теперь представьте, что для каждого из этих файлов откроется отдельное окно, где надо выбрать, что делать с его копиями. Правда не удобно?

Duplicate Cleaner Free имеет понятный и удобный пользовательский интерфейс, разделенный на вкладки. После окончания сканирования, интерфейс автоматически переключается на вкладку с результатами поиска. Стоит отметить, что утилита может сканировать файлы на соответствие CRC (контрольная сумма файла) у файлов. Так же поддерживается специальный поиск для музыкальных файлов, со своими специфическим опциями. Очень быстро работает, особенно, если сравнивать с Clone Spy.

Результаты сканирования отображаются в виде списка на вкладке с результатами, где представлено подробное описание всех найденных файлов. Любой из этих файлов можно просмотреть. Особенностью просмотра является то, что для известных разрешений файлов утилита открывает соответствующую программу просмотра (т.е. для odt откроется OpenOffice, для pdf откроется Adobe Reader и т.д.). Для быстрой работы с результатами в интерфейсе предусмотрен специальный тулбар ‘Selection Assistant’. Данный тулбар позволяет выбрать все файлы по датам, по размеру, по шаблону имени или пути к файлу.

Утилита так же может вместо удаляемых файлов создавать, так называемые, жесткие ссылки на тот файл, который вы решили сохранить. Работа с жесткими ссылками идет точно так же, как и с обычными файлами. Важное отличие заключается в том, что все жесткие ссылки ссылаются на один реальный файл. Поэтому прежде чем использовать эту функциональность, настоятельно советуется прочитать подробную информацию об особенностях работы с жесткими ссылками, чтобы в последствии вы не были удивлены странным результатам.

AllDup

Хотя AllDup бесплатна, она умеет немало. Ищет, удаляет, копирует и перемещает дубликаты файлов, в том числе одинаковые аудиозаписи с разными тегами. Присутствует гибкая настройка поиска. С помощью встроенного просмотрщика можно изучить файлы и выбрать, что именно удалять.

8 комментариев

В новой версии интерфейс, конечно, мое почтение. Все поменяли, нужные функции спрятали, ненужные наоборот на виду и еще дублируются в виде пиктограмм, но все получилось. За гайд спасибо!

Автор: Владимир Белев

Любят разработчики намудрить. Этот «тренд» с изменением интерфейсов каждые несколько месяцев даже подбешивать стал.

ооочень сильно помог!

Автор: Владимир Белев

Рад был помочь, надеюсь и другие статьи будут полезными! 🙂

Всем добрый день. Спасибо за подробную инструкцию по работе с программой. Первая моя попытка работы с программой выдала для меня странную ситуацию. Программа выдала ошибку открытия нескольких WinRar файлов. Указала подробные пути этих файлов. Возникает вопрос, как поступать в подобных случаях? И не совсем понятен порядок действия при удалении дубликатов. Для перестраховке я хочу удалить дубликаты в отдельную папку на другом HDD. Где и какие настройки мне надо сделать, чтобы файлы оказались именно в этой папке и на другом жёстком диске? Спасибо.

Автор: Владимир Белев

andreus, здравствуйте! На счёт WinRAR. Смотря что вы пытались с ними сделать. Может, к примеру, архивы были повреждены. А что касается удаления дубликатов, то после выбора дубликатов, нужно открыть меню «Результаты поиска» и выбрать «Операции с выбранными файлами», после чего настроить, что с ними хотите сделать, например: удалить, переместить куда-либо или ещё что-то. Там каждая команда простая и настраивается легко.

Есть вопрос. У меня есть множество видеоуроков. В процессе их «собирания» образовались и многие дубликаты. Естественно группы видеоуроков у меня связанны в определённые группы в отдельных папках и подпапках. Если я обнаужил, что во время каких-либо манипуляций с папками (чтобы освободить место на определённом диске) я папку с набором видеоуроков перенёс в другое место, а потом, забыв, что именно эти уроки у меня есть создал новую папку с такими же уроками. Получается, что эти уроки у меня находятся дважды. Мне бы хотелось, чтобы дубликаты у меня удалились полность из одной и той-же папки (вместе с папкой). А не так, чтобы на одном диске остался урок 1, 2, 5, 7, а на другом 3, 4, 6, 8. Для этого есть необходимость, чтобы показывая дубликаты программа указывала их местоположение. Тогда я, убедившись, что эти файлы идентичны, я просто бы зашёл на диск и удалил всё папку дубликатов целяком, оставив целую паку (единственную) с оригиналами. И не появились бы две(три, четыре и т.д.) «рваные» папки. Позволяет ли программа осуществление таких действий. В Ваших скриншотах я не видел, что напротив названия файлов и размеров были бы указаны их физическое расположение.

Автор: Владимир Белев

На нескольких скриншотах видно, что указывается пусть к каждому файлу, который находит программа (колонка «Путь»). Также вы можете кликнуть правой кнопкой мыши по предполагаемому дубликату и выбрать «Открыть расположение файла» откроется обычный проводник Windows и в нём та папка, в которой расположен файл.

Adblock
detector