Программа для поиска одинаковых файлов и папок на компьютере. Лучшие программы для поиска дубликатов (одинаковых) файлов Как убрать одинаковые файлы на компьютере

Доброго времени суток.

Статистика вещь неумолимая - у многих пользователей на жестких дисках лежат, порой, десятки копий одного и того же файла (например, картинки, или музыкального трека). Каждая из таких копий, разумеется, отнимает место на винчестере. А если диск ваш уже «забит» под завязку - то таких копий может быть достаточно много!

Чистить дубликаты файлов вручную - вещь не благодарная, именно поэтому, я хочу собрать в этой статье программы для поиска и удаления дубликатов файлов (причем, даже тех, которые отличаются и по формату файла, и по размеру друг от друга - а это довольно сложная задача!). Итак…

Список программ для поиска дубликатов

1. Универсальные (для любых файлов)

Осуществляют поиск одинаковых файлов по их размеру (контрольным суммам).

Под универсальными программами, я понимаю, те, которые годятся для поиска и удаления дублей любых типов файлов: музыки, фильмов, картинок и пр. (ниже в статье для каждого типа будет приведены «свои» более точные утилиты). Работают они все в большинстве по одному типу: они просто сравнивают размеры файлов (и их контрольную сумму), если есть среди всех файлов одинаковые по этой характеристике - показывают вам!

Т.е. благодаря ним можно быстро найти на диске полные копии (т.е. один в один) файлов. Кстати, так же отмечу, что данные утилиты работают быстрее, чем те, которые специализированы для конкретного типа файлов (например, поиска картинок).

DupKiller

Эту программу я поставил на первое место по ряду причин:

• поддерживает просто огромное число разнообразных форматов, по которым она может проводить поиск;
• высокая скорость работы;
• бесплатная и с поддержкой русского языка;
• очень гибкая настройка поиска дублей (поиск по названию, размеру, типу, дате, содержимому (ограниченно)).

Duplicate Finder

Эта утилита, помимо поиска копий, еще и сортирует их так, как вам вздумается (что очень удобно, когда копий находится неимоверное количество!). Так же к возможностям поиска добавьте побайтовое сравнение, сверка контрольных сумм, удаление файлов с нулевым размером (и пустых папок тоже). В общем-то, с поиском дублей эта программа справляет довольно неплохо (и быстро, и качественно!).

Немного не комфортно будут себя чувствовать те пользователи, которые плохо знакомы с английским: русского в программе нет (возможно после будет добавлен).

Glary Utilites

Вообще, это не одна утилита, а целый сборник: поможет удалить «мусорные» файлы, задать оптимальные настройки в Windows, дефрагментировать и очистить жесткий диск и т.д. В том числе, в этом сборнике есть утилита для поиска дублей. Работает она относительно не плохо, поэтому я и порекомендую этот сборник (как один из самых удобных и универсальных - что называется на все случаи жизни!) еще раз на страницах сайта.

2. Программы поиска дубликатов музыки

Данные утилиты пригодятся всем меломанам, у которых на диске скопилась порядочная коллекция музыки. Рисую довольно типичную ситуацию: скачиваете различные сборники музыки (100 лучших песен октября, ноября и пр.), часть композиций в них повторяется. Не удивительно, что, накопив музыки на 100 ГБ (к примеру), 10-20ГБ - могут быть копиями. Причем, если бы размер этих файлов в разных сборниках был одинаковый - то их бы можно было бы удалить первой категорией программ (см. выше в статье), но так как это не так - то эти дубли не находятся ничем, кроме вашего «слуха» и специальных утилит (которые представлены ниже).

M usic Duplicate Remover

Результат работы утилиты.

Эта программа отличается от остальных, прежде всего, свои быстрым поиском. Она ищет повторные треки по их ID3 тегам и по звуку. Т.е. она как бы за вас прослушает композицию, запомнит ее, а затем сравнит ее с другими (таким образом, проделывает огромный объем работы!).

На скриншоте выше представлен ее результат работы. Свои найденные копии она представит перед вами в виде небольшой таблички, в которой к каждому треку будет приписана цифра в процентах схожести. В общем, достаточно удобно!

A

Найденные повторные MP3 файлы…

Эта утилита схожа с вышеприведенной, но у нее есть один несомненный плюс: наличие удобнейшего мастера, который будет Вас вести по шагам! Т.е. человек, впервые запустивший эту программу, легко разберется куда нажимать и что делать.

Например, в своих 5000 треках за пару часов, мне удалось найти и удалить несколько сотен копий. Пример работы утилиты представлен на скрине выше.

3. Для поиска копий картинок, изображений

Если анализировать популярность тех или иных файлов, то картинки, пожалуй, не отстанут от музыки (а для некоторых пользователей и перегонят!). Без картинок вообще сложно представить работу за ПК (и другими устройствами)! Но поиск картинок с одинаковым изображением на них - дело довольно трудное (и долгое). И, должен признаться, программ этого рода сравнительно не много…

ImageDupeless

Сравнительно небольшая утилита с довольно неплохими показателями поиска и устранения дублей картинок. Программа сканирует все изображения в папке, а затем сравнивает их между собой. В результате вы увидите список картинок, которые похожи друг на друга и сможете сделать вывод о том, какую из них оставить, а какую удалить. Очень полезно, иногда, прореживать свои архивы фото.

Пример работы ImageDupeless

Кстати, вот небольшой пример личного испытания:

• подопытные файлы: 8997 файлов в 95 каталогах, 785Мб (архив картинок на флешке (USB 2.0) - gif и jpg форматы)
• галерея заняла: 71.4Мб
• время создания: 26 мин. 54 сек.
• время сравнения и вывода результатов: 6 мин. 31 сек.
• результат: 961 похожее изображение в 219 группах.

Image Comparer

Об этой программе я уже упоминал на страницах сайта. Представляет собой так же небольшую программу, но с довольно хорошими алгоритмами сканирования картинок. Есть пошаговый мастер, запускающийся при первом открытии утилиты, который проведет через все «тернии» первой настройки программы для поиска дублей.

Кстати, чуть ниже приведен скриншот работы утилиты: в отчетах вы можете просмотреть даже мелкие детали, где картинки несколько различаются. В общем-то, удобно!

4. Для поиска дублей фильмов, видео-роликов

Ну и последний популярный тип файлов, на котором хотелось бы остановиться - это видео (фильмы, ролики и пр.). Если когда-то раньше, обладая 30-50 ГБ диском, знал в какой папке где и какой фильм сколько отнимает (и они все были наперечет), то, например, сейчас (когда диски стали 2000-3000 и более ГБ) - часто встречаются одни и те же ролики и фильмы, но в разном качестве (что может отнять достаточно много места на жестком диске).

Большинству пользователей (да, в общем-то и мне 🙂), такое положение дел не нужно: просто отнимает место на винчестере. Благодаря парочке утилит ниже, вы сможете очистить диск от одинаковых видео…

В прошлый раз мы рассмотрели , а сегодня рассмотрим бесплатную программу для поиска одинаковых файлов на компьютере (а так же музыки и изображений) .

Программа называется Duplicate Cleaner Free , скачать её можно с моего диска:

В программе есть русский язык. После запуска, может появится ощущение и как ей пользоваться))) Но все очень легко…

При запуск, сразу появляется окно критериев поиска. Есть отдельно настройки для поиска изображений и музыки. Выбираем то что вам нужно и переходим в раздел сканировать путь.

Тут нужно выбирать где произвести поиск дубликатов. Я выбрал диск с информацией. И нажимаем сканировать.

Пойдет процесс поиска дубликатов.

После нахождения появится список с дубликатами. С помощью выбора помощника можно задать критерии выбора или же выбрать все вручную поставив галочки сбоку. То что не нужно удаляем, кнопкой сверху в панели.

Программа бесплатная, но есть и платная функция, которая помогает более удобно найти одинаковые папки. Но эта функция особо не нужна.

Вот так с помощью бесплатной программы для поиска дубликатов можно найти много похожих файлов и папок.

Программа для поиска дубликатов файлов чаще всего необходима пользователям, хранящим на диске большое количество музыки, фото и документов.

И, хотя удалять такие лишние копии можно вручную, специализированные приложения способны сэкономить немало времени.

Особенно, если файлы расположены в разных папках или в скрытых каталогах. Искать такие дубликаты можно с помощью универсального программного обеспечения или же рассчитанного на конкретный тип данных.

В первом случае повышается скорость поиска, во втором – увеличивается вероятность обнаружить все копии.

Универсальные приложения

Универсальные приложения для поиска копий, в основном, работают по принципу сравнивания размеров файлов. И, так как вероятность совпадения количества байтов у разных фото практически равна нулю, одинаковые значения считаются признаком дубликата.

Иногда алгоритм предусматривает проверку имён – тоже важный параметр для поиска, тем более что одинаковые данные в большинстве случаев совпадают и по названию.

Преимуществами программ являются возможность найти с их помощью файлы любого типа и сравнительно высокая скорость работы. Недостаток – меньшая точность обнаружения. Так, например, ни одна из таких утилит не посчитает дубликатом одну и ту же фотографию, сохранённую с различным разрешением.

1. DupKiller

Приложение, обеспечивающее поиск файлов практически с любым расширением, можно бесплатно скачать на официальном сайте его производителя.

Среди отличий программы – интерфейс на русском языке, быстрая работа и большое количество настроек.

С помощью DupKiller можно сравнивать файлы и по размеру, и по дате, и по содержимому (последняя возможность поддерживается только для определённых типов).

Рис. 1. Окно программы DupKiller.

2. Duplicate Finder

Приложение Duplicate Finder позволяет не только искать дубликаты файлов с разными расширениями, но и проводить их сортировку.

Для удобства пользователей настройки утилиты позволяют проводить поиск и по размерам, и по контрольным суммам, и по названию.

Кроме того, с её помощью можно удалять пустые папки и «нулевые» файлы. А среди недостатков можно назвать разве что отсутствие поддержки русского языка.

Рис. 2. Результат работы приложения Duplicate Finder.

3. Glary Utilities

Программа представляет собой не одну утилиту, а сразу несколько – для исправления реестра, для очистки диска и даже для управления безопасностью.

Одно из приложений в наборе даёт возможность искать дубликаты файлов. Среди преимуществ утилиты – русский интерфейс.

К минусам можно отнести определённое замедление работы компьютера при использовании приложения.

Рис. 3. Утилита поиска дубликатов в составе пакета Glary Utilities.

Как повысить ФПС в играх: все возможные способы 2017 года

4. CCleaner

Главной задачей многофункциональной программы CCleaner является очистка жёсткого диска компьютера (а также планшета и смартфона, так как у приложения есть версии и для Android). А среди её преимуществ можно отметить:

• простоту настройки;
• установку нескольких критериев поиска;
• возможность игнорировать некоторые файлы (с определённым размером или датой создания, а также системные или скрытые).

Важно: При обнаружении файлов с нулевым размером их не обязательно удалять. Иногда это может быть информация, созданная в другой операционной системе (например, Linux).

Рис. 4. Программа для оптимизации системы CCleaner может искать и дубликаты файлов.

5. AllDup

Среди преимуществ ещё одной программы, AllDup, можно отметить поддержку любой современной операционной системы Windows – от XP до 10-й. При этом поиск ведётся и внутри скрытых папок, и даже в архивах.

Хотя сравнение информации по умолчанию происходит по названиям файлов, поэтому настройки желательно сразу же изменить. Зато в процессе поиска каждый найдённый дубликат можно просмотреть, не закрывая приложение.

А при обнаружении копии её можно не только удалить, но и переименовать или перенести в другое место. К дополнительным преимуществам приложения относится русскоязычное меню и полностью бесплатная работа в течение любого периода времени.

Кроме того, производитель выпускает ещё и портативную версию для того чтобы искать копии на тех компьютерах, на которых запрещена установка постороннего ПО (например, на рабочем ПК).

Рис. 5. Поиск файлов с помощью portable-версии AllDup.

6. DupeGuru

Ещё одним полезным приложением, проводящим поиск дубликатов с любым расширением, является DupeGuru. Её единственный недостаток – отсутствие новых версий для Windows (при этом обновления для Linux и MacOS появляются регулярно).

Впрочем, даже сравнительно устаревшая утилита для Виндоус 7 неплохо справляется со своими задачами и при работе в более новых ОС. С её помощью легко обнаруживаются даже системные файлы, а меню интуитивно понятное и русскоязычное.

Рис. 6. Обнаружение копий с помощью утилиты DupeGuru.

Примечательно, что, кроме обычного универсального варианта, компания-производитель создала утилиту для поиска файлов определённого типа. Существует отдельная версия для изображений и ещё одна для музыки.

И, при необходимости очистить свой компьютер не только от документов и системных файлов (которые, кстати, требуется удалять очень осторожно – иногда стоит даже оставить «лишнюю» копию, чем нарушить работоспособность системы), стоит скачать и эти приложения.

7. Duplicate Cleaner Free

Утилита для обнаружения копий любого файла Duplicate Cleaner Free отличается следующими особенностями:

• фильтрации данных по расширению;
• русским языком интерфейса;
• возможность бесплатного использования;
• высокой скоростью работы.

К её недостаткам относят небольшие ограничения при поиске изображений (для этого рекомендуется приобрести платную версию) и не совсем точный перевод отдельных элементов меню с английского языка. Тем не менее, благодаря своей эффективности и удобству использования, приложение пользуется определённой популярностью.

Рис. 7. Поиск дубликатов с помощью утилиты Duplicate Cleaner Free.

Поиск дубликатов аудио файлов

Если результаты поиска дубликатов не устраивают пользователя, можно рассмотреть вариант, предназначенный для определённых файлов. Например, для музыки, скопившейся на диске.

Такая необходимость часто возникает при загрузке сразу нескольких альбомов и сборников одного и того же исполнителя – нередко в разных папках оказываются одинаковые треки.

Они могут иметь похожие размеры и отличаться, по большому счёту, только названиями. Специально для этого существуют утилиты для поиска похожих мелодий.

8. Music Duplicate Remover

Среди особенностей программы Music Duplicate Remover – сравнительно быстрый поиск и неплохая эффективность. Фактически, это приложение как бы «прослушивает» композицию и проводит её сравнение с другими аудио файлами.

При этом, естественно, время её работы больше, чем у универсальных утилит. Однако количество проверяемых программой данных, как правило, в десятки раз меньше, поэтому средняя продолжительность проверки редко превышает пару часов.

Рис. 8. Обнаружение копий музыки и аудио файлов по альбомам.

9. Audio Comparer

Среди преимуществ утилиты Audio Comparer – очень простое меню и быстрый поиск копий музыки. Так, среди нескольких тысяч аудио файлов она находит копии и дубликаты (естественно, при их наличии) всего за 1–2 часа.

При этом для обнаружения не имеет значения ни размер трека, ни его битрейт (битность, то есть качество звука, изменение которого приводит к другому объёму данных при той же продолжительности мелодии).

Рис. 9. Поиск дубликатов с помощью Audio Comparer.

10. DupeGuru Music Edition

Приложение представляет собой одну из дополнительных версий бесплатной утилиты DupeGuru. Скорость её работы меньше, чем у универсального варианта, зато вероятность обнаружения дубликата аудио файла в несколько раз выше.

Принципы работы и интерфейс практически полностью повторяют базовую программу, а одним из главных преимуществ является то, что Music Edition считает «оригиналами» музыку с лучшим битрейтом. А, значит, что удаление дубликатов не приведёт к потере более качественных аудио файлов.

Рис. 10. Версия DupeGuru для поиска дубликатов музыки.

Поиск копий фото и других изображений

Не менее часто пользователю может потребоваться удалить дубликаты изображений. Особенно, если на жёстком диске находится несколько сборников с личными фотографиями, отсортированными по датам или местам съёмки.

С помощью специального программного обеспечения лишние фото и картинки будут обнаружены и уничтожены, а места на HDD (SDD, флешке и другом накопителе) станет больше.

11. DupeGuru Picture Edition

Приложение для поиска одинаковых картинок является ещё одним вариантом утилиты DupeGuru, которую тоже можно (и даже желательно) скачать даже при наличии универсальной версии. При этом анализ фото тоже длится дольше по сравнению с поиском файлов любого расширения, но результат оправдывает себя.

Изображения определяются даже в том случае, когда на диске находятся несколько дубликатов одной картинки, но с разным разрешением и, соответственно, размером. Кроме того, для повышения эффективности проверяются файлы с любыми графическими расширениями – от.jpg до.png.

Рис. 11. Поиск картинок с помощью ещё одной версии DupeGuru.

12. ImageDupeless

Программа ImageDupeless отличается высокой скоростью работы и небольшим размером, что может оказаться важным при использовании, например, для её скачивания мобильного 2G-интернета.

При этом она распространяется бесплатно и имеет русский интерфейс. А производитель периодически выпускает к ней обновления, повышая эффективность поиска изображений.

Рис. 12. Стильный интерфейс приложения ImageDupeless.

13. Image Comparer

Преимуществами приложения Image Comparer, кроме простого интерфейса, можно назвать наличие пошагового мастера, позволяющего научиться быстрому и результативному поиску изображений.

Эта особенность отличает утилиту от большинства остальных, для работы с которыми придётся читать файлы справки, не всегда правильно переведённые (а иногда и вообще предоставляемые только на английском).

Фактически, приложение является ещё одной версией Audio Comparer, и тоже распространяется по «условно бесплатной» лицензии – то есть за определённые функции пользователю придётся заплатить.

Рис. 13. Приложение Image Comparer – неплохой способ найти дубликаты картинок.

Поиск копий фильмов и видео

Кроме музыки и изображений, ещё одним типом данных, дубликаты которых ищутся отдельно, являются файлы видео. Ведь при наличии 1–2 или даже 4 терабайт места на жёстком диске на нём могут «потеряться» даже фильмы.

Или домашние видеоролики, распределённые по разным каталогам. Сэкономить пространство, удаляя копии видео, можно с помощью специализированных утилит, количество которых намного меньше по сравнению с приложениями для поиска других файлов.

14. Duplicate Video Search

Работа программы Duplicate Video Search основана на сравнении битрейтов, размеров и названий.

При этом сравниваются также разные форматы – .avi, .mpeg4, .mkv и т. д. А результаты выдаются в виде миниатюр с характеристиками файлов.

Рис. 14. Результаты поиска видео программой Duplicate Video Search.

15. Video Comparer

Приложение Video Comparer отличается высокой эффективностью. Однако обладает существенным недостатком для отечественного пользователя – работа утилиты бесплатная только в течение первых 30 дней (после которых придётся либо приобретать полную версию, либо тщательно чистить реестр и ещё раз устанавливать ознакомительную).

Кроме того, интерфейс программы только английский. Однако для тех людей, которые постоянно работают с видео на профессиональном уровне, можно задуматься и над покупкой приложения.

Тем более что стоит оно всего лишь 20 евро для домашнего использования и отличается очень высокой скоростью – за 40 минут проверяется до 500 роликов любого размера.

Рис. 15. Определение дубликатов видео с помощью Video Comparer.

Выводы

Преимущества программ для поиска копий файлов достаточно серьёзные для того чтобы хотя бы одна из них была установлена на каждом компьютере.

Особенно, если пользователь постоянно скачивает из сети различную информацию. С помощью утилит, обнаруживающих дубликаты, можно сэкономить не один час своего времени и несколько гигабайт места на диске.

Современный винчестер создается с внушительным объемом свободного места для хранения информации. Однако это не означает, что нет необходимости «заботиться» о диске, освобождая его от мусора, дублированных файлов.

Наличие файлов-дубликатов засоряет диск лишними записями информации. Когда придет время увеличивать свободное пространство «замусоренных» дисков, на обнаружение дубликатов будет потрачено значительное время - ведь объем вашего винчестера очень велик. Поэтому нахождение и удаление файлов-дубликатов нужно производить вовремя. Рассмотрим ряд приложений, умеющих искать такие файлы-дубликаты.

Total Commander

Первым приложением рассмотрим популярный Total Commander. Его функциональные возможности широки, он также предоставляет инструмент для поиска файлов-дублей, расположенных в разных директориях вашего винчестера. Необходимая нам операция доступна в общем поисковом модуле.

Вызов поискового модуля осуществляется с помощью горячих клавиш или посредством традиционного перехода в главное меню, где понадобится выбрать функцию «Поиск файлов». Вызов посредством горячих клавиш делается путем одновременного нажатия комбинации «Alt+F7».

Поисковый модуль предлагает целый ряд вкладок общих и продвинутых функций. Однако первоначально нам понадобится отобрать диск или директорию, в которой необходимо вести обнаружение. Это делается на вкладке общих параметров. Затем, перейдем на вкладку «Дополнительно».

В поисковом модуле откроем «Диски» и выберем диск «D».

Перейдем на вкладку «Дополнительно».

В нижней части выбранного раздела расположена функция нахождения файлов-дубликатов. Нам нужно лишь настроить эту функцию, установив требуемые флажки напротив нужных опций. Например, так как показано на изображении ниже. В нашем случае поисковые действия происходят на томе D.

Найденные искомые дубликаты Total Commander располагает в маленьком окошке, в котором едва что можно разглядеть.

Нажав кнопочку «Файлы на панель», отобразим их в главном окне. Теперь, вы сможете свободно удалять их, если уверены, что такое действие не станет причиной нестабильной работы программ и всей системы в целом.

Получаем результат в главном окне.

Ищем дубликаты файлов в CCleaner

С недавних пор обновленный CCleaner также предоставляет функцию поиска дублирующихся файлов. Это приложение - широко известный и популярный «уборщик» мусора на ПК, поэтому присутствие в нем такой опции абсолютно закономерно. Функцию «Поиск дублей» легко найти на вкладке «Сервис» программы.

Обнаружение файлов-дубликатов CCleaner осуществляет по нескольким параметрам: имя, размер, дата, содержимое. Он также предлагает ряд полезных опций, которые позволяют пропустить или добавить к нашей операции ряд особенных файлов: скрытые, системные, только для чтения, нулевого размера. Чтобы запустить поисковый модуль, достаточно нажать кнопочку «Найти».

После выполнения операции пользователь имеет возможность выбрать и удалить обнаруженные дубли.

SizeExplorer Pro

Данное приложение - мощный инструмент исследования томов диска и подключенных дисковых устройств. Одной из его функций является поиск файлов-дубликатов.

Чтобы SizeExplorer смог начать обнаружение дублей, сначала нужно проанализировать раздел, где необходимо осуществлять поиск.

Открывшееся меню предложит вам целый ряд функций, среди которых «Найти дубликаты». Нажатие этой опции позволит открыть диалог с опциями настройки поискового модуля.

Определимся с функциями обнаружения.

Произведем поиск дубликатов файлов по схеме размер-имя-содержимое. На обнаружение потребуется некоторое время, однако после окончания процесса в отдельном окошке мы увидим полный перечень дублей. При этом программа выдала нам множество дублей неполного сходства, по определенному проценту сходства.

Результаты поисков одинаковых файлов:

Так можно выбрать дубликаты:

Воспользуемся Ainvo Duplicate File Finder

В сети Интернет доступна еще одна программа, представляющая интерес для обнаружения дублирующихся файлов. Это Ainvo Duplicate File Finder. Это приложение простое в использовании, так что им сможет воспользоваться даже не очень опытный пользователь компьютерных технологий. Чтобы воспользоваться программой, достаточно нажать мышкой «Поиск одинаковых файлов».

Приложение сразу же начинает поиск, который длится достаточно долго, поэтому придется запастись терпением.

Сначала происходит исследование дисков, затем приложение обрабатывает найденный материал и только после этого происходит дополнительная обработка, результатом которой становится обнаружение файлов-дублей. Чтобы увидеть найденные дубликаты, понадобится открыть окошко «Одинаковые файлы».

Как видим, в настройках выбрано два раздела для осуществления операции.

Мастер Аинво завершил выполнение операции - теперь мы сможем открыть окно с ссылками на дубликаты.

Как видим, дублей много и программа сразу же выделяет повторяющиеся, по ее мнению, файлики.

Выбрано 2137 дубликатов, которые можно удалить с помощью мастера. Также, есть возможность просмотреть отчет о дубликатах.

Отчет открывается в веб-браузере.

Краткий итог

Жесткий диск время от времени нуждается в профилактике. Одной из профилактических процедур является чистка томов от мусора, большую долю которого составляют продублированные файлы. Чтобы обнаружить файлы-дубликаты, размещающиеся в разных директориях, можно воспользоваться специальными программами. Среди наиболее достойных приложений, умеющих обнаруживать дублирующиеся файлы, назовем: Total Commander, CCleaner, SizeExplorer Pro, Ainvo Duplicate File Finder.