Дублируются папки на компьютере. Как найти и удалить повторяющиеся файлы на жестком диске

Доброго времени суток.

Статистика вещь неумолимая - у многих пользователей на жестких дисках лежат, порой, десятки копий одного и того же файла (например, картинки, или музыкального трека). Каждая из таких копий, разумеется, отнимает место на винчестере. А если диск ваш уже «забит» под завязку - то таких копий может быть достаточно много!

Чистить дубликаты файлов вручную - вещь не благодарная, именно поэтому, я хочу собрать в этой статье программы для поиска и удаления дубликатов файлов (причем, даже тех, которые отличаются и по формату файла, и по размеру друг от друга - а это довольно сложная задача!). Итак…

Список программ для поиска дубликатов

1. Универсальные (для любых файлов)

Осуществляют поиск одинаковых файлов по их размеру (контрольным суммам).

Под универсальными программами, я понимаю, те, которые годятся для поиска и удаления дублей любых типов файлов: музыки, фильмов, картинок и пр. (ниже в статье для каждого типа будет приведены «свои» более точные утилиты). Работают они все в большинстве по одному типу: они просто сравнивают размеры файлов (и их контрольную сумму), если есть среди всех файлов одинаковые по этой характеристике - показывают вам!

Т.е. благодаря ним можно быстро найти на диске полные копии (т.е. один в один) файлов. Кстати, так же отмечу, что данные утилиты работают быстрее, чем те, которые специализированы для конкретного типа файлов (например, поиска картинок).

DupKiller

Эту программу я поставил на первое место по ряду причин:

• поддерживает просто огромное число разнообразных форматов, по которым она может проводить поиск;
• высокая скорость работы;
• бесплатная и с поддержкой русского языка;
• очень гибкая настройка поиска дублей (поиск по названию, размеру, типу, дате, содержимому (ограниченно)).

Duplicate Finder

Эта утилита, помимо поиска копий, еще и сортирует их так, как вам вздумается (что очень удобно, когда копий находится неимоверное количество!). Так же к возможностям поиска добавьте побайтовое сравнение, сверка контрольных сумм, удаление файлов с нулевым размером (и пустых папок тоже). В общем-то, с поиском дублей эта программа справляет довольно неплохо (и быстро, и качественно!).

Немного не комфортно будут себя чувствовать те пользователи, которые плохо знакомы с английским: русского в программе нет (возможно после будет добавлен).

Glary Utilites

Вообще, это не одна утилита, а целый сборник: поможет удалить «мусорные» файлы, задать оптимальные настройки в Windows, дефрагментировать и очистить жесткий диск и т.д. В том числе, в этом сборнике есть утилита для поиска дублей. Работает она относительно не плохо, поэтому я и порекомендую этот сборник (как один из самых удобных и универсальных - что называется на все случаи жизни!) еще раз на страницах сайта.

2. Программы поиска дубликатов музыки

Данные утилиты пригодятся всем меломанам, у которых на диске скопилась порядочная коллекция музыки. Рисую довольно типичную ситуацию: скачиваете различные сборники музыки (100 лучших песен октября, ноября и пр.), часть композиций в них повторяется. Не удивительно, что, накопив музыки на 100 ГБ (к примеру), 10-20ГБ - могут быть копиями. Причем, если бы размер этих файлов в разных сборниках был одинаковый - то их бы можно было бы удалить первой категорией программ (см. выше в статье), но так как это не так - то эти дубли не находятся ничем, кроме вашего «слуха» и специальных утилит (которые представлены ниже).

M usic Duplicate Remover

Результат работы утилиты.

Эта программа отличается от остальных, прежде всего, свои быстрым поиском. Она ищет повторные треки по их ID3 тегам и по звуку. Т.е. она как бы за вас прослушает композицию, запомнит ее, а затем сравнит ее с другими (таким образом, проделывает огромный объем работы!).

На скриншоте выше представлен ее результат работы. Свои найденные копии она представит перед вами в виде небольшой таблички, в которой к каждому треку будет приписана цифра в процентах схожести. В общем, достаточно удобно!

A

Найденные повторные MP3 файлы…

Эта утилита схожа с вышеприведенной, но у нее есть один несомненный плюс: наличие удобнейшего мастера, который будет Вас вести по шагам! Т.е. человек, впервые запустивший эту программу, легко разберется куда нажимать и что делать.

Например, в своих 5000 треках за пару часов, мне удалось найти и удалить несколько сотен копий. Пример работы утилиты представлен на скрине выше.

3. Для поиска копий картинок, изображений

Если анализировать популярность тех или иных файлов, то картинки, пожалуй, не отстанут от музыки (а для некоторых пользователей и перегонят!). Без картинок вообще сложно представить работу за ПК (и другими устройствами)! Но поиск картинок с одинаковым изображением на них - дело довольно трудное (и долгое). И, должен признаться, программ этого рода сравнительно не много…

ImageDupeless

Сравнительно небольшая утилита с довольно неплохими показателями поиска и устранения дублей картинок. Программа сканирует все изображения в папке, а затем сравнивает их между собой. В результате вы увидите список картинок, которые похожи друг на друга и сможете сделать вывод о том, какую из них оставить, а какую удалить. Очень полезно, иногда, прореживать свои архивы фото.

Пример работы ImageDupeless

Кстати, вот небольшой пример личного испытания:

• подопытные файлы: 8997 файлов в 95 каталогах, 785Мб (архив картинок на флешке (USB 2.0) - gif и jpg форматы)
• галерея заняла: 71.4Мб
• время создания: 26 мин. 54 сек.
• время сравнения и вывода результатов: 6 мин. 31 сек.
• результат: 961 похожее изображение в 219 группах.

Image Comparer

Об этой программе я уже упоминал на страницах сайта. Представляет собой так же небольшую программу, но с довольно хорошими алгоритмами сканирования картинок. Есть пошаговый мастер, запускающийся при первом открытии утилиты, который проведет через все «тернии» первой настройки программы для поиска дублей.

Кстати, чуть ниже приведен скриншот работы утилиты: в отчетах вы можете просмотреть даже мелкие детали, где картинки несколько различаются. В общем-то, удобно!

4. Для поиска дублей фильмов, видео-роликов

Ну и последний популярный тип файлов, на котором хотелось бы остановиться - это видео (фильмы, ролики и пр.). Если когда-то раньше, обладая 30-50 ГБ диском, знал в какой папке где и какой фильм сколько отнимает (и они все были наперечет), то, например, сейчас (когда диски стали 2000-3000 и более ГБ) - часто встречаются одни и те же ролики и фильмы, но в разном качестве (что может отнять достаточно много места на жестком диске).

Большинству пользователей (да, в общем-то и мне 🙂), такое положение дел не нужно: просто отнимает место на винчестере. Благодаря парочке утилит ниже, вы сможете очистить диск от одинаковых видео…

Пожалуй, сегодня не найдется человека, который активно не пользовался бы компьютером или другими портативными девайсами. Как правило, с течением времени на ПК скапливается огромное количество абсолютно идентичных файлов. Искать и удалять их в ручном режиме довольно муторно и долго. К счастью, сегодня не приходится ломать голову о том, как производить данные манипуляции. Разработчики современных приложений уже давно придумали программы поиска дубликатов фотографий на компьютере. Рассмотрим самые лучшие из них, а также разновидности графических файлов, которые часто приходится удалять.

Какие бывают одинаковые фотографии

Как правило, на портативных компьютерах нескольких категорий:

• Идентичные файлы. А в этом случае речь идет о тех ситуациях, когда пользователи просто копируют одни и те же файлы и вставляет их в другие папки на компьютере.
• Изображение с одинаковыми названиями. Такое часто происходит при использовании фотоаппаратов в разных марок. Как правило, они присваивают одинаковые имена для файлов.
• Неудачные кадры. Сегодня профессиональные фотографы очень часто используют серийную съемку того или иного объекта. В результате появляется просто фантастическое количество одних и тех же фотографий, отличающихся всего лишь какими-то мизерными нюансами.
• Измененные изображения. В этом случае речь идет о тех фотографиях, которые были уменьшены, увеличены, зеркально отражены или видоизменены

В интернете программа для поиска дубликатов фотографий найти несложно. Главное - правильно их установить.

Как скачивать

Лучше всего искать программ для поиска и удаления дубликатов фотографий на официальных сайтах разработчиков. Как правило, создатели ПО предоставляют пользователям возможность использования усеченных версий утилит.

Скачивать приложения из неофициальных источников чревато последствиями. Очень часто в папке с загрузочными файлами оказываются вирусы.

Duplicate Cleaner

Данный инструмент прекрасно справляется с поиском и удалением дубликатов фотографий на портативных компьютерах. Чтобы избавиться от нежелательных файлов, которые только тормозят работу жесткого диска и занимают кучу свободного места, достаточно использовать Duplicate Cleaner, который производит очистку сетевых и локальных дисков. Помимо этого, приложение также находит одинаковые аудио, видеофайлы и текстовые документы.

Если говорить об основных особенностях данной утилиты, то стоит обратить внимание на то, что поиск осуществляется не только по названию, но и по содержимому файлов. При этом можно задать пользовательские настройки. Сканирования звуковых файлов производится во всех известных и действующих сейчас форматах.

В процессе работы программы для поиска дубликатов фотографий можно экспортировать и импортировать поисковые результаты в формате CSV. Также пользователь может отследить и просмотреть размер, дату создания и прочие данные о файлах. Это помогает принять решение в том, какой именно документы лучше всего удалить.

AntiDupl

Данная программа для поиска одинаковых фотографий позволяет быстро распознать на жестком диске компьютера все повторяющиеся документы. Этот инструмент абсолютно бесплатный, кроме этого, в нем поддерживается интерфейс на нескольких языках, включая русский.

Утилита работает очень быстро и отличается минимальными требованиями к системным ресурсам. Более того, программу можно даже не устанавливать, достаточно скопировать ее на флеш-носитель и использовать в любой директории.

Приложение прекрасно обрабатывает большое количество информации и позволяет быстро обнаруживать целые списки одинаковых файлов. В главном окне программы содержатся основные элементы управления, значение которых становится понятным на интуитивном уровне, поэтому пользоваться утилитой может даже неопытный человек.

Среди самых интересных опций стоит выделить возможность поиска дефектных файлов. Также можно выбирать тип документов, которые могут быть утрачены в процессе поиска. Кроме этого, программа для поиска дубликатов фотографий на русском языке позволяет осуществлять поиск файлов даже в подкаталогах и скрытых папках.

В настройках пользователь может указать, хочет ли он удаляется отзеркаленные изображения или те файлы, в которых были изменены размеры картинок. Благодаря таким гибким параметрам происходит очень быстрое и качественное удаление всех дубликатов. По окончании работы приложения выдается подробный отчет.

CloneSpy

Это очень маленькая утилита позволит быстро очистить компьютер от ненужных файлов. Сразу же после установки и первого запуска программы производится автоматический поиск и контрольная фиксация всех файлов, которые есть в системе. При этом приложение полностью игнорирует дату создания, размер и прочие показатели документов.

Однако в меню этой программы нет возможности отключить отображение файлов с одинаковыми именами. Однако если учитывать, что это бесплатный продукт, то с некоторыми нюансами можно смириться.

Image Comparator

Эта программа для поиска дубликатов фотографий пользуется огромной популярностью среди пользователей. По большому счету ее можно считать самой производительной и функциональной.

Доступна как платная, так и бесплатная версия данного приложения. Если говорить о преимуществах программы, то стоит обратить внимание на быструю скорость поиска и отображения дубликатов. Это оптимальное решение для тех, кто хранит на своем компьютере терабайты информации в течение огромного количества времени.

Однако не обошлось и без минусов, на которые обратили внимание многие пользователи. Самый главный недостаток виден уже после установки приложения. Интерфейс программы очень неудобен. То же самое касается и обработки файлов.

Для того чтобы просмотреть нужный файл его придется выделить и нажать стрелочку. Только после этого миниатюра документа может отобразиться в главном окне. А что делать тем, у кого более 200 фотографий, которые хочется удалить или обработать? В этом случае произвести манипуляции придется 400 и более раз. При этом пользователю нужно еще и запоминать названия тех файлов, которые им нужны.

Также многие отметили не очень удобную методику поиска дубликатов по количеству схожих пикселей. Потому, с одной стороны, сказать, что это лучшая программа для поиска дубликатов фотографий очень сложно, а с другой - утилита обладает массой гибких настроек.

VisiPics

Данной приложение бьет все рекорды по количеству скачиваний за границей. С одной стороны, это объясняется тем, что это бесплатная версия и возможно «за бугром» есть большие проблемы с доступом к таким приложениям. Но, согласно отзывам, она действительно обладает массой положительных качеств. Среди них стоит отметить отличный функционал. Настройки очень чувствительные, благодаря чему пользователь может самостоятельно регулировать механизм поиска схожих исходных изображений.

Отображение одинаковых файлов действительно происходит очень быстро и качественно. Однако многие заметили, что данная программа для поиска дубликатов фотографий немного больше привязана к свету снимка, что в некоторых ситуациях может привести к путанице.

Если говорить о недостатках, то, согласно отзывам пользователей, они также обратили внимание на неудобность интерфейса. Просматривать фотографии в увеличенном виде можно только после того, как курсор очень долго удерживается на изображении. При этом выдается миниатюра с разрешением всего 48 пикселей, разглядеть хоть что-либо на которой очень сложно. Поэтому использовать программу опытному фотографу неудобно.

Также стоит учитывать, что интерфейс утилиты не переведен на русский язык, поэтому тем, кто не владеет английским, будет довольно сложно на первых порах.

Photo Database 4.5

Данная программа для поиска дубликатов фотографий очень часто используется специалистами при работе с фотографиями не только для поиска одинаковых файлов, но и для многих других функций.

Начиная с версии 4.5 в утилите появилась новая папка под названием «Коллекция», где можно найти категорию «Дубликаты». Она как раз отвечает за поиск нужных файлов. При открытии данной директории программа автоматически производит поиск дублирующихся фотографий.

Также в утилите доступна быстрая навигация, которая отвечает за переходы к папкам с выбранными изображениями. Удаление производится очень удобным образом. Для этого достаточно просто выбрать все ненужные файлы в проводнике, используя при этом быстрые клавиши. После чего достаточно нажать всего 1 кнопку «Удалить». Все выделенные фотографии перемещается в корзину и удаляются из коллекции.

Также доступно автоматическое удаление файлов. Для этого достаточно нажать соответствующую кнопку, которая расположена на нижней панели задач. Также можно выделить несколько изображений и избавиться только от них.

В заключение

В данной статье были рассмотрены бесплатные утилиты, которые можно легко найти в открытом доступе или скачать через торренты. Они больше подходят для домашнего частного использования. Разумеется, существуют также коммерческие версии практически всех программ. Однако такой большой функционал не всегда нужен человеку, которому хочется просто быстро удалить одинаковые файлы. Как правило, их используют только опытные фотографы, которые постоянно работают с огромным количеством изображений.

Накопившийся в процессе работы компьютера файловый мусор обычно представляет собой не только ненужные пользователю или временные файлы. Отдельной категорией являются файлы-дубликаты, которые одинаковы по своему содержанию, но хранятся в разных папках или на разных дисках компьютера.

Это могут быть, например, неоднократно сохраненные документы, повторяющиеся или похожие фотографии, одни и те же музыкальные композиции, которые вы скачали из Интернета и сохранили в разных папках или под разными именами. Важно понимать, что дубликатами, по сути, являются две версии одной и той же фотографии, имеющие разное разрешение. Или одна и та же песня одного и того же исполнителя, но записанная на разных концертах. Либо две версии одной и той же музыкальной композиции, но записанные в разных аудиоформатах.

Примером файлов-дубликатов можно считать также и две версии фильма, сохраненные с разным качеством или опять же в разных видеоформатах. Разумеется, вручную обнаружить такие дубликаты достаточно сложно, поэтому на помощь мы призовем специальные программы, которые занимаются поиском файлов-дубликатов. Как вы уже наверняка поняли из предыдущего абзаца, дубликаты каждого типа файлов (рисунки, музыка, видео, документы) имеют свои особенности.

Алгоритмы поиска дубликатов всех типов файлов значительно отличаются друг от друга, поэтому и поиском дубликатов файлов разных типов занимаются, как правило, разные программы. Рассмотрим некоторые из них. К тому же важно не только обнаружить дубликаты, но и выбрать самую последнюю версию документа или наиболее качественный видео- либо аудиофайл. Мы рассмотрим каждый тип файлов отдельно, а также приведем список популярных программ для работы с дубликатами.

Поиск картинок-дубликатов

Наиболее ярким примером картинок-дубликатов могут служить одинаковые или очень похожие фотографии. Многие современные фотоаппараты позволяют снимать в серийном режиме, когда снимки делаются с очень коротким интервалом - от нескольких долей секунды до нескольких секунд. При этом получившиеся снимки отличаются друг от друга совсем незначительно. Как показывает практика, нет реальной необходимости хранить похожие фотографии, достаточно выбрать один-два удачных снимка из серии, а остальные удалить.

Еще один случай, когда могут появляться дубликаты файлов с изображениями, - создание резервных копий фотографий на жестком диске, выборка картинок для презентации, при котором они копируются в другую папку. В общем пользователь зачастую сам создает копии изображений, а потом забывает их удалять. Впрочем, причины появления дубликатов изображений могут быть самыми разными. Наша задача - избавиться от таких дубликатов и очистить место на жестком диске. Среди наиболее распространенных программ, предназначенных для поиска картинок-дубликатов на компьютере, можно назвать следующие.

• SWMole Clone Remover . Адрес веб-сайта: http://www.clone-remover.com/ . Программа платная. Умеет искать не только дубликаты изображений (в том числе похожие рисунки, а не просто точные копии), но и копии музыкальных файлов. В незарегистрированной версии пользователь имеет возможность удалить не более 20 файлов. Копии изображений находит парами, даже если на диске находится более двух похожих изображений. Имеет русскоязычный интерфейс.
• Image Comparer . Веб-сайт: http://www.bolidesoft.com/rus/imagecomparer.html. Программа условно-бесплатная, имеет ознакомительный период 30 дней. Поддерживается многоязычный пользовательский интерфейс, среди языков есть русский. Имеется возможность поиска дубликатов картинок как в пределах одной папки, так и между несколькими папками. Интерфейс программы несколько сложноват для начинающего пользователя, однако возможно использовать режим пошагового мастера, который поможет найти и удалить дубликаты файлов изображений.
• Picasa . Официальная страница программы: https://picasa.google.com . Сама программа включает в себя множество различных инструментов для работы с фотографиями. В том числе в программе есть функция поиска картинок-дубликатов. Чтобы воспользоваться этой функцией, нужно в главном меню программы выбрать пункт Инструменты>>Экспериментальные функции>>Показать повторяющиеся файлы. Сразу обратим внимание на то, что программа ищет именно повторяющиеся файлы изображений, то есть абсолютно идентичные картинки. Зато находит их независимо от расположения и практически без участия пользователя. Программа является абсолютно бесплатной и имеет русскоязычный интерфейс. Кроме того, с помощью программы Picasa можно обрабатывать изображения, применять к ним различные фильтры, находить лица людей, отмечать места съемки и выполнять множество других полезных действий.
• Similar Images Finder . Веб-сайт программы: http://www.crown-s-soft.com/ru/sifinder.htm . Программа условно-бесплатная. В течение 30 дней можно пользоваться ею, не покупая, при этом накладывается ограничение на количество найденных файлов-дубликатов. Интерфейс программы англоязычный. Есть возможность настройки глубины «похожести» фотографий, а также установки предпочтений для найденных дубликатов: например, программе можно указать, чтобы она автоматически удаляла более старый из файлов-дубликатов, имеющий меньшую цветность или меньший размер. В программе есть мастер поиска дубликатов, который позволяет в пошаговом режиме указать критерии сравнения файлов изображений.

Поиск дубликатов музыкальных файлов

Так же как и изображения, музыкальные файлы порой могут занимать много дискового пространства, и в некоторых случаях найти одинаковые или похожие музыкальные композиции вручную бывает проблематично. На помощь придут специализированные приложения, автоматизирующие этот процесс. Расскажем о некоторых наиболее популярных из них.

• Audio comparer . Скачать программу можно на сайте: http://audiocomparer.com/rus/ . Приложение условно-бесплатное. В течение 30 дней его можно использовать без регистрации. Анализ музыкальных композиций основывается на сопоставлении имен исполнителей и названий песен. Эти данные берутся из названия файла и внутренней служебной информации, так называемых ID3-тегов. Есть возможность указать порог схожести названий, при которых композиции будут считаться одинаковыми. Приложение позволяет сравнивать файлы как внутри одного каталога на диске компьютера, так и между несколькими каталогами. Интерфейс программы несколько сложноват для начинающего пользователя, но это компенсируется наличием пошагового мастера, который облегчает процесс поиска дубликатов.
• Music Duplicate Remover . Сайт в Интернете: http://www.maniactools.com/ . Ключевое отличие этого приложения от аналогов - возможность поиска дубликатов по звучанию. Данная функция позволяет находить дубликаты даже среди тех файлов, которые некорректно поименованы. Программа условно-бесплатная и дает возможность незарегистрированному пользователю работать в течение 30 дней. Имеет простой пользовательский интерфейс на русском языке.
• SWMole Clone Remover . Как уже упоминалось, данное приложение умеет искать не только дубликаты изображений, но и повторяющиеся музыкальные композиции. Адрес веб-сайта программы: http://www.clone-remover.com/ . Интерфейс программы сложноват, но благодаря поддержке русского языка в нем несложно разобраться самостоятельно. Приложение может искать дубликаты музыкальных файлов лишь по имени файла и по ID3- тегам, не учитывая звучание. Используя одну из перечисленных или все программы сразу, вы можете освободить много полезного места на дисках своего компьютера.

Поиск дубликатов видеофайлов

Борьба с дубликатами видеофайлов имеет свои особенности по сравнению с поиском дубликатов картинок или музыки. Из-за больших размеров видеофайлов их обычно не так много на дисках компьютера, как музыки или изображений. Кроме того, появление дубликатов фильмов или видеороликов не столь распространенное явление, как «клонирование» фотографий или песен. Зато удаление даже одного клона видеофайла поможет освободить значительное количество дискового пространства. Кроме того, алгоритм сравнения видеопотоков гораздо сложнее рисунков или даже звучания музыки. По этой причине программ, предназначенных для поиска дубликатов видеофайлов, существует не так много. Остановимся на некоторых из них.

• Duplicate Video Search . Веб-адрес: http://duplicatevideosearch.com/rus/ . Программа условно-бесплатная - с ознакомительным периодом 30 дней. Имеет англоязычный интерфейс, который, впрочем, не перегружен лишними элементами, а потому достаточно понятен. Пользователь должен указать, в каких папках нужно производить поиск видеодубликатов. Приложение может сравнивать содержимое видеофайлов десяти различных форматов. Есть возможность указания глубины сравнения.
• Teemoon Video Matching . Домашняя страница программы: http://teemoon.name/videoid/Default.html . В отличие от своих «собратьев», данное приложение бесплатное. Работа с программой предполагает два этапа. Первый - индексирование, которое осуществляется на вкладке Indexing. В ходе этого процесса для каждого видеофайла из указанной папки создаются файлы индексов. Процесс длительный, но его требуется провести всего один раз, затем при сравнении файлов будут использоваться уже имеющиеся индексные файлы. Второй этап - сравнение, которое осуществляется на вкладке Matching. К недостаткам программы можно отнести отсутствие поддержки русского языка и неочевидный алгоритм работы.
• Video Comparer . Сайт программы: http://www.video-comparer.com/ . Приложение имеет платную и бесплатную версии. Для домашнего использования вполне подойдет бесплатная. Интерфейс программы довольно прост. От пользователя требуется только указать папки, в которых следует осуществлять поиск файлов-дубликатов, и нажать кнопку запуска процесса сравнения. Пользовательский интерфейс англоязычный.

Если вы являетесь киноманом и храните на своем компьютере большую коллекцию разных фильмов либо занимаетесь видеомонтажом и имеете множество видеофрагментов на жестком диске, то вам стоит провести «инвентаризацию» видеоархива. Возможно, вы найдете скрытые резервы своего компьютера.

Поиск других дубликатов

Как вы уже наверняка поняли, не существует универсальной программы, позволяющей избавиться от всех файлов-дубликатов одним махом, - для каждого типа данных требуется свой инструмент. Однако если оставить в стороне сложные алгоритмы сравнения изображений и звуков, а ограничиться просто сравнением имени, размера и даты файла, то можно отыскать немало дубликатов среди тех типов файлов, о которых мы здесь еще не упоминали. Это могут быть документы, файлы других форматов, которые зря занимают место на диске. Чтобы найти такие дубликаты, часто можно обойтись без специализированных программ. Например, если вы используете какой-нибудь популярный файловый менеджер, то можно воспользоваться его средствами для поиска и удаления файлов-дубликатов. Среди файловых менеджеров, имеющих функцию поиска файлов-дубликатов, можно назвать:

• FAR Manager;
• FreeCommander;
• Total Commander.

Если же вы не привыкли пользоваться файловыми менеджерами, то не стоит их устанавливать на компьютер только ради поиска дубликатов. Для этой задачи существуют специализированные приложения:

• CloneSpy - http://www.clonespy.com/;
• DupKiller - http://dupkiller.com/index_ru.html;
• Duplicate Cleaner - http://www.digitalvolcano.co.uk/duplicatecleaner. html;
• Free Duplicate File Finder - http://www.ashisoft.com/;
• NoClone 2014 Desktop - http://noclone.net/

Эти и множество других платных и бесплатных приложений на любой вкус помогут вам избавиться от дубликатов файлов на ваших жестких дисках.

Как жаль, что жесткие диски не резиновые! Хотелось скачать пару-тройку фильмов на выходные да установить на ПК новую игру, но вот досада – свободное место почти закончилось. И освободить его нельзя, ведь на диске хранится только важное и нужное.

Выше нос! Вы можете увеличить объем свободного места на 5-50% без риска потерять ценную информацию. Как? Путем удаления идентичных копий документов, фотографий, аудиозаписей, видео и прочего добра, которого за год работы компьютера скапливается несколько сотен. Итак, как произвести поиск и удаление дубликатов файлов в Windows

К сожалению, встроенный в систему инструмент очистки дисков «не обучен» искать идентичные копии данных, и нам придется обратить свой взор на сторонние приложения. В сегодняшнем обзоре – 5 бесплатных утилит, которые делают эту работу быстро, четко и чисто.

Auslogics Duplicate File Finder

Одно только то, что , заявляет о некотором уровне качества и претендует на доверие пользователей. Программа поддерживает все выпуски Windows, регулярно обновляется, имеет русский язык и очень легко поддается освоению. Для поиска дубликатов она использует особый интеллектуальный алгоритм – сравнивает не только имена, но и внутреннее содержимое файлов, что гарантирует высокую точность результатов.

Функции и возможности Auslogics Duplicate File Finder

• Настройка фильтра по типу объектов: все либо только изображения, аудио, видео, архивы и приложения.
• Исключение из поиска файлов меньше и больше заданного размера.
• Исключение из критериев поиска названий, дат создания/изменения файлов и атрибутов «скрытый».
• Нахождение дубликатов с определенными именами или заданным фрагментом в имени.
• 3 способа удаления дублей: в корзину, безвозвратно и путем сохранения в архив.
• Восстановление данных из архива.
• Предпросмотр объектов перед удалением.
• Поддержка пользовательских списков исключения из сканирования файлов и папок.
• Откат системы на точку восстановления из интерфейса программы.

Использовать Auslogics Duplicate File Finder легко и удобно. К тому же можно не опасаться, что программа уничтожит какие-либо данные без вашего ведома и возможности восстановления (только если вы сами не выбрали опцию удаления мимо корзины). Впечатление портит лишь «ненавязчивое» предложение установить другие продукты разработчика, которое иногда появляется при запуске.

CloneSpy

Утилита предназначена для поиска дублированных файлов не только на жестком диске, но и на переносных накопителях. Она чуть сложнее в применении, чем Auslogics Duplicate File Finder, но более функциональна и способна работать без установки на компьютер – при запуске инсталлятора юзер может выбрать ее стандартный или портабельный вариант.

Функции и возможности CloneSpy

• Поддержка любых типов файлов.
• Поиск дубликатов по идентичному содержимому или одинаковому имени в совокупности с другим критерием – расширением, названием, размером.
• Нахождение объектов нулевой длины.
• Множество вариантов операций с копиями файлов: удаление вручную или автоматически (можно заранее выбрать, какой объект удалять – новый или старый), помещение в определенную папку, формирование списка дубликатов без удаления и прочее.
• Любые операции с найденными дубликатами (в том числе отложенные) при помощи пакетных командных файлов.
• Замена удаленных копий на ярлыки или жесткие ссылки.
• Вычисление контрольных сумм для возможности проверки объектов на идентичность.
• Поддержка пользовательских фильтров поиска.

CloneSpy функционирует быстро и бесперебойно, поддерживает все версии винды, регулярно получает обновления, но не имеет русского языка, что несколько затрудняет его освоение. Кроме того, некоторых пользователей отталкивает интерфейс, выполненный в стиле Windows 98.

Soft4Boost Dup File Finder

Разработчики утилиты позаботились не только о функциональности, но и о красоте своего продукта: к вашим услугам – 11 стильных вариантов оформления (скинов). Кроме того, приложение переведено на 9 языков, включая русский, и имеет интуитивно понятное управление.

Soft4Boost Dup File Finder приступает к делу сразу – при первом запуске на фоне главного окна открывается окошко мастера, который пошагово проведет вас через все этапы настройки. Запутаться и ошибиться не получится.

Функции и возможности Soft4Boost Dup File Finder

• Нахождение копий объектов по содержимому.
• Выбор категории поиска: среди всех файлов или только изображения, аудио, видео, архивы или приложения.
• Опция игнорирования имен объектов.
• Сканирование локальных и сетевых папок, а также съемных носителей (можно выбрать несколько).
• 2 способа удаления: в корзину и безвозвратно.

В отличие от многих «халявных» приложений, которые пытаются окупить свою бесплатность попутной установкой мусора или навязчивой демонстрацией рекламы, Soft4Boost Dup File Finder лишь скромно предлагает купить продукты того же разработчика оптом по 1399 рублей. Если они вам не нужны, просто не нажимайте на банер.

Как и остальные программы сегодняшнего обзора, Soft4Boost Dup File Finder поддерживает все версии Windows и регулярно обновляется.

AllDup

Утилита не столь интуитивна, как предыдущая, зато богата функциями. Не будь в ней русского языка, освоить все возможности за 5 минут смог бы не каждый. Хотя ничего сложного в этой программе нет. При первом запуске вместе с главным окном открывается небольшой подсказчик – окошко «Быстрый старт» с тремя кнопками: «Выбор исходной папки», «Выбор метода поиска» и «Начало поиска». Поочередное нажатие этих кнопок открывает области, где нужно что-либо выбрать или настроить.

Пользователи, владеющие английским, могут осваивать AllDup по материалам встроенной справки, которая открывается в нужном месте при нажатии на значки вопроса.

Функции и возможности AllDup

• Большой перечень критериев поиска: имя, расширение, размер, содержимое, даты создания и изменения, атрибуты файла, жесткие ссылки, похожие изображения. Поиск по сочетанию нескольких критериев.
• Сканирование содержимого архивов (нахождение отдельных дубликатов в архивах).
• Настраиваемый способ сравнения имен объектов: по полному совпадению, по начальным символам в имени, по заданному количеству совпадающих символов и т. д.
• Нахождение файлов с похожими именами.
• Сравнение содержимого файлов.
• Гибкие параметры поиска с возможностью выбора дополнительных действий до и после него.
• Ведение лога сканирования.
• Гибко настраиваемый фильтр игнорирования объектов.
• Создание жесткой ссылки или ярлыка на сохраненный файл на месте удаленного дубликата.
• Отсутствие ограничений на количество сканируемых каталогов.
• Сканирование съемных носителей.
• Предварительный просмотр найденных файлов с отображением различных параметров – на случай затруднения при принятии решения об удалении.
• Составление удобных списков результатов поиска. Экспорт списков в формат txt или csv.
• Сохранение результата сканирования. Позволяет закрывать программу, не дожидаясь окончания проверки. И после повторного запуска начинать не сначала, а с момента остановки.
• Создание и сохранение нескольких профилей настроек.

AllDup отличается от многих конкурентов высокой скоростью сканирования и полнотой обнаружения дублированных объектов. Кстати, благодаря функции поиска похожих файлов программу можно использовать для нахождения каких-либо данных на жестком диске без цели удаления.

Еще одна приятная особенность утилиты AllDup – это полное отсутствие рекламы. Вместо нее на верхнюю панель вынесена кнопка «Поддержать автора» любой приемлемой суммой, если вы захотите этого сами.

DiskBoss

Нельзя полностью отнести к классу программ для удаления дубликатов файлов. Это лишь одна из функций, помимо которой утилита умеет очень и очень многое. DiskBoss – это оптимизатор дискового пространства и усовершенствованный файловый менеджер. Он предназначен для анализа использования накопителей и управления всеми объектами, которые на них находятся.

Функции и возможности DiskBoss

• Исследование дискового пространства с отображением на круговой диаграмме, сколько места занимают те или иные объекты.
• Классификация, сортировка и группировка файлов и папок по множеству критериев, в том числе по правилам пользователя.
• Поиск и очистка дубликатов на рабочих станциях и серверах под управлением Windows. Гибкие критерии поиска.
• Несколько вариантов действий с найденными дубликатами – удаление, архивация, перенос в другое место и т. д.
• Замещение удаленных дубликатов ссылками.
• Сохранение отчетов сканирования и очистки дисков от дублированных данных в форматах html, excel, pdf, txt, csv и xml.
• Отображение результата поиска дубликатов на круговых диаграммах.
• Создание и выполнение автоматических сценариев по очистке дисков.
• Улучшенная система поиска данных на диске.
• Синхронизация данных в указанных каталогах.
• Удаление групп файлов на основе заданных критериев.
• Мониторинг изменений в файловой системе дисков в реальном времени.
• Анализ целостности и прочие операции с файлами.
• Многое другое.

Утилита DiskBoss будет хорошим выбором для тех, кому нужна полная картина содержимого и состояния дисков, а также возможность управлять всеми данными на них, используя ручные и автоматические методы. Приложение выпускается в бесплатной и нескольких платных версиях, причем первая содержит почти всё, что есть в платной версии pro, кроме нескольких инструментов автоматизации.

Пожалуй, единственный недостаток DiskBoss – отсутствие русского языка, но ради такого богатства функций с этим можно смириться. В остальном утилита очень хороша, а для некоторых задач – незаменима.

Конечно, это далеко не исчерпывающий список программ, предназначенных для удаления идентичных копий файлов. Их десятки, а может, и сотни. Однако этого скромного набора достаточно, чтобы удовлетворить потребности 90% пользователей Windows. Надеюсь, что что-то из них пригодится и вам.

Ещё на сайте:

Поиск и удаление дубликатов файлов в Windows с помощью пятерки бесплатных программ обновлено: Август 4, 2018 автором: Johnny Mnemonic

Чего только не хранится на жестком диске! Копии и копии копий, созданные на всякий случай, постепенно расходятся по разным папкам, и вот мы уже забываем об их существовании. Если вы решили навести порядок и освободить место, удалив ненужные повторяющиеся файлы, на помощь придут специальные утилиты для Windows (большинство подобных программ бесплатны).

Duplicate Remover Free

Программа имеет достаточно простой интерфейс, но предоставляет немало возможностей. Duplicate Remover Free позволяет искать файлы с одинаковым размером и именем, а также повторяющиеся изображения и копии документов. Можно просканировать на наличие дубликатов целый раздел диска или исключить из поиска отдельные директории (например, каталоги с резервными копиями или системные папки). Также поиск одинаковых звуковых файлов и видеозаписей может производиться по тэгам файлов (что может быть полезно, например, при обновлении домашней фонотеки).

Duplicate File Finder

Программа Duplicate File Finder от компании Auslogics обладает похожей функциональностью. Утилита умеет находить повторяющиеся файлы всех типов. Кроме того, она может искать только копии звуковых файлов, изображений или видеозаписей – таким образом, системные файлы гарантированно останутся в безопасности.

AllDup

AllDup – еще одна программа, которую также нельзя обойти вниманием. Эта мощная бесплатная утилита для Windows позволяет искать повторяющиеся файлы по нескольким параметрам: одинаковое имя, одинаковый размер, повторяющееся время создания и т.д. У предположительно одинаковых файлов программа проверяет контрольные суммы (можно выбрать алгоритм вычисления в настройках), поэтому вероятность удаления разных файлов одного размера нулевая. Также утилита умеет искать похожие изображения в форматах JPG, PNG и т.д. Это может быть полезно при удалении копий из домашнего фотоархива (например, дублей одного и того же снимка – с рамкой и без). AllDup распространяется и в виде классического инсталлятора, и в виде переносной версии, не требующей установки.

DupeGuru

Эту утилиту можно порекомендовать любителям кроссплатформенных решений. Программа выпускается в виде пакетов для Ubuntu и Mac OS X (существует неофициальная версия для Windows 7, которая вполне работоспособна и в более поздних версиях ОС). Пользоваться ей довольно просто: выбираем директорию, в которой ищем копии файлов, и запускаем сканирование. Через некоторое время программа найдет дубликаты файлов, и вы сможете их удалить.

Windows «Очистка диска»

Не забываем и про стандартную программу Windows, которая поможет освободить немного места. Эта утилита не ищет повторяющиеся файлы, но может удалить из системы некоторую устаревшую и ненужную информацию.

1. Чтобы запустить ее, нажимаем комбинацию клавиш Win+R, пишем в поле ввода cleanmgr.exe и кликаем на кнопку ОК.

2. Выбираем диск, который хотим очистить.

3. Отмечаем флажками нужные пункты (практически всегда можно без опаски удалять временные файлы, эскизы, кэш построителя текстуры DirectX) и нажимаем ОК.

4. Через несколько секунд (или пару минут – зависит от производительности компьютера и количества файлов) ненужная информация будет удалена.

В современных версиях Windows можно воспользоваться и другими встроенными средствами системы. Например, можно запустить PowerShell, перейти в нужную вам директорию командой cd и выполнить такой скрипт:

ls *.* -recurse | get-filehash | group -property hash | where { $_.count -gt 1 } | % { $_.group | select -skip 1 } | ls

Через некоторое время после начала работы PowerShell выведет на экран список файлов одинакового размера. Если заменить последнюю команду ls на del, то файлы будут сразу удалены (но лучше просмотреть список и удалить все ненужное вручную, чтобы случайно не уничтожить полезную информацию).

Однако хочется напомнить – собственноручно удалять дублирующиеся файлы из системных директорий диска C (Program Files, Program Files (x86), Windows и т.п.) крайне нежелательно. Результатом подобной «очистки» диска может стать неработоспособность операционной системы. То же касается удаления файлов из каталогов /etc, /bin, /usr в UNIX-подобных системах. Особую осторожность следует проявлять при удалении файлов с использованием прав администратора (или root’а). И, конечно, не стоит забывать про бэкапы – небольшая вероятность случайного удаления нужной информации существует всегда, поэтому лучше подстраховаться.