Накопившийся в процессе работы компьютера файловый мусор обычно представляет собой не только ненужные пользователю или временные файлы. Отдельной категорией являются файлы-дубликаты, которые одинаковы по своему содержанию, но хранятся в разных папках или на разных дисках компьютера.
Это могут быть, например, неоднократно сохраненные документы, повторяющиеся или похожие фотографии, одни и те же музыкальные композиции, которые вы скачали из Интернета и сохранили в разных папках или под разными именами. Важно понимать, что дубликатами, по сути, являются две версии одной и той же фотографии, имеющие разное разрешение. Или одна и та же песня одного и того же исполнителя, но записанная на разных концертах. Либо две версии одной и той же музыкальной композиции, но записанные в разных аудиоформатах.
Примером файлов-дубликатов можно считать также и две версии фильма, сохраненные с разным качеством или опять же в разных видеоформатах. Разумеется, вручную обнаружить такие дубликаты достаточно сложно, поэтому на помощь мы призовем специальные программы, которые занимаются поиском файлов-дубликатов. Как вы уже наверняка поняли из предыдущего абзаца, дубликаты каждого типа файлов (рисунки, музыка, видео, документы) имеют свои особенности.
Алгоритмы поиска дубликатов всех типов файлов значительно отличаются друг от друга, поэтому и поиском дубликатов файлов разных типов занимаются, как правило, разные программы. Рассмотрим некоторые из них. К тому же важно не только обнаружить дубликаты, но и выбрать самую последнюю версию документа или наиболее качественный видео- либо аудиофайл. Мы рассмотрим каждый тип файлов отдельно, а также приведем список популярных программ для работы с дубликатами.
Поиск картинок-дубликатов
Наиболее ярким примером картинок-дубликатов могут служить одинаковые или очень похожие фотографии. Многие современные фотоаппараты позволяют снимать в серийном режиме, когда снимки делаются с очень коротким интервалом - от нескольких долей секунды до нескольких секунд. При этом получившиеся снимки отличаются друг от друга совсем незначительно. Как показывает практика, нет реальной необходимости хранить похожие фотографии, достаточно выбрать один-два удачных снимка из серии, а остальные удалить.
Еще один случай, когда могут появляться дубликаты файлов с изображениями, - создание резервных копий фотографий на жестком диске, выборка картинок для презентации, при котором они копируются в другую папку. В общем пользователь зачастую сам создает копии изображений, а потом забывает их удалять. Впрочем, причины появления дубликатов изображений могут быть самыми разными. Наша задача - избавиться от таких дубликатов и очистить место на жестком диске. Среди наиболее распространенных программ, предназначенных для поиска картинок-дубликатов на компьютере, можно назвать следующие.
- SWMole Clone Remover . Адрес веб-сайта: http://www.clone-remover.com/ . Программа платная. Умеет искать не только дубликаты изображений (в том числе похожие рисунки, а не просто точные копии), но и копии музыкальных файлов. В незарегистрированной версии пользователь имеет возможность удалить не более 20 файлов. Копии изображений находит парами, даже если на диске находится более двух похожих изображений. Имеет русскоязычный интерфейс.
- Image Comparer . Веб-сайт: http://www.bolidesoft.com/rus/imagecomparer.html. Программа условно-бесплатная, имеет ознакомительный период 30 дней. Поддерживается многоязычный пользовательский интерфейс, среди языков есть русский. Имеется возможность поиска дубликатов картинок как в пределах одной папки, так и между несколькими папками. Интерфейс программы несколько сложноват для начинающего пользователя, однако возможно использовать режим пошагового мастера, который поможет найти и удалить дубликаты файлов изображений.
- Picasa . Официальная страница программы: https://picasa.google.com . Сама программа включает в себя множество различных инструментов для работы с фотографиями. В том числе в программе есть функция поиска картинок-дубликатов. Чтобы воспользоваться этой функцией, нужно в главном меню программы выбрать пункт Инструменты>>Экспериментальные функции>>Показать повторяющиеся файлы. Сразу обратим внимание на то, что программа ищет именно повторяющиеся файлы изображений, то есть абсолютно идентичные картинки. Зато находит их независимо от расположения и практически без участия пользователя. Программа является абсолютно бесплатной и имеет русскоязычный интерфейс. Кроме того, с помощью программы Picasa можно обрабатывать изображения, применять к ним различные фильтры, находить лица людей, отмечать места съемки и выполнять множество других полезных действий.
- Similar Images Finder . Веб-сайт программы: http://www.crown-s-soft.com/ru/sifinder.htm . Программа условно-бесплатная. В течение 30 дней можно пользоваться ею, не покупая, при этом накладывается ограничение на количество найденных файлов-дубликатов. Интерфейс программы англоязычный. Есть возможность настройки глубины «похожести» фотографий, а также установки предпочтений для найденных дубликатов: например, программе можно указать, чтобы она автоматически удаляла более старый из файлов-дубликатов, имеющий меньшую цветность или меньший размер. В программе есть мастер поиска дубликатов, который позволяет в пошаговом режиме указать критерии сравнения файлов изображений.
Поиск дубликатов музыкальных файлов
Так же как и изображения, музыкальные файлы порой могут занимать много дискового пространства, и в некоторых случаях найти одинаковые или похожие музыкальные композиции вручную бывает проблематично. На помощь придут специализированные приложения, автоматизирующие этот процесс. Расскажем о некоторых наиболее популярных из них.
- Audio comparer . Скачать программу можно на сайте: http://audiocomparer.com/rus/ . Приложение условно-бесплатное. В течение 30 дней его можно использовать без регистрации. Анализ музыкальных композиций основывается на сопоставлении имен исполнителей и названий песен. Эти данные берутся из названия файла и внутренней служебной информации, так называемых ID3-тегов. Есть возможность указать порог схожести названий, при которых композиции будут считаться одинаковыми. Приложение позволяет сравнивать файлы как внутри одного каталога на диске компьютера, так и между несколькими каталогами. Интерфейс программы несколько сложноват для начинающего пользователя, но это компенсируется наличием пошагового мастера, который облегчает процесс поиска дубликатов.
- Music Duplicate Remover . Сайт в Интернете: http://www.maniactools.com/ . Ключевое отличие этого приложения от аналогов - возможность поиска дубликатов по звучанию. Данная функция позволяет находить дубликаты даже среди тех файлов, которые некорректно поименованы. Программа условно-бесплатная и дает возможность незарегистрированному пользователю работать в течение 30 дней. Имеет простой пользовательский интерфейс на русском языке.
- SWMole Clone Remover . Как уже упоминалось, данное приложение умеет искать не только дубликаты изображений, но и повторяющиеся музыкальные композиции. Адрес веб-сайта программы: http://www.clone-remover.com/ . Интерфейс программы сложноват, но благодаря поддержке русского языка в нем несложно разобраться самостоятельно. Приложение может искать дубликаты музыкальных файлов лишь по имени файла и по ID3- тегам, не учитывая звучание. Используя одну из перечисленных или все программы сразу, вы можете освободить много полезного места на дисках своего компьютера.
Поиск дубликатов видеофайлов
Борьба с дубликатами видеофайлов имеет свои особенности по сравнению с поиском дубликатов картинок или музыки. Из-за больших размеров видеофайлов их обычно не так много на дисках компьютера, как музыки или изображений. Кроме того, появление дубликатов фильмов или видеороликов не столь распространенное явление, как «клонирование» фотографий или песен. Зато удаление даже одного клона видеофайла поможет освободить значительное количество дискового пространства. Кроме того, алгоритм сравнения видеопотоков гораздо сложнее рисунков или даже звучания музыки. По этой причине программ, предназначенных для поиска дубликатов видеофайлов, существует не так много. Остановимся на некоторых из них.
- Duplicate Video Search . Веб-адрес: http://duplicatevideosearch.com/rus/ . Программа условно-бесплатная - с ознакомительным периодом 30 дней. Имеет англоязычный интерфейс, который, впрочем, не перегружен лишними элементами, а потому достаточно понятен. Пользователь должен указать, в каких папках нужно производить поиск видеодубликатов. Приложение может сравнивать содержимое видеофайлов десяти различных форматов. Есть возможность указания глубины сравнения.
- Teemoon Video Matching . Домашняя страница программы: http://teemoon.name/videoid/Default.html . В отличие от своих «собратьев», данное приложение бесплатное. Работа с программой предполагает два этапа. Первый - индексирование, которое осуществляется на вкладке Indexing. В ходе этого процесса для каждого видеофайла из указанной папки создаются файлы индексов. Процесс длительный, но его требуется провести всего один раз, затем при сравнении файлов будут использоваться уже имеющиеся индексные файлы. Второй этап - сравнение, которое осуществляется на вкладке Matching. К недостаткам программы можно отнести отсутствие поддержки русского языка и неочевидный алгоритм работы.
- Video Comparer . Сайт программы: http://www.video-comparer.com/ . Приложение имеет платную и бесплатную версии. Для домашнего использования вполне подойдет бесплатная. Интерфейс программы довольно прост. От пользователя требуется только указать папки, в которых следует осуществлять поиск файлов-дубликатов, и нажать кнопку запуска процесса сравнения. Пользовательский интерфейс англоязычный.
Если вы являетесь киноманом и храните на своем компьютере большую коллекцию разных фильмов либо занимаетесь видеомонтажом и имеете множество видеофрагментов на жестком диске, то вам стоит провести «инвентаризацию» видеоархива. Возможно, вы найдете скрытые резервы своего компьютера.
Поиск других дубликатов
Как вы уже наверняка поняли, не существует универсальной программы, позволяющей избавиться от всех файлов-дубликатов одним махом, - для каждого типа данных требуется свой инструмент. Однако если оставить в стороне сложные алгоритмы сравнения изображений и звуков, а ограничиться просто сравнением имени, размера и даты файла, то можно отыскать немало дубликатов среди тех типов файлов, о которых мы здесь еще не упоминали. Это могут быть документы, файлы других форматов, которые зря занимают место на диске. Чтобы найти такие дубликаты, часто можно обойтись без специализированных программ. Например, если вы используете какой-нибудь популярный файловый менеджер, то можно воспользоваться его средствами для поиска и удаления файлов-дубликатов. Среди файловых менеджеров, имеющих функцию поиска файлов-дубликатов, можно назвать:
- FAR Manager;
- FreeCommander;
- Total Commander.
Если же вы не привыкли пользоваться файловыми менеджерами, то не стоит их устанавливать на компьютер только ради поиска дубликатов. Для этой задачи существуют специализированные приложения:
- CloneSpy - http://www.clonespy.com/;
- DupKiller - http://dupkiller.com/index_ru.html;
- Duplicate Cleaner - http://www.digitalvolcano.co.uk/duplicatecleaner. html;
- Free Duplicate File Finder - http://www.ashisoft.com/;
- NoClone 2014 Desktop - http://noclone.net/
Эти и множество других платных и бесплатных приложений на любой вкус помогут вам избавиться от дубликатов файлов на ваших жестких дисках.
Одним из самых быстрых способов забить жесткий диск — хранение дубликатов файлов. Наверняка многие даже не подозревают об их существовании… они могут иметь разное происхождение: случайные копии, множество одинаковых загрузок и так далее. Одно можно сказать точно — они действительно могут создавать вам некоторые проблемы.
Множество дубликатов создаются из-за необходимости держать файл в «безопасности»… например перед редактирование документа я мог сделать копию на всякий случай, а потом забыть… или у меня уже есть такой документ, а я его еще раз скачал из почты. К сожалению таких дублей может быть очень много и получается что вы забиваете свободное место бесполезной информацией.
С помощью этих инструментов вы можете вычислить и удалить дубликаты файлов за считанные минуты и освободить много ценного места на жестком диске. Я буду рассматривать только бесплатные утилиты, поэтому вы ничего не теряете!
Поиск дубликатов файлов. Обзор лучших инструментов
Эта утилита наверное мой фаворит в инструментах для поиска и удаления дубликатов, потому что имеет массу замечательных возможностей: Она является кросс платформенной, полностью бесплатная, а так же имеет продвинутый алгоритм меток и отбора.
Что такое не явные дубли? Несколько одинаковых файла могут иметь разное имя. Например у вас на компьютере может быть два файла: пример-файла.avi и пример файла(1).avi — утилитка это прекрасно понимает и тоже может пометить их как дубликат.
Кстати утилита имеет и другие издания: Music Edition и Picture Edition, оптимизированные для поиска дублей графических и аудио файлах — даже если они записаны в разных форматах. Это очень важно, ведь именно аудио и графические файлы наиболее часто становятся дублями.
Duplicate Files Finder представляет собой приложение, которое осуществляет поиск дублированных файлов (которые имеют одинаковое содержание, но не обязательно с таким же именем) и позволяет удалить пользователю ненужные файлы.
Duplicate Files Finder может находить только точные дубликаты. Принцип ее работы — перебор всех файлов на компьютере по размеру и сравнение их по содержанию. С одной стороны это логично, но это совсем печально для видео и графики (ведь они в зависимости от алгоритма сжатия могут иметь разный размер) , но для всего остального программа просто отличная.
Благодаря такому алгоритму сравнения Duplicate Files Finder работает гораздо быстрее своих конкурентов.
AllDup является мощным инструментов для поиска дубликатов созданный одним человеком, Michael Thummerer. Утилита имеет ряд настроек для поиска дублей из: имени файла, расширения и типа данных, даты создания и изменения и еще много разных параметров.
AllDup имеет много полезных функций и большую гибкость в условиях поиска дубликатов, однако за функционал нужно заплатить. Интерфейс тут совсем не дружелюбный и это может загнать неуверенного пользователя в тупик. Однако если вы сможете разобраться в программе, то это приложение будет хорошим инструментом для поиска повторяющихся файлов.
Duplicate Cleaner требует тонкой ручной настройки, прежде чем вы сможете использовать функционал данной программы на все сто процентов.
При ручной настройке вы можете выбрать в какой папке нужно найти дубли, а не сканировать весь компьютер как предлагают нам некоторые другие программы. В итоге вы можете эти дубли удалить, переместить их все в отдельную папку или вместо них создать ярлыки на единственный нужный файл. В целом впечатления положительные — так что рекомендую.
Если вы пользователь Windows, и хотите избавиться от бесконечных копий изображений, то SimilarImages будет вам как никогда кстати. Изображения на мой взгляд самый частый источник дублированного контента на компьютере. Я например знаю что у меня есть куча дублирующихся фотографий в разных папках… а учитывая их количество разбираться с ними вручную у меня нет никакого желания.
Программа имеет гибкие настройки и может обнаруживать неточные дубликаты — это особенно актуально из-за присутствия артефактов появившимся в процессе сжатия изображения.
Самое замечательное в SimilarImages — она показывает вам два изображения когда находит дубли, и вы можете сделать вывод — оставить их или удалить дубль.
Заключение
Все как в реальной жизни, когда ненужное барахло создает ужасный беспорядок в вашем доме, так и дубликаты файлов могут накапливаться на вашем жестком диске. Такие файлы очень трудно удалить, потому что вы о нем забыли, а обычные программы для очистки системы не найдут их — так как они обосновалить на винчестере на вполне законных основаниях.
Используйте программы которые я вам перечислил для поиска дубликатов файлов чтобы освободить место на вашем жестком диске. Если вы знаете о других утилитах — поделитесь с нами в комментариях.
В этой инструкции о нескольких бесплатных и простых способах найти дубликаты файлов на компьютере в Windows 10, 8 или 7 и удалить их при необходимости. Прежде всего речь пойдет о программах, которые позволяют выполнить поиск дубликатов файлов, но, если вас интересуют способы интереснее, в инструкции затронута и тема их поиска и удаления с помощью Windows PowerShell.
Для чего это может потребоваться? Почти у любого пользователя, который достаточно продолжительное время сохраняет архивы фотографий, видео, музыки и документов к себе на диски (не важно, внутренние или внешние хранилища), с огромной вероятностью «образуются» дубликаты одних и тех же файлов, занимающие лишнее место на HDD, SSD или другом накопителе.
Важно: не рекомендую выполнять поиск и удаление (особенно автоматическое) дубликатов сразу на всём системном диске, указывайте в приведенных программах ваши пользовательские папки. Иначе есть значительный риск удалить необходимые системные файлы Windows, которые нужны более чем в одном экземпляре.
AllDup - мощная бесплатная программа для поиска дубликатов файлов
Бесплатная программа AllDup доступна на русском языке и содержит все необходимые функции и настройки, имеющие отношение к поиску дубликатов файлов на дисках и в папках Windows 10 – XP (x86 и x64).
Среди прочего поддерживается поиск на нескольких дисках, внутри архивов, добавление фильтров файлов (например, если нужно найти только дубликаты фотографий или музыки или исключить файлы по размерам и другим характеристикам), сохранение профилей поиска и его результатов.
По умолчанию, в программе сравнение файлов происходит только по их именам, что не очень разумно: рекомендую сразу после начала использование включить поиск дубликатов только по содержимому или хотя бы по имени и размеру файла (эти настройки можно изменить в «Метод поиска»).
При поиске по содержимому файлы в результатах поиска сортируются по их размеру, доступен предварительный просмотр для некоторых типов файлов, например, для фотографий. Чтобы удалить ненужные дубликаты файлов с диска, отметьте их и нажмите кнопку слева вверху в окне программы (Файл-менеджер для операций с выбранными файлами).
Выберите, полностью ли их удалить или переместить в корзину. Допустимо не удаление дубликатов, а их перенос в какую-либо отдельную папку или же переименование.
Подводя итог: AllDup функциональная и настраиваемая утилита для быстрого и удобного поиска дубликатов файлов на компьютере и последующих действий с ними, к тому же с русским языком интерфейса и (на момент написания обзора) чистая от какого-либо стороннего ПО.
Скачать AllDup можно бесплатно с официального сайта http://www.allsync.de/en_download_alldup.php (там же присутствует и portable версия, не требующая установки на компьютер).
DupeGuru
Программа DupeGuru - еще одна отличная бесплатная программа для поиска дубликатов файлов на русском языке. К сожалению, разработчики с недавних пор перестали обновлять версию для Windows (но обновляют DupeGuru для MacOS и Ubuntu Linux), однако имеющаяся на официальном сайте http://hardcoded.net/dupeguru версия для Windows 7 (внизу страницы) прекрасно работает и в Windows 10.
Все что потребуется для использования программы - добавить папки для поиска дубликатов в список и запустить сканирование. По его завершении вы увидите список найденных дубликатов файлов, их расположение, размеры и «процент», на сколько этот файл совпадает с каким-либо другим файлом (по любым из этих значений можно отсортировать список).
Например, в моем случае одна из тестировавшихся недавно программ, как оказалось, скопировала свой файлы установки в папку Windows и оставила там (1, 2), забрав у меня драгоценные 200 с лишним Мб, этот же файл остался и в папке загрузок.
Как видно на скриншоте, отметка для выбора файлов есть только у одного из найденных образцов (и только его можно удалить) - при этом в моем случае логичнее удаление не из папки Windows (там, в теории, файл может быть нужен), а из папки загрузок. Если выбор нужно изменить, отметьте файлы, которые не нужно удалять и затем, в меню правого клика мыши - «Сделать выбранные эталоном», тогда отметка для выбора исчезнет у текущих файлов и появится у их дубликатов.
Думаю, с настройками и остальными пунктами меню DupeGuru у вас не составит труда разобраться: все они на русском и достаточно понятны. А сама программа ищет дубликаты быстро и надёжно (главное не удаляйте какие-либо системные файлы).
Duplicate Cleaner Free
Программа для поиска дубликатов файлов на компьютере Duplicate Cleaner Free - еще одно скорее хорошее, чем плохое решение, особенно для начинающих пользователей (на мой взгляд, этот вариант проще). Несмотря на то что сравнительно ненавязчиво предлагает приобрести Pro версию и ограничивает некоторые функции, в частности поиск только одинаковых фотографий и изображений (но при этом доступны фильтры по расширениям, что позволяет также искать только картинки, возможен поиск только одинаковой музыки).
Также, как и предыдущие программы, Duplicate Cleaner имеет русский язык интерфейса, но некоторые элементы, судя по всему, были переведены с использованием машинного перевода. Тем не менее, почти всё будет понятно и, как было упомянуто выше, работа с программой скорее всего будет очень простой для начинающего пользователя, которому потребовалось найти и удалить одинаковые файлы на компьютере.
Скачать бесплатно Duplicate Cleaner Free вы можете с официального сайта https://www.digitalvolcano.co.uk/dcdownloads.html
Как найти дубликаты файлов с помощью Windows PowerShell
При желании, можно обойтись без сторонних программ для поиска и удаления дубликатов файлов. Недавно я писал о том, в PowerShell и эту же функцию можно использовать для поиска одинаковых файлов на дисках или в папках.
При этом, можно найти множество различных реализаций скриптов Windows PowerShell, позволяющих найти дубликаты файлов, вот некоторые варианты (сам я не специалист по написанию таких программ):
Ниже на скриншоте - пример использования слегка модифицированного (чтобы он не удалял дубликаты файлов, а отображал их список) первого скрипта в папке изображений (где лежат две одинаковые картинки - те же, что нашла программа AllDup).
Если для вас создание скриптов PowerShell - привычное дело, то, думаю, в приведенных примерах вы сможете найти полезные подходы, которые помогут реализовать поиск дубликатов файлов необходимым именно вам способом или даже автоматизировать процесс.
Дополнительная информация
Помимо приведенных программ поиска дубликатов файлов, есть много других утилит такого рода, многие из них не бесплатны или ограничивают функции до регистрации. Также при написании этого обзора попались программы-пустышки (которые делают вид, что ищут дубликаты, а по факту лишь предлагают установить или купить «основной» продукт) от довольно-таки именитых разработчиков, которые у всех на слуху.
На мой взгляд, свободно распространяемые утилиты для поиска дубликатов, особенно первые две из данного обзора, более чем достаточны для любых действий по поиску одинаковых файлов, в том числе музыки, фотографий и картинок, документов.
Если же приведенные варианты вам показались не достаточными, при загрузке других найденных вами программ (да и перечисленных мною - тоже) будьте внимательны при установке (во избежание установки потенциально нежелательного ПО), а еще лучше - .
Программа для поиска дубликатов файлов чаще всего необходима пользователям, хранящим на диске большое количество музыки, фото и документов.
И, хотя удалять такие лишние копии можно вручную, специализированные приложения способны сэкономить немало времени.
Особенно, если файлы расположены в разных папках или в скрытых каталогах. Искать такие дубликаты можно с помощью универсального программного обеспечения или же рассчитанного на конкретный тип данных.
В первом случае повышается скорость поиска, во втором – увеличивается вероятность обнаружить все копии.
Универсальные приложения
Универсальные приложения для поиска копий, в основном, работают по принципу сравнивания размеров файлов. И, так как вероятность совпадения количества байтов у разных фото практически равна нулю, одинаковые значения считаются признаком дубликата.
Иногда алгоритм предусматривает проверку имён – тоже важный параметр для поиска, тем более что одинаковые данные в большинстве случаев совпадают и по названию.
Преимуществами программ являются возможность найти с их помощью файлы любого типа и сравнительно высокая скорость работы. Недостаток – меньшая точность обнаружения. Так, например, ни одна из таких утилит не посчитает дубликатом одну и ту же фотографию, сохранённую с различным разрешением.
1. DupKiller
Приложение, обеспечивающее поиск файлов практически с любым расширением, можно бесплатно скачать на официальном сайте его производителя.
Среди отличий программы – интерфейс на русском языке, быстрая работа и большое количество настроек.
С помощью DupKiller можно сравнивать файлы и по размеру, и по дате, и по содержимому (последняя возможность поддерживается только для определённых типов).
Рис. 1. Окно программы DupKiller.
2. Duplicate Finder
Приложение Duplicate Finder позволяет не только искать дубликаты файлов с разными расширениями, но и проводить их сортировку.
Для удобства пользователей настройки утилиты позволяют проводить поиск и по размерам, и по контрольным суммам, и по названию.
Кроме того, с её помощью можно удалять пустые папки и «нулевые» файлы. А среди недостатков можно назвать разве что отсутствие поддержки русского языка.
Рис. 2. Результат работы приложения Duplicate Finder.
3. Glary Utilities
Программа представляет собой не одну утилиту, а сразу несколько – для исправления реестра, для очистки диска и даже для управления безопасностью.
Одно из приложений в наборе даёт возможность искать дубликаты файлов. Среди преимуществ утилиты – русский интерфейс.
К минусам можно отнести определённое замедление работы компьютера при использовании приложения.
Рис. 3. Утилита поиска дубликатов в составе пакета Glary Utilities.
Как повысить ФПС в играх: все возможные способы 2017 года
4. CCleaner
Главной задачей многофункциональной программы CCleaner является очистка жёсткого диска компьютера (а также планшета и смартфона, так как у приложения есть версии и для Android). А среди её преимуществ можно отметить:
- простоту настройки;
- установку нескольких критериев поиска;
- возможность игнорировать некоторые файлы (с определённым размером или датой создания, а также системные или скрытые).
Важно: При обнаружении файлов с нулевым размером их не обязательно удалять. Иногда это может быть информация, созданная в другой операционной системе (например, Linux).
Рис. 4. Программа для оптимизации системы CCleaner может искать и дубликаты файлов.
5. AllDup
Среди преимуществ ещё одной программы, AllDup, можно отметить поддержку любой современной операционной системы Windows – от XP до 10-й. При этом поиск ведётся и внутри скрытых папок, и даже в архивах.
Хотя сравнение информации по умолчанию происходит по названиям файлов, поэтому настройки желательно сразу же изменить. Зато в процессе поиска каждый найдённый дубликат можно просмотреть, не закрывая приложение.
А при обнаружении копии её можно не только удалить, но и переименовать или перенести в другое место. К дополнительным преимуществам приложения относится русскоязычное меню и полностью бесплатная работа в течение любого периода времени.
Кроме того, производитель выпускает ещё и портативную версию для того чтобы искать копии на тех компьютерах, на которых запрещена установка постороннего ПО (например, на рабочем ПК).
Рис. 5. Поиск файлов с помощью portable-версии AllDup.
6. DupeGuru
Ещё одним полезным приложением, проводящим поиск дубликатов с любым расширением, является DupeGuru. Её единственный недостаток – отсутствие новых версий для Windows (при этом обновления для Linux и MacOS появляются регулярно).
Впрочем, даже сравнительно устаревшая утилита для Виндоус 7 неплохо справляется со своими задачами и при работе в более новых ОС. С её помощью легко обнаруживаются даже системные файлы, а меню интуитивно понятное и русскоязычное.
Рис. 6. Обнаружение копий с помощью утилиты DupeGuru.
Примечательно, что, кроме обычного универсального варианта, компания-производитель создала утилиту для поиска файлов определённого типа. Существует отдельная версия для изображений и ещё одна для музыки.
И, при необходимости очистить свой компьютер не только от документов и системных файлов (которые, кстати, требуется удалять очень осторожно – иногда стоит даже оставить «лишнюю» копию, чем нарушить работоспособность системы), стоит скачать и эти приложения.
7. Duplicate Cleaner Free
Утилита для обнаружения копий любого файла Duplicate Cleaner Free отличается следующими особенностями:
- фильтрации данных по расширению;
- русским языком интерфейса;
- возможность бесплатного использования;
- высокой скоростью работы.
К её недостаткам относят небольшие ограничения при поиске изображений (для этого рекомендуется приобрести платную версию) и не совсем точный перевод отдельных элементов меню с английского языка. Тем не менее, благодаря своей эффективности и удобству использования, приложение пользуется определённой популярностью.
Рис. 7. Поиск дубликатов с помощью утилиты Duplicate Cleaner Free.
Поиск дубликатов аудио файлов
Если результаты поиска дубликатов не устраивают пользователя, можно рассмотреть вариант, предназначенный для определённых файлов. Например, для музыки, скопившейся на диске.
Такая необходимость часто возникает при загрузке сразу нескольких альбомов и сборников одного и того же исполнителя – нередко в разных папках оказываются одинаковые треки.
Они могут иметь похожие размеры и отличаться, по большому счёту, только названиями. Специально для этого существуют утилиты для поиска похожих мелодий.
8. Music Duplicate Remover
Среди особенностей программы Music Duplicate Remover – сравнительно быстрый поиск и неплохая эффективность. Фактически, это приложение как бы «прослушивает» композицию и проводит её сравнение с другими аудио файлами.
При этом, естественно, время её работы больше, чем у универсальных утилит. Однако количество проверяемых программой данных, как правило, в десятки раз меньше, поэтому средняя продолжительность проверки редко превышает пару часов.
Рис. 8. Обнаружение копий музыки и аудио файлов по альбомам.
9. Audio Comparer
Среди преимуществ утилиты Audio Comparer – очень простое меню и быстрый поиск копий музыки. Так, среди нескольких тысяч аудио файлов она находит копии и дубликаты (естественно, при их наличии) всего за 1–2 часа.
При этом для обнаружения не имеет значения ни размер трека, ни его битрейт (битность, то есть качество звука, изменение которого приводит к другому объёму данных при той же продолжительности мелодии).
Рис. 9. Поиск дубликатов с помощью Audio Comparer.
10. DupeGuru Music Edition
Приложение представляет собой одну из дополнительных версий бесплатной утилиты DupeGuru. Скорость её работы меньше, чем у универсального варианта, зато вероятность обнаружения дубликата аудио файла в несколько раз выше.
Принципы работы и интерфейс практически полностью повторяют базовую программу, а одним из главных преимуществ является то, что Music Edition считает «оригиналами» музыку с лучшим битрейтом. А, значит, что удаление дубликатов не приведёт к потере более качественных аудио файлов.
Рис. 10. Версия DupeGuru для поиска дубликатов музыки.
Поиск копий фото и других изображений
Не менее часто пользователю может потребоваться удалить дубликаты изображений. Особенно, если на жёстком диске находится несколько сборников с личными фотографиями, отсортированными по датам или местам съёмки.
С помощью специального программного обеспечения лишние фото и картинки будут обнаружены и уничтожены, а места на HDD (SDD, флешке и другом накопителе) станет больше.
11. DupeGuru Picture Edition
Приложение для поиска одинаковых картинок является ещё одним вариантом утилиты DupeGuru, которую тоже можно (и даже желательно) скачать даже при наличии универсальной версии. При этом анализ фото тоже длится дольше по сравнению с поиском файлов любого расширения, но результат оправдывает себя.
Изображения определяются даже в том случае, когда на диске находятся несколько дубликатов одной картинки, но с разным разрешением и, соответственно, размером. Кроме того, для повышения эффективности проверяются файлы с любыми графическими расширениями – от.jpg до.png.
Рис. 11. Поиск картинок с помощью ещё одной версии DupeGuru.
12. ImageDupeless
Программа ImageDupeless отличается высокой скоростью работы и небольшим размером, что может оказаться важным при использовании, например, для её скачивания мобильного 2G-интернета.
При этом она распространяется бесплатно и имеет русский интерфейс. А производитель периодически выпускает к ней обновления, повышая эффективность поиска изображений.
Рис. 12. Стильный интерфейс приложения ImageDupeless.
13. Image Comparer
Преимуществами приложения Image Comparer, кроме простого интерфейса, можно назвать наличие пошагового мастера, позволяющего научиться быстрому и результативному поиску изображений.
Эта особенность отличает утилиту от большинства остальных, для работы с которыми придётся читать файлы справки, не всегда правильно переведённые (а иногда и вообще предоставляемые только на английском).
Фактически, приложение является ещё одной версией Audio Comparer, и тоже распространяется по «условно бесплатной» лицензии – то есть за определённые функции пользователю придётся заплатить.
Рис. 13. Приложение Image Comparer – неплохой способ найти дубликаты картинок.
Поиск копий фильмов и видео
Кроме музыки и изображений, ещё одним типом данных, дубликаты которых ищутся отдельно, являются файлы видео. Ведь при наличии 1–2 или даже 4 терабайт места на жёстком диске на нём могут «потеряться» даже фильмы.
Или домашние видеоролики, распределённые по разным каталогам. Сэкономить пространство, удаляя копии видео, можно с помощью специализированных утилит, количество которых намного меньше по сравнению с приложениями для поиска других файлов.
14. Duplicate Video Search
Работа программы Duplicate Video Search основана на сравнении битрейтов, размеров и названий.
При этом сравниваются также разные форматы – .avi, .mpeg4, .mkv и т. д. А результаты выдаются в виде миниатюр с характеристиками файлов.
Рис. 14. Результаты поиска видео программой Duplicate Video Search.
15. Video Comparer
Приложение Video Comparer отличается высокой эффективностью. Однако обладает существенным недостатком для отечественного пользователя – работа утилиты бесплатная только в течение первых 30 дней (после которых придётся либо приобретать полную версию, либо тщательно чистить реестр и ещё раз устанавливать ознакомительную).
Кроме того, интерфейс программы только английский. Однако для тех людей, которые постоянно работают с видео на профессиональном уровне, можно задуматься и над покупкой приложения.
Тем более что стоит оно всего лишь 20 евро для домашнего использования и отличается очень высокой скоростью – за 40 минут проверяется до 500 роликов любого размера.
Рис. 15. Определение дубликатов видео с помощью Video Comparer.
Выводы
Преимущества программ для поиска копий файлов достаточно серьёзные для того чтобы хотя бы одна из них была установлена на каждом компьютере.
Особенно, если пользователь постоянно скачивает из сети различную информацию. С помощью утилит, обнаруживающих дубликаты, можно сэкономить не один час своего времени и несколько гигабайт места на диске.
" пришла новая - "как во всем этом разобраться?" Объемы современных жестких дисков достигли того, что на них вполне может случайно затеряться с десяток DVD-образов, не говоря уже о сотнях фотографий. Вы можете не замечать ненужных и повторяющихся файлов вплоть до того момента, когда место вдруг неожиданно закончится. Но перед тем, как покупать новый жесткий диск, имеет смысл почистить старый на предмет дубликатов. Возможно, после генеральной уборки проблема свободного места уже не будет стоять так остро. Искать повторяющиеся файлы вручную – это долго и неудобно. Гораздо проще воспользоваться одной из специальных утилит, которые выполняют большую часть работы за вас. Если вы готовы к ревизии жесткого диска, осталось только подобрать подходящий инструмент.
Разработчик: Ashisoft SoftwareРазмер дистрибутива: 1,9 Мб
Распространение: shareware
Интерфейс: английский Duplicate Finder может выполнять две основные задачи: искать файлы по заданным критериям и сортировать их. К возможностям поиска относится побайтовое сравнение, проверка контрольной суммы, поиск файлов с одинаковыми названиями и с нулевым размером. Дополнительно можно установить защиту на системные папки, исключить из области поиска скрытые папки и файлы, а также включить режим Fuzzy Logic. В этом режиме файлы с незначительными отличиями будут показываться как идентичные. В область поиска можно включить сразу несколько папок, причем, для каждой задать свои параметры исключения. Так, в рамках каждой папки можно ограничивать поиск файлами определенного типа, размера; также есть ограничение по дате. Типы разрешенных файлов не придется вписывать вручную – тут есть достаточно много профилей для разновидностей файлов, например, текстовых, видео, аудио и т.д. Каждый профиль легко редактируется. Отдельно задаются папки, в которых не стоит выполнять поиск. Эта функция полезна, если областью поиска являются не отдельные папки, а целый жесткий диск. В этом случае удобно указать те папки, которые нужно пропускать. То же самое касается типов файлов – вы можете указать, файлы с каким расширением нужно пропускать.
Найденные дубликаты выводятся не по ходу сканирования, а после того, как поиск будет завершен. В то время, когда Duplicate Finder работает, вы можете наблюдать в строке состояния за ходом выполнения задания и за тем, сколько файлов было проверено. Результаты поиска будут представлены в виде списка. Различить, какие файлы являются дубликатами, можно по цвету: каждая вторая пара одинаковых файлов будет выделена голубым. Честно говоря, очень наглядным назвать такое выделение нельзя - было бы гораздо удобнее, если бы использовался другой цвет, но возможности его изменить мы в программе так и не обнаружили.
В списке найденных файлов показывается исчерпывающая информация о каждом из них: путь на диске, расширение, размер, дата последнего изменения. При помощи команд контекстного меню или кнопок на панели инструментов можно быстро переместить файл в другую папку, удалить его или скопировать. Кроме этого, можно просмотреть свойства файла, открыть в «Проводнике» папку, в которой он находится, или открыть сам файл. Стоит отметить достаточно широкие возможности выделения файлов в списке. Например, есть команда для быстрого выделения всех найденных дубликатов, для выделения всех файлов, которые относятся к указанным папкам, а также по размеру и по дате создания.
Предпросмотр некоторых графических файлов можно выполнить прямо в Duplicate Finder, правда, список поддерживаемых форматов не очень велик. Например, файлы.jpg и.bmp открылись во встроенном просмотрщике без проблем, а вот.tiff посмотреть не удалось. Для коммерческой программы, предназначенной для поиска дубликатов, стандартная схема "триал-версия на 30 дней" не подходит, поскольку за это время вполне можно успеть выполнить поиск ненужных файлов на всех жестких дисках, и приложение окажется просто ненужным. Поэтому разработчики Duplicate Finder применили другой подход: в оценочном режиме при помощи программы можно переместить, скопировать или удалить до 50 файлов, общий размер которых не может превышать 2 Мб. Впрочем, ничто не мешает вам удалять дубликаты, найденные при помощи Duplicate Finder, из файлового менеджера, но это не очень удобно. Хотя, если вы выберете этот, в общем-то, не очень честный способ, то имейте в виду, что в меню Action есть удобная команда Copy File Path To Clipboard, которая дублируется сочетанием клавиш CTRL+W. При выполнении этой команды в буфер обмена копируется путь к выделенному файлу. Остается только вставить его в командную строку файлового менеджера, и вы быстро окажетесь в нужной папке.
Разработчик: Александр РословРазмер дистрибутива: 3,9 Мб
Распространение: бесплатно
Интерфейс: русский Бесплатная программа DupKiller вполне может дать фору многим коммерческим аналогам. Утилита имеет достаточно удобный и, к тому же, русский интерфейс и может похвастаться гибкими настройками поиска дубликатов. Кроме стандартных возможностей сравнения файлов по названию, размеру, дате создания и типу тут можно найти интересную возможность сравнения по содержимому. При этом, пользователь может определить, откуда нужно начинать сравнивать файлы – с начала или с конца, а также указать, при каком проценте "похожести" их можно считать одинаковыми. Также стоит обратить внимание на возможность поиска файлов с похожими названиями. Выбрав эту функцию, можно определить, насколько файлы должны отличаться по названию, чтобы программа восприняла их как дубликаты.
Исключения тоже гибко настраиваются: можно указать минимальный и максимальный размер файлов для поиска, указать допустимые атрибуты для файлов и папок, а также расширения файлов и папки, которые должны быть исключены из поиска. DupKiller может искать дубликаты не только на жестких дисках, но и на виртуальных, RAM- и CD/DVD-дисках. Очень удобно, что для каждого носителя выводится его общий размер, а также количество свободного места в гигабайтах и процентах. После удаления ненужных файлов вы сможете сравнить результаты и оценить, насколько программа оказалась полезной. С ее помощью вы также можете определить, какие файлы уже были скопированы на DVD, и потому могут быть безболезненно удалены с винчестера. Во время сканирования программа ведет подробный лог операций и сообщает, какое действие выполняет в данный момент. После завершения операции выводится окно с сообщением о том, сколько времени было потрачено на поиск, сколько найдено повторяющихся файлов, и какой размер они занимают на жестком диске.
Список найденных дубликатов достаточно нагляден: файлы разбиваются на группы, которые визуально отделены друг от друга. Щелчок по файлу открывает окошко предварительного просмотра. Просмотр доступен для многих графических файлов, а также для всех текстовых. А подключив плагин, который входит в поставку DupKiller, но по умолчанию выключен, можно, не покидая программу, выполнять прослушивание аудиофайлов.
Возможности работы со списком дубликатов тоже на высоте: есть кнопки для быстрого удаления выделенных и помеченных файлов, автоматическое выделение файлов по ряду признаков. Параметры удаления настраиваются отдельно – можно переносить файлы в «Корзину» или удалять их безвозвратно.
Разработчик: Reasonable SoftwareРазмер дистрибутива: 1,8 Мб
Распространение: shareware
Интерфейс: английский NoClone – это, пожалуй, самая известная программа для поиска дубликатов, и ее популярность вполне объяснима. Ее не очень симпатичный внешний вид с лихвой компенсируется большим числом функций. Программа может выполнять побайтовое сравнение файлов, находить одинаковые файлы MP3 по ID3-тегам, а также производить поиск в почте на предмет одинаковых писем. При помощи NoClone можно находить не только повторяющиеся файлы, но и делать выборку по определенному критерию, например, выводить список всех файлов, размер которых превышает 500 Мб, или всех файлов, которые были изменены в течение указанного промежутка времени.
Если вы регулярно делаете резервное копирование, а также выполняете синхронизацию данных между двумя компьютерами, у вас неизменно скапливается большое число версий одних и тех же файлов. Благодаря функции поиска похожих файлов (Similar Files), NoClone позволяет найти и удалить их. В настройках программы можно определить, на сколько процентов файлы должны быть похожи, чтобы NoClone показала их в списке дубликатов. Список с найденными дубликатами достаточно нагляден: в нем можно увидеть название, размер, расположение и дату файла. Очень продуманна функция предварительного просмотра изображений – если в других программах картинки показываются в небольшом всплывающем окошке, которое появляется при выборе графического файла в списке, тут есть специальная панель предпросмотра. На ней можно отобразить несколько файлов одновременно.
Разобраться со списком дубликатов поможет инструмент Smart Marker. C его помощью можно выделить найденные файлы по таким критериям, как размер, дата, название, количество символов в имени, расположение. Кроме этого, есть специальные флажки "оставлять как минимум один невыделенный файл в группе" и "выделить файлы в каждой группе".
Еще одна особенность NoClone обнаруживается, когда дело доходит до удаления файлов. Кроме стандартных способов удаления – помещения дубликатов в корзину и полного удаления – в программе есть еще один интересный вариант: замена файла NTFS-ссылкой. Иными словами, программа оставляет на жестком диске только один файл, а вместо всех копий создает ссылки, которые ведут на него. Это может быть очень полезно, когда найденные при помощи NoClone дубликаты используются другими приложениями, например, если речь идет о библиотеке виртуальных дисков в программе Alcohol. Если вы удалите файл, то при запуске таких приложений можете получать сообщения об ошибках. Если же будет создана NTFS-ссылка, программа будет "видеть" файл по старому адресу, а фактически его там не будет.
Разработчик: Marcus Kleinehagenbrock
Размер дистрибутива: 650 Кб
Распространение: бесплатно
Интерфейс: английский
CloneSpy – это компактная бесплатная утилита для поиска дубликатов файлов со множеством интересных решений, к которым вполне могут присмотреться создатели многих коммерческих программ.
Во-первых, тут очень удобное окно для добавления папок в область поиска. В большинстве программ для добавления каждой новой директории приходится по новой вызывать окно со списком папок и проделывать путешествие к нужному элементу, начиная с "Моего компьютера".
В CloneSpy все гораздо удобнее: есть специальное окошко для добавления папок, которое разделено на две части: в левой вы выбираете нужную директорию, затем нажимаете кнопку Add Selected Folder, и директория добавляется в список папок, которые будут сканироваться. Повторять эти действия можно сколько угодно раз, не закрывая окна добавления папки. А список выбранных папок можно сохранять для дальнейшего использования и, при необходимости, подгружать в программу.
Следующая особенность – вывод результатов поиска по мере обнаружения дубликатов. В других программах, чтобы увидеть повторяющиеся файлы, как правило, приходится ждать конца сканирования, которое, в зависимости от того, насколько широка область поиска, может затянуться и на всю ночь. Тут же результаты можно просмотреть мгновенно – по мере поиска программа открывает отдельные окна для каждой группы повторяющихся файлов. В таком окне сразу же можно запустить файл, открыть папку, в которой он находится в «Проводнике», отметить файлы вручную или, по ряду критериев (дата, количество символов в названии, длина пути к файлу), удалить или пропустить и перейти к следующей группе дубликатов.
Работу с программой несколько омрачает отсутствие возможности предварительного просмотра изображений – каждый раз запускать программу для просмотра графики очень неудобно. Если вы выполняете сканирование большой области, то вывод результатов в отдельном окне для каждой группы файлов вряд ли будет удобен. Поэтому в этом случае перед началом сканирования стоит заглянуть на вкладку Report настроек программы и изменить параметры вывода результатов. Правда, выбрав вариант отображения результатов в виде единого списка, вы не сможете работать с дубликатами до завершения сканирования.