Что такое дубликат файла:
Это копия какого либо файла, находящегося на компьютере в абсолютно другой директории, или же диске, папке и имеет то же название что и оригинальный файл, вес, а также расширение.
Дубликаты файлов практически есть на каждом персональном компьютере, даже если вы не делали копию, (дубликат) ваших файлов, (с целью каких либо сбоев в системе) , они всё равно будут на вашем компьютере.
Откуда берутся дубликаты файлов:
Например вы с интернета скачали два альбома песен одного и того же исполнителя, в основном композиции песен в сборниках повторяются, т.е. одинаковые, так же и с фотографиями — в разных папках одинаковые фото, со временем работы на компьютере этих дубликатов файлов становиться всё больше и больше соответственно они занимают много место на жестких дисках вашего компьютера или флешке, также это приводит к торможению работы системы вашего ПК.
По этому их необходимо периодически удалять. Удалив дубликаты файлов можно значительно увеличить свободное место на жестких дисках вашего ПК — Скачать данную программу можно по этой ссылке. Программа на русском языке и имеет интуитивно понятный интерфейс, так что разобраться в программе будет не так уж и сложно.
Установка программы:
Распаковываем архив, жмём на установочный файл программы, в открывшемся окне программы жмём «NEXT»
В следующем окне соглашаемся с лицензией «I accept the agreement» жмём "NEXT"
После чего ставим галочку "Create a desktor icon" создать ярлык на рабочем столе,жмём «Next»
Настройка программы:
Запускаем программу и в открывшемся окне слева выбираем нужный нам жёсткий диск или внешний носитель, рекомендую выбрать все диски для сканирования на дубликаты.
В центр окна выбираем те типы файлов, которые будет искать программа на ПК. Есть два варианта поиска. «Среди файлов всех типов» и «Среди только этих типов файлов„.
Рекомендую выбрать второй “Среди только этих типов файлов» для того чтобы избежать удаление нужных файлов, которые используются системой. Также вы можете убрать галочку с какого либо раздела, если не хотите его сканировать на дубликаты файлов. после выбора нужных настроек жмём «Далее».
В следующем окне будут настройки «игнорировать файлы размером меньше 1 МБ». Также можете выбрать настройку для «игнорировать файлы размер которых больше 1 ГБ».Созданные значения в программе вы также можете изменить на свои. Я поставлю галочки в обоих пунктах. Жмём «Далее».
В следующем шаге можете выбрать настройки поиска дубликатов, игнорируя имя и дату создания файла. По умолчанию, в программе стоит галочка на пункте "игнорирования даты создания файла".
Можете выбрать оба пункта, тогда программа сделает более широкое сканирование выбранных жёстких дисков. Выбираем нужные настройки и жмём «Далее».
В следующем окне выбираем что делать с найденными дубликатами. В программе по умолчанию установлено удаление в корзину, для того чтобы вы смогли восстановить те файлы, которые по вашему мнению, были удалены по ошибке.
Во втором пункте восстановление файлов будет происходить уже из созданного архива. В третьем пункте всё понятно, файлы с компьютера удаляются безвозвратно. Выбираем нужные настройки и жмём «Поиск».
Поиск дубликатов файлов:
Программа начнёт поиск дублирующих файлов. Сканирование жёстких дисков проходит в 3 этапа:
1. Программа определяет количество папок;
2. После этого программа находит те папки, которые содержат типы файлов, которые вы выбрали в настройках для поиска, затем проверяется дата и имя создания файла;
3. После чего производится полная проверка жёстких дисков и внешних носителей.
По завершению поиска откроется окно, с результатом сканирования программы на дубли. У меня на компьютере программа нашла 71 дубль файла, размером 635,88. В окне программы представлено имя файла, его местонахождение на диске, размер файла, и дата последнего изменения.
Далее жмём на кнопку "Выбрать" внизу окна и выбираем наиболее подходящий пункт для удаления дубликатов файлов. Я выбрал «Выбрать все дубликаты в каждой группе» далее жмём "Удалить выбранные файлы" и подтверждаем в открывшемся окне кнопкой ОК.
Также вы можете отметить файлы вручную, поставив галочку напротив выбранных файлов, после чего нажать на соответствующую кнопку удаления. Все дубликаты файлов которые вы отметили будут удалены, в ту директорию в которую ранее вы указали для их удаления, (в нашем случае это корзина).
После чего закрываем данную программу. Auslogics Duplicate File Finder предназначена для поиска дубликатов файлов на жёстких дисках и внешних носителях. На этом я буду заканчивать данный пост, надеюсь получился полезный. Всем ПОКА!!!
С Уважением,
Одним из самых быстрых способов забить жесткий диск — хранение дубликатов файлов. Наверняка многие даже не подозревают об их существовании… они могут иметь разное происхождение: случайные копии, множество одинаковых загрузок и так далее. Одно можно сказать точно — они действительно могут создавать вам некоторые проблемы.
Множество дубликатов создаются из-за необходимости держать файл в «безопасности»… например перед редактирование документа я мог сделать копию на всякий случай, а потом забыть… или у меня уже есть такой документ, а я его еще раз скачал из почты. К сожалению таких дублей может быть очень много и получается что вы забиваете свободное место бесполезной информацией.
С помощью этих инструментов вы можете вычислить и удалить дубликаты файлов за считанные минуты и освободить много ценного места на жестком диске. Я буду рассматривать только бесплатные утилиты, поэтому вы ничего не теряете!
Поиск дубликатов файлов. Обзор лучших инструментов
Эта утилита наверное мой фаворит в инструментах для поиска и удаления дубликатов, потому что имеет массу замечательных возможностей: Она является кросс платформенной, полностью бесплатная, а так же имеет продвинутый алгоритм меток и отбора.
Что такое не явные дубли? Несколько одинаковых файла могут иметь разное имя. Например у вас на компьютере может быть два файла: пример-файла.avi и пример файла(1).avi — утилитка это прекрасно понимает и тоже может пометить их как дубликат.
Кстати утилита имеет и другие издания: Music Edition и Picture Edition, оптимизированные для поиска дублей графических и аудио файлах — даже если они записаны в разных форматах. Это очень важно, ведь именно аудио и графические файлы наиболее часто становятся дублями.
Duplicate Files Finder представляет собой приложение, которое осуществляет поиск дублированных файлов (которые имеют одинаковое содержание, но не обязательно с таким же именем) и позволяет удалить пользователю ненужные файлы.
Duplicate Files Finder может находить только точные дубликаты. Принцип ее работы — перебор всех файлов на компьютере по размеру и сравнение их по содержанию. С одной стороны это логично, но это совсем печально для видео и графики (ведь они в зависимости от алгоритма сжатия могут иметь разный размер) , но для всего остального программа просто отличная.
Благодаря такому алгоритму сравнения Duplicate Files Finder работает гораздо быстрее своих конкурентов.
AllDup является мощным инструментов для поиска дубликатов созданный одним человеком, Michael Thummerer. Утилита имеет ряд настроек для поиска дублей из: имени файла, расширения и типа данных, даты создания и изменения и еще много разных параметров.
AllDup имеет много полезных функций и большую гибкость в условиях поиска дубликатов, однако за функционал нужно заплатить. Интерфейс тут совсем не дружелюбный и это может загнать неуверенного пользователя в тупик. Однако если вы сможете разобраться в программе, то это приложение будет хорошим инструментом для поиска повторяющихся файлов.
Duplicate Cleaner требует тонкой ручной настройки, прежде чем вы сможете использовать функционал данной программы на все сто процентов.
При ручной настройке вы можете выбрать в какой папке нужно найти дубли, а не сканировать весь компьютер как предлагают нам некоторые другие программы. В итоге вы можете эти дубли удалить, переместить их все в отдельную папку или вместо них создать ярлыки на единственный нужный файл. В целом впечатления положительные — так что рекомендую.
Если вы пользователь Windows, и хотите избавиться от бесконечных копий изображений, то SimilarImages будет вам как никогда кстати. Изображения на мой взгляд самый частый источник дублированного контента на компьютере. Я например знаю что у меня есть куча дублирующихся фотографий в разных папках… а учитывая их количество разбираться с ними вручную у меня нет никакого желания.
Программа имеет гибкие настройки и может обнаруживать неточные дубликаты — это особенно актуально из-за присутствия артефактов появившимся в процессе сжатия изображения.
Самое замечательное в SimilarImages — она показывает вам два изображения когда находит дубли, и вы можете сделать вывод — оставить их или удалить дубль.
Заключение
Все как в реальной жизни, когда ненужное барахло создает ужасный беспорядок в вашем доме, так и дубликаты файлов могут накапливаться на вашем жестком диске. Такие файлы очень трудно удалить, потому что вы о нем забыли, а обычные программы для очистки системы не найдут их — так как они обосновалить на винчестере на вполне законных основаниях.
Используйте программы которые я вам перечислил для поиска дубликатов файлов чтобы освободить место на вашем жестком диске. Если вы знаете о других утилитах — поделитесь с нами в комментариях.
Вконтакте
Доброго времени суток.
Статистика вещь неумолимая - у многих пользователей на жестких дисках лежат, порой, десятки копий одного и того же файла (например, картинки, или музыкального трека). Каждая из таких копий, разумеется, отнимает место на винчестере. А если диск ваш уже «забит» под завязку - то таких копий может быть достаточно много!
Чистить дубликаты файлов вручную - вещь не благодарная, именно поэтому, я хочу собрать в этой статье программы для поиска и удаления дубликатов файлов (причем, даже тех, которые отличаются и по формату файла, и по размеру друг от друга - а это довольно сложная задача!). Итак…
Список программ для поиска дубликатов
1. Универсальные (для любых файлов)
Осуществляют поиск одинаковых файлов по их размеру (контрольным суммам).
Под универсальными программами, я понимаю, те, которые годятся для поиска и удаления дублей любых типов файлов: музыки, фильмов, картинок и пр. (ниже в статье для каждого типа будет приведены «свои» более точные утилиты). Работают они все в большинстве по одному типу: они просто сравнивают размеры файлов (и их контрольную сумму), если есть среди всех файлов одинаковые по этой характеристике - показывают вам!
Т.е. благодаря ним можно быстро найти на диске полные копии (т.е. один в один) файлов. Кстати, так же отмечу, что данные утилиты работают быстрее, чем те, которые специализированы для конкретного типа файлов (например, поиска картинок).
DupKiller
Эту программу я поставил на первое место по ряду причин:
- поддерживает просто огромное число разнообразных форматов, по которым она может проводить поиск;
- высокая скорость работы;
- бесплатная и с поддержкой русского языка;
- очень гибкая настройка поиска дублей (поиск по названию, размеру, типу, дате, содержимому (ограниченно)).
Duplicate Finder
Эта утилита, помимо поиска копий, еще и сортирует их так, как вам вздумается (что очень удобно, когда копий находится неимоверное количество!). Так же к возможностям поиска добавьте побайтовое сравнение, сверка контрольных сумм, удаление файлов с нулевым размером (и пустых папок тоже). В общем-то, с поиском дублей эта программа справляет довольно неплохо (и быстро, и качественно!).
Немного не комфортно будут себя чувствовать те пользователи, которые плохо знакомы с английским: русского в программе нет (возможно после будет добавлен).
Glary Utilites
Вообще, это не одна утилита, а целый сборник: поможет удалить «мусорные» файлы, задать оптимальные настройки в Windows, дефрагментировать и очистить жесткий диск и т.д. В том числе, в этом сборнике есть утилита для поиска дублей. Работает она относительно не плохо, поэтому я и порекомендую этот сборник (как один из самых удобных и универсальных - что называется на все случаи жизни!) еще раз на страницах сайта.
2. Программы поиска дубликатов музыки
Данные утилиты пригодятся всем меломанам, у которых на диске скопилась порядочная коллекция музыки. Рисую довольно типичную ситуацию: скачиваете различные сборники музыки (100 лучших песен октября, ноября и пр.), часть композиций в них повторяется. Не удивительно, что, накопив музыки на 100 ГБ (к примеру), 10-20ГБ - могут быть копиями. Причем, если бы размер этих файлов в разных сборниках был одинаковый - то их бы можно было бы удалить первой категорией программ (см. выше в статье), но так как это не так - то эти дубли не находятся ничем, кроме вашего «слуха» и специальных утилит (которые представлены ниже).
M usic Duplicate Remover
Результат работы утилиты.
Эта программа отличается от остальных, прежде всего, свои быстрым поиском. Она ищет повторные треки по их ID3 тегам и по звуку. Т.е. она как бы за вас прослушает композицию, запомнит ее, а затем сравнит ее с другими (таким образом, проделывает огромный объем работы!).
На скриншоте выше представлен ее результат работы. Свои найденные копии она представит перед вами в виде небольшой таблички, в которой к каждому треку будет приписана цифра в процентах схожести. В общем, достаточно удобно!
A
Найденные повторные MP3 файлы…
Эта утилита схожа с вышеприведенной, но у нее есть один несомненный плюс: наличие удобнейшего мастера, который будет Вас вести по шагам! Т.е. человек, впервые запустивший эту программу, легко разберется куда нажимать и что делать.
Например, в своих 5000 треках за пару часов, мне удалось найти и удалить несколько сотен копий. Пример работы утилиты представлен на скрине выше.
3. Для поиска копий картинок, изображений
Если анализировать популярность тех или иных файлов, то картинки, пожалуй, не отстанут от музыки (а для некоторых пользователей и перегонят!). Без картинок вообще сложно представить работу за ПК (и другими устройствами)! Но поиск картинок с одинаковым изображением на них - дело довольно трудное (и долгое). И, должен признаться, программ этого рода сравнительно не много…
ImageDupeless
Сравнительно небольшая утилита с довольно неплохими показателями поиска и устранения дублей картинок. Программа сканирует все изображения в папке, а затем сравнивает их между собой. В результате вы увидите список картинок, которые похожи друг на друга и сможете сделать вывод о том, какую из них оставить, а какую удалить. Очень полезно, иногда, прореживать свои архивы фото.
Пример работы ImageDupeless
Кстати, вот небольшой пример личного испытания:
- подопытные файлы: 8997 файлов в 95 каталогах, 785Мб (архив картинок на флешке (USB 2.0) - gif и jpg форматы)
- галерея заняла: 71.4Мб
- время создания: 26 мин. 54 сек.
- время сравнения и вывода результатов: 6 мин. 31 сек.
- результат: 961 похожее изображение в 219 группах.
Image Comparer
Об этой программе я уже упоминал на страницах сайта. Представляет собой так же небольшую программу, но с довольно хорошими алгоритмами сканирования картинок. Есть пошаговый мастер, запускающийся при первом открытии утилиты, который проведет через все «тернии» первой настройки программы для поиска дублей.
Кстати, чуть ниже приведен скриншот работы утилиты: в отчетах вы можете просмотреть даже мелкие детали, где картинки несколько различаются. В общем-то, удобно!
4. Для поиска дублей фильмов, видео-роликов
Ну и последний популярный тип файлов, на котором хотелось бы остановиться - это видео (фильмы, ролики и пр.). Если когда-то раньше, обладая 30-50 ГБ диском, знал в какой папке где и какой фильм сколько отнимает (и они все были наперечет), то, например, сейчас (когда диски стали 2000-3000 и более ГБ) - часто встречаются одни и те же ролики и фильмы, но в разном качестве (что может отнять достаточно много места на жестком диске).
Большинству пользователей (да, в общем-то и мне 🙂), такое положение дел не нужно: просто отнимает место на винчестере. Благодаря парочке утилит ниже, вы сможете очистить диск от одинаковых видео…
Проведение эффективной генеральной уборки на дисковом пространстве компьютера, наряду с использованием программ для автоматической очистки Windows, требует еще выполнения ручной работы по удалению ненужных файлов и файлов-дубликатов. Для отслеживания ненужных файлов предназначены специальные программы – анализаторы дискового пространства, они помогают отфильтровать содержимое дисков компьютера по определенным критериям (в частности, по весу), чтобы пользователь мог принять решение об удалении файлов или их оставлении. Для поиска дубликатов файлов также существует специальный софт – либо в виде отдельных программ или небольших утилит, либо в составе комплексного ПО для чистки и оптимизации Windows. Ниже рассмотрим пятерку программ для поиска дубликатов файлов. В пятерку вошли полностью бесплатные программы с поддержкой русского языка.
При проведении поиска дубликатов файлов на системном диске С лучше указывать не весь раздел целиком, а лишь отдельные папки, где хранятся пользовательские файлы. Дубликаты, обнаруженные в рабочих папках Windows, удалять нельзя. При обнаружении на диске С отдельных увесистых папок или файлов с незнакомыми названиями рекомендуется получить о них справку в Интернете.
1. AllDup
Программа AllDup оснащена множеством различных опций для тонкой настройки поиска дубликатов файлов. В числе настраиваемых опций – выбор метода сравнения, критериев поиска, приоритета проверки дубликатов, задействование исключающих фильтров, включение содержимого архивных файлов и пр. Предусматривается даже смена тем оформления и отдельных настроек интерфейса. Программа хорошая, правда, с несколько непродуманным интерфейсом. На ее панели инструментов все вкладки – хоть основных операций, хоть дополнительных функций – значатся как равнозначные. И чтобы помочь пользователю, впервые запустившему AllDup, освоить специфику программы, ее создатели оснастили интерфейс плавающим виджетом в виде краткого руководства, какой шаг за каким нужно сделать. Во вкладке «Исходные папки» указывается область поиска – разделы диска, подсоединяемые устройства или отдельные пользовательские папки на системном диске С.
Далее во вкладке «Метод поиска» устанавливаются критерии поиска. Здесь поиск дубликатов можно конкретизировать и к предустановленному критерию поиска по именам файлов добавить расширение, размер, содержимое и пр.
Результаты поиска дубликатов можно сортировать по размеру, пути, дате изменения файлов и т.п. Обнаруженные файлы можно удалять, открывать их расположение в проводнике Windows, применять прочие действия, предусматриваемые программой.
Чтобы вернуться к анализу результатов поиска дубликатов, выполненных AllDup, позднее, но не ждать завершения сканирования, текущие результаты можно сохранить в файл формата программы или экспортировать в файлы TXT и CSV.
У программы AllDup есть портативная версия, не требующая установки в систему.
2. Duplicate Cleaner
Еще одна функциональная программа для гибко настраиваемого поиска дубликатов файлов – Duplicate Cleaner. Программа Duplicate Cleaner существует в двух редакциях – в платной Pro и бесплатной Free. Хоть последняя и ограничена недоступностью некоторых функций, ее возможностей будет достаточно для эффективного поиска дубликатов. Duplicate Cleaner Free позволяет задавать критерии поиска по именам, содержанию, размеру, дате создания файлов. Предусматриваются дополнительные критерии поиска по данным аудиофайлов, а также фильтрация по типам контента и расширениям файлов. Все эти моменты настраиваются в первой вкладке программы «Критерии поиска».
Во второй вкладке программы – «Сканировать путь» – выбирается область поиска.
В окне результатов поиска дубликаты можно сортировать, удалять, открывать их расположение в проводнике, а также применять к ним прочие опции программы.
Результаты поиска Duplicate Cleaner могут быть экспортированы в файл формата табличных данных CSV. Экспорт данных осуществляется как для всего перечня дубликатов, так и для только помеченных пользователем файлов. Из преимуществ Duplicate Cleaner – удобный интерфейс и продуманная организация.
3. DupeGuru
DupeGuru – это простейший поисковик дубликатов файлов для тех, у кого нет времени или желания осваивать все тонкости функциональных узкоспециализированных программ типа рассмотренных выше. Внизу небольшого окошка программы выбирается область поиска и запускается сканирование.
Результаты поиска дубликатов могут быть отсортированы по пути размещения и размеру файлов. Контекстное меню результатов поиска DupeGuru содержит лишь необходимые для работы с найденными дубликатами операции.
Результаты поиска сохраняются в файл программы или экспортируются в HTML.
DupeGuru – кроссплатформенная программа, но под Windows адаптированы только ее старые версии. Предлагаемый на официальном сайте инсталлятор программы для Windows 7 подойдет также для версий системы 8.1 и 10.
4. CCleaner
На одном из этапов своего совершенствования популярнейший чистильщик для Windows CCleaner получил функцию поиска дубликатов файлов. Воспользоваться этой функцией можно в разделе «Сервис». Для поиска дубликатов доступны критерии поиска по именам, дате создания, содержимому файлов, их размеру.
Как и предыдущий участник обзора, программа CCleaner в среде результатов поиска дубликатов не особо богата функционалом, но базовые операции присутствуют. Это, в частности, сортировка результатов поиска и удаление файлов.
5. Glary Utilities 5
Комплексная программа для чистки и оптимизации Windows Glary Utilities 5 в числе арсенала содержит утилиту для поиска дубликатов файлов. Эту же утилиту при желании с официального сайта программы можно скачать отдельно, если не требуется всей мощи программного пакета.
Поисковик дубликатов в составе Glary Utilities 5 простенький, но удобный и настраиваемый. Сканирование дубликатов можно запустить сразу, выбрав лишь область поиска – разделы диска, съемные устройства или отдельные папки. А можно конкретизировать поиск, нажав кнопку «Опции».
В опциях настраиваются критерии поиска дубликатов – по именам, по размеру, по времени создания файлов. В отдельных случаях проведения тщательной чистки дискового пространства можно сменить предустановленный выбор поиска лишь среди распространенных типов файлов на сканирование всех типов.
Результаты поиска предусматривают только необходимые операции для работы с дубликатами, в частности, удаление и открытие пути размещения в проводнике Windows.
Для удобства пользователя найденные дубликаты Glary Utilities 5 каталогизирует по типам контента – документам, картинкам, видео, программам и т.п. По каждому типу отображается общий вес найденных файлов.
Удаление одинаковых файлов (копий одного и того же файла) или папок может освободить свободное дисковое пространство и уменьшает ненужный мусор в системе, что благоприятно отражается на быстродействии системы. Иногда дубликаты создаются самим пользователем (например, одни и те же фотографии копируются в разные папки, находящиеся внутри одного физического диска), в некоторых случаях они остаются после использования различного программного обеспечения. Функцию поиска ненужных копий выполняют множество приложений, большинство которых распространяются по статусу free (бесплатно ). Опишем работу нескольких таких приложений.
Удаление дубликатов с помощью Total Commander
Используем Dupeguru
Данное ПО разработано исключительно для сканирования системы на наличие копий и не выполняет иные функции.
AllDup для определения дубликатов
Дизайн программы выполнен в красивом и удобном для использования стиле. Сразу же после запуска появляется окно с кратким руководством по поиску дубликатов. Можно искать по всему физическому диску целиком, отметив галочкой нужные локальные диски.
Или добавить отдельные папки, нажав на стрелочку возле кнопки «Исходные папки
» и выбрав в выпадающем списке «Добавить папки
».
Давайте попробуем найти дубликаты в папке Games в локальном диске «С:\»
Активируем вкладку «Метод поиска
», настраиваем критерии. По умолчанию активен параметр поиска дубликатов только по схожим именам
, при необходимости отмечаем галочкой нужные настройки
. Желательно включить поиск и по расширениям
, иначе ПО может показать файлы со схожими именами, даже если они не являются копиями друг друга.
После, нажимаем кнопку начало поиска
.
После завершения откроется новое окно с результатами , в котором отмечаем галочками ненужные файлы , щелкаем правой кнопкой мышки по файлу , который предполагается очистить от дубликатов (открываем контекстное меню) и выбираем «Удалить все остальные файлы из этой группы навсегда », чтобы удалить копии. При этом сам оригинал останется не тронутым, удалятся только дубликаты.
Как использовать DuplicateCleaner Free
Очень продуманное приложение для поиска и удаления дубликатов на компьютере. При этом можно выполнять поиск
всех файлов в обычном режиме, искать копии изображений или музыки, или одинаковых папок.
Запускаем приложение
. Первым делом настраиваем критерии поиска, для этого в разделе «Дополнительные опции
» отмечаем настройку «С тем же именем
» и переходим во вкладку «Сканировать путь
»
Выбираем папку
, нажимаем кнопку добавления
выбранной папки в включенные пути и жмем кнопку «Сканировать
».
Дожидаемся окончания сканирования, в котором будет отображена статистика
обнаруженных дубликатов в отдельном окне. Закрываем окно.
Во вкладке «Дубликаты Файлов
» списком отображаются одинаковые
файлы, отмечаем ненужные и нажимаем меню «Вид
», выбираем пункт «Удаления файлов
»
В открывшемся окне нажимаем «Удалить файл(ы) ». При этом желательно включить удаление в Корзину , чтобы можно было восстановить нужные файлы.
