Дубликаты изображений. Поиск и удаление дубликатов фотографий

Наверняка у любого из нас на диске со временем скапливаются файлы-дубликаты. Файлы в «Загрузках», которые вы скачали несколько раз, одинаковые фотографии и музыкальные композиции, лежащие в таких недрах, что до них просто не доходят руки. Избавиться от всего этого можно и вручную, но куда быстрее за вас сработают специальные утилиты, ищущие одинаковые файлы.

Очень популярный «чистильщик», который, наверное, установлен у каждого. Да, он не только искать системный мусор и очищать историю и cookies браузеров, но и убирать дубликаты файлов.

Платформы: Windows, Mac.

Цена: бесплатно, 24,95 доллара за расширенную версию.

Программа ищет файлы как с одинаковыми или похожими названиями, так и с идентичным содержимым. Хорошо работает с музыкой и может отыскивать одинаковые музыкальные файлы, даже если у них разные теги. Кроме того, dupeGuru умеет сравнивать изображения, чтобы найти не только одинаковые, но и просто похожие фотографии.

Разрабатывается для Mac и Linux. Версия для Windows больше не поддерживается разработчиком, но её можно загрузить с официального сайта - она полностью работоспособна.

Платформы: Windows, Mac, Linux.

Продвинутое приложение для поиска файлов, которое, помимо прочего, может удалять дубликаты. SearchMyFiles обладает гибкими фильтрами, так что вы можете настроить поисковую выдачу так, как вам угодно.

Платформы: Windows.

Популярное приложение для Mac, которое ищет одинаковые или похожие файлы и показывает, в чём разница между ними. Копии в «Фото», в фонотеке iTunes - мимо Gemini 2 не пройдёт ничего. Разработчиками заявлен умный механизм поиска дубликатов, который запоминает, какие файлы вы оставляете, а что решаете удалить.

Платформы: Mac.

Хотя AllDup бесплатна, она умеет немало. Ищет, удаляет, копирует и перемещает дубликаты файлов, в том числе одинаковые аудиозаписи с разными тегами. Присутствует гибкая настройка поиска. С помощью встроенного просмотрщика можно изучить файлы и выбрать, что именно удалять.

Платформы: Windows.

Duplicate File Finder быстро и эффективно отыскивает файлы-копии. Предоставляет интересную возможность поиска дубликатов не только на жёстком диске, но и в локальной сети. Может работать с изображениями и музыкой, сравнивая как теги, так и содержимое. Функция предпросмотра поможет разобраться, что действительно удалить, а что оставить. К сожалению, в бесплатной версии довольно много опций недоступно.

Платформы: Windows.

Цена: бесплатно, 29,95 доллара за расширенную версию.

Универсальный файловый менеджер, который может сделать с вашими файлами что угодно. В том числе и найти файлы-дубликаты. Включить опцию поиска копий можно на вкладке с параметрами поиска, там же, где указываются другие атрибуты искомых файлов.

Платформы: Windows.

DupeGuru выглядит наиболее привлекательным вариантом. Он бесплатен, при этом предлагает все необходимые функции для избавления вашего диска от скопившегося барахла. Огорчает лишь тот факт, что разработка версии для Windows остановлена. Пользователям Windows, не желающим платить за коммерческие альтернативы, больше подойдёт AllDup. А CCleaner и Total Commander - это более универсальные и распространённые решения, которые, наверное, уже установлены у каждого.

В этом материале речь пойдёт об инструментах выявления дублирующихся фото. В частности, сегодня в нашем обзоре побывают сразу шесть программ для поиска дубликатов фотографий на компьютере под управлением Windows. Мы сравним и выберем среди них лучшие и самые быстрые.

Причин востребованности таких программ может быть несколько: с одной стороны, ваша коллекция могла разрастись настолько, что дубликаты уже занимают немало места. С другой, ещё чаще просто нужен инструмент, который найдёт одинаковые или похожие фотографии, избавив вас от необходимости просматривать эти изображения самостоятельно.

В нашей подборке нашлось место для шести интересных программ, четыре из которых распространяются бесплатно. Далее мы расскажем о каждой из них и поможем вам быстрее сориентироваться в интерфейсе, если вы решите попробовать эти приложения.

А в заключительной части вас ждёт небольшое сравнение всех программ, в котором мы посмотрим, как они справляются с поиском одинаковых картинок при их лёгком видоизменении, а также проверим насколько программы хорошо могут справиться с большим набором фотографий весом в несколько гигабайт.

Image Comparer

Первая программа в нашем обзоре, ищущая дубликаты фото, называется Image Comparer . Её сильные стороны: неплохая функциональность и переведённый на русский язык интерфейс, включая подробную справочную информацию.

Теперь о недостатках. Первый – программа не бесплатная. Впрочем, стоимость лицензии составляет гуманные 350 рублей (хотя на сайте почему-то указана цифра 500). Вдобавок первые 30 дней вы можете использовать Image Comparer бесплатно.

Второй негативный момент заключается в лёгкой запутанности, которая может смутить неопытного пользователя. Например, для того чтобы провести поиск в рамках одной папки (в которую могут быть вложены и другие) вам нужно нажать на кнопку «создать галерею» и выбрать нужный каталог, в котором будет проводиться сканирование.

Далее вам тут же предложат дать имя и сохранить файл создаваемой галереи в любое удобное место (этот файл нужен будет самой программе). Как только это будет сделано, перед вами в виде списка или миниатюр откроется перечень всех изображений в указанной папке и её подпапках:

Кнопки, отмеченные стрелками, запускают поиск дубликатов. Первая кнопка – поиск в рамках одной галереи (выбранной вами папки), вторая кнопка чуть правее – в рамках нескольких галерей. Мы пошли по первому варианту.

Следом программа предложила создать ещё один служебный файл, в котором будут сохраняться результаты, для дальнейшего удобного к ним доступа. Собственно, создание файла для галереи и вот этого файла с результатами поиска, как раз и может немного запутать неопытного юзера. Впрочем, далее всё уже просто. Перед вами появятся найденные дубликаты:

Их можно просматривать в виде миниатюр или же, щёлкнув по вкладке «пары изображений» перейти к виду, где фотографии будут уже сравниваться между собой:

Ползунок по центру позволяет регулировать порог схожести изображений. 100% – и перед вами останется только список идеально похожих друг на друга, одинаковых картинок. Более низкие значения отобразят лишь схожие фотографии.

В настройках можно увидеть огромный список форматов от базовых JPG и PNG до более экзотических, с которыми работает программа. Форматы можно добавлять и исключить из поиска. Также можно настроить учёт отражённых и перевёрнутых картинок.

  • Программа Image Comparer . Официальный сайт ;
  • Язык: русский;

VisiPics

Следующая программа – VisiPics. В отличие от рассмотренной выше Image Comparer, VisiPics является бесплатным приложением, также специализирующемся на дубликатах фото. Увы, локализации на русский здесь нет, но расстраиваться по этому поводу точно не стоит: всё очень просто и предельно понятно.

С помощью боковой панельки навигации (мы обвели её в рамку) выберите нужный каталог. Далее нажмите стрелочку со значком «+», чтобы добавить эту папку в список, по которому будет вестись поиск. При желании таким же образом вы можете выбрать ещё несколько папок. Наконец, третьим шагом нажмите кнопку Play, чтобы запустить процесс нахождения дубликатов.

Справа от неё располагается специальный ползунок, где вы можете настраивать уровень «внимательности» программы. В случае установленного по умолчанию базового уровня VisiPics обнаружила для нас лишь две группы дубликатов, одна из которых состояла из трёх изображений, а другая из двух:

Это те изображения, которые программа считает практически идентичными дубликатами. Однако если вы понизите ползунок до уровня Loose, то находится будут и просто похожие друг на друга изображения. В нашем случае при установке Loose вместо Basic приложение нашло ещё четыре (в итоговом тесте ниже – 5) группы дубликатов, а одну из двух уже найденных дополнило ещё одной картинкой:

Дополнительных опций у программы относительно немного. Здесь можно настроить поиск в подпапках (по умолчанию он включён), отображение скрытых папок, учёт фотографий, повёрнутых на 90 градусов. На вкладке loader можно попросить VisiPics игнорировать мелкие файлы или, наоборот, картинки в слишком большом разрешении. Последнее важно для скорости.

  • Программа VisiPics. Официальный сайт ;
  • Язык: английский;
  • Распространение: бесплатно.

Awesome Duplicate Photo Finder

Если вы ищете именно предельно простую программу для качественного поиска дублирующих фото и изображений, в которой было бы элементарно легко разобраться, то обратите внимание на Awesome Duplicate Photo Finder. Интерфейс здесь на английском, но он настолько прост, что разберётся в нём каждый.

С помощью кнопки «+» укажите нужный для поиска каталог или несколько каталогов, после чего нажмите Start Search и по ним начинается поиск. Опция Scan Subdirectories по умолчанию включена и отвечает за поиск в подпапках. Со своими задачами программа справляется, находя как весьма похожие:

Так и чуть более отличающиеся между собой картинки:

В настройках программы вы можете задать соответствие в 100%, если вам нужны исключительно абсолютно одинаковые фотографии.

Самих настроек, как видите, немного. Пожалуй, самое печальное, что работает программа всего с пятью основными форматами: BMP , JPG , PNG , GIF и TIFF. Причём последний по умолчанию не учитывается.

Также есть опции для обеспечения удаления дубликатов напрямую в корзину и отключения всплывающего подтверждения. Ещё программа умеет обновляться автоматически.

    Официальный сайт ;
  • Язык: английский;
  • Распространение: бесплатно.

Similar Images Finder

Приложение Similar Images Finder встречает нас недобрым сообщением на английском о том, что за него нужно заплатить $34. Тем не менее на протяжении 30 дней программа готова поработать бесплатно. Следом появляется окно, предлагающее выбрать каталоги для поиска дубликатов:

Из него же мы узнаём, что Similar Images Finder поддерживает 29 форматов изображений, причём пользователь может выбирать конкретные форматы для поиска или исключать лишние. В списке, помимо прочего, можно наблюдать ico и wbmp.

При нажатии Next вы запустите поиск дубликатов, а когда он будет закончен, нажмите Next ещё раз, чтоб увидеть дополнительные настройки. Регулируя их, вы сможете более тщательно настроить то, что отобразиться в списке результатов. Наконец, нажав Next в третий раз вы наконец-то увидите уже и сам результат:

Перейти к следующей найденной картинке можно нажатием миниатюрной стрелочки в верхнем правом углу. Весь список найденных дубликатов открывается кликом по большой кнопке вверху с адресами текущих файлов.

В свою очередь, нажатие кнопки Next внизу приведёт к завершающему этапу работы. Там программа выведет список того, что, по её мнению, точно является дубликатами и предложит их удалить. На скриншоте выше Similar Images Finder справилась с изображением, куда был добавлен водяной знак, а также изменён контраст гистограммы.

Различая между картинками, программа посчитала на уровне 5,5%. При этом в другом примере, где на вторую картинку нами был добавлен сильный эффект размытия, отличия по версии приложения, почему-то составили всего 1,2%:

Увы, программа, находя реальные дубликаты, по умолчанию показывает и многие совсем непохожие друг на друга изображения, как будто в них есть что-то общее:

  • Программа Similar Images Finder. Официальный сайт ;
  • Язык: английский;
  • Распространение: платно, 30 дней бесплатного использования.

Duplicate Remover Free

Duplicate Remover Free – единственная в нашем обзоре программа, которая сосредоточена всё же не конкретно на дубликатах фотографий, а на поиске дубликатов в целом. Как показывает практика, такие универсальные решения не очень хорошо проявляют себя в задачах, связанных с какой-то более узкой областью.

Однако одной такой программе мы сегодня даём шанс. Как подсказывает слово Free – распространяется она бесплатно. Вторым достоинством приложения является русский язык, а третьим – относительная современность на фоне других программ в этой подборке, многие из которых, к огромному сожалению, не обновлялись уже долгие годы.

Вам следует кликнуть по кнопке «добавить директорию» и выбрать нужные папки. По умолчанию программа в заданном каталоге не нашла для нас вообще ничего, однако, когда вверху вместо «точные дубликаты» мы выбрали пункт «похожие изображения», тут же были найдены четыре группы дубликатов, одна из которых состояла сразу из трёх файлов:

Дополнительных возможностей у приложения совсем немного. В частности, вы можете исключать из поиска файлы до и после определённого размера.

  • Программа Duplicate Remover Free. Официальный сайт ;
  • Язык: русский;
  • Распространение: бесплатно.

AntiDupl

Заключительный участник нашего обзора – программа AntiDupl может приглянуться вам сразу по нескольким причинам. Во-первых, она бесплатная. Во-вторых, у неё русский интерфейс. Последнее, впрочем, не очевидно. Для того чтобы включить русский, откройте меню View и в разделе Language выберете соответствующий пункт:

В отличие от других, эта программа не инсталлируется, а находится в самораспаковывающемся архиве, который извлекает её вместе с необходимыми файлами в отдельную папку.

Чтобы подготовить поиск дубликатов кликните по кнопке с подписью Open и в появившемся окне добавьте нужные каталоги:

Следом можно нажимать Ок, а потом активировать на панели инструментов зелёную кнопку «начать поиск». Используя базовый алгоритм, программа нашла для нас несколько групп дубликатов:

На вкладке «поиск» можно узнать, что AntiDupl поддерживает 13 форматов, среди которых помимо традиционных JPG/PNG, есть ICON, PSD и EXIF . Разумеется, форматы можно выбирать. Ещё в опциях есть проверка на дефекты, блочность и размытость, причём в последних двух случаях можно задавать порог. Есть возможность искать в скрытых и системных каталогах.

  • Программа AntiDupl. Официальный сайт;
  • Язык: русский;
  • Распространение: бесплатно.

При поиске дубликатов часть пользователей интересует именно 100% соответствие, чтобы избавиться от дублей в своей коллекции. Однако нередко возникает и задача найти именно похожие картинки.

И вот здесь огромное пространство для возможных отличий. Этот могут быть разные форматы, разрешения, обрезанные версии одного и того же изображения, добавление рамок и водяных знаков, изменённые цвета и подписи на картинках.

Мы постарались учесть большинство из этих факторов и после всех проб создали в итоге небольшой набор с более чем шестью десятками картинок. В них мы создали девять групп дубликатов. Скажем честно, на истину в последней инстанции наш опыт точно не претендует, но попробовать было интересно. Результаты следующие:

  • Duplicate Remover Free: нашёл лишь 3 группы дубликатов;
  • Similar Images Finder: нашёл 4 группы, но неудобный интерфейс, множество ложных результатов и при этом платность приложения сильно испортили общее впечатление;
  • AntiDupl по умолчанию нашёл 3 типа дубликатов, установка алгоритма SSIM увеличила результат поиска до 5 групп;
  • VisiPics при базовом уровне поиска нашёл лишь 2 группы дубликатов, однако установка ползунка на уровень Loose позволила найти уже 7 групп;
  • Awesome Duplicate Photo Finder нашёл 7 групп дубликатов;
  • Image Comparer также сумел обнаружить 7 групп.

При этом Image Comparer сумел найти изображения, которые пропустили Awesome Duplicate Photo Finder и VisiPics, а те, в свою очередь, восполнили пробелы Image Comparer.

Определяем самую быструю программу для поиска дубликатов фото

В то же время, качество программы ещё зависит и от её скорости. 60+ картинок – это, конечно же, не то, что с чем могут работать пользователи. Поэтому мы провели ещё один тест. На этот раз на скорость. Для этого мы взяли подборку из 4450 самых разных изображений, общий вес которой превысил 2.1 ГБ.

Две программы из этого обзора, увы, в тесте не заняли никакого места. Как выяснилось, Similar Images Finder, за который просят 34 доллара, в бесплатной версии готов зараз обработать не более 200 изображений.

В свою очередь, универсальный поисковик дубликатов Duplicate Remover Free, столкнувшись с каталогом серьёзного размера, более пяти минут интенсивно работал, а потом основательно завис. Остальные программы показали следующее время:

  • AntiDupl: 0:39;
  • Image Comparer: 1:02 (35 секунд на создание галереи и 27 на поиск);
  • VisiPics: 2:37;
  • Awesome Duplicate Photo Finder: 3:17.

В итоге в тесте на скорость в лидеры явно выбились Image Comparer и AntiDupl. На обработку нашего архива у них ушло около или же, в случае AntiDupl, меньше минуты.

Заключение

Подведём итоги. Если вам нужно найти не одинаковые, а именно похожие фотографии, отличающиеся, например, подписью или водяным знаком, то лучше остальных с этой задачей справятся Image Comparer, Awesome Duplicate Photo Finder и VisiPics в режиме работы Loose.

В плане скорости обработки многочисленной коллекции изображений безусловные лидеры AntiDupl и Image Comparer.

Наконец, в плане удобства интерфейса нам понравились Image Comparer и VisiPics, с ходу позволяющие визуально оценить все группы дубликатов. В свою очередь, за наглядность сравнения характеристик отдельных дубликатов мы также отметим AntiDupl.

Большинство программ для очистки и оптимизации Windows обладают встроенными модулями поиска и удаления дубликатов.

Правда, эффективность их представляется несколько сомнительной, поскольку поиск дублирующихся файлов производится не по их содержимому, а по метаданным.

Поэтому для этих целей лучше использовать специализированные утилиты.

Есть программы, которые ищут дубликаты только среди текстовых документов, есть программы, предназначенные для поиска дубликатов фотографий, аудио и даже видео. Сегодня мы бы хотели предложить вашему вниманию пять приложений, основной задачей которых является поиск одинаковых и похожих изображений.

Dup Detector

Простая и эффективная утилита для поиска дубликатов изображений. Поддерживает работу с форматами JPG, BMP, PNG, TIF, PCX, TGA, WMF, EMF и PSP. Возможности Dup Detector включают попиксельное сравнение изображений в пределах одной или нескольких галерей (папок). Отличительной особенностью программы является опция установки процентного диапазона соответствия при поиске.

Из недостатков следует отметить относительно медленную скорость работы. Кроме того при выводе результатов утилита показывает только по два изображения за один раз. Язык интерфейса - .

DupliFinder

Простая и удобная программка для поиска и удаления дубликатов фотографий и прочих изображений. Поиск осуществляется путем сравнения контрольных сумм MD5. В остальном программа похожа на Dup Detector. Поддерживается работа с подкаталогами, вывод процентного соотношения схожести, предпросмотр результатов сравнения. Выбранные дубликаты можно удалить. К недостаткам относятся несколько медленная скорость работы, а также необходимость установки пакета Java. Язык интерфейса - английский.

Similar Images Finder

Легкая программка для поиска одинаковых и похожих изображений различных форматов. SimilarImages поддерживает около 30 форматов, включая JPG, JPEG, BMP, PNG, ICO, CUR, а также менее известные RAS, PGX, WBMP, MNG, PCX, DCX и некоторые другие. Имеется возможность автоматического и ручного удаления дубликатов.

VisiPics

Еще один неплохой инструмент для поиска одинаковых или похожих картинок. Позволяет находить изображения даже с незначительными изменениями. Работает как с отдельными каталогами, так и с целыми разделами. Есть возможность фильтрации по степени схожести. Из форматов поддерживаются JPEG, GIF, PNG, BMP, PCX, TIFF, TGA и RAW. Основной недостаток - несколько неудобный пользовательский интерфейс и отсутствие русского языка.

Image Comparer

Пожалуй, лучшая программа для поиска и удаления дубликатов изображений. Image Comparer имеет удобный и простой интерфейс на русском языке, поддерживает работу со всеми популярными графическими форматами. Сравнение производится по самому содержимому изображения, так называемому цифровому отпечатку. При этом указывается степень схожести в процентах. Найденные дубликаты можно перемещать, копировать или удалять.

Довольно часто на компьютере встречаются одинаковые изображения - не правда ли? И чем больше у вас папок с картинками, тем более вероятно что в них находится большое количество дубликатов. Это не критично, но все же место занимает. Вы будете удивлены сколько места на диске освободится если проверить и удалить все дублированные картинки. Именно этим мы и займемся в нашей сегодняшней статье. Как правило мы копируем с фотоаппарата, телефона, планшета и т.д. целые папки с фотографиями и редко удаляем копии даже если и замечаем их. Почему? Да потому что это хлопотно. Давайте посмотрим как можно автоматизировать процесс поиска одинаковых изображений и их удаления.

Почему нельзя сделать это в ручном режиме? Можно, но заниматься этим вручную - весьма трудоемкое и утомительное занятие. А если у вас тысячи фоток... еще и непродуктивное занятие. Лучше выпить чашечку кофе пока работает программа, чем самому напрягать мозг и думать "видел я эту фотку или нет - это копия?". Да и это практически невозможно. (забегая на перед скажу - после сканирования на моем компьютере программа обнаружила 11 934 одинаковые картинки!!!) Как по мне так лучше пусть "железка работает"... Если Вы такого же мнения - тогда смотрим ниже подробную инструкцию как найти и удалить одинаковые картинки.

Есть несколько программ, которые могут искать дубликаты файлов .

AntiDupl. NET
Duplicate Finder
Duplicate File Detector
Duplicate Cleaner
ImageDupeless
Image Comparer
Duplicate File Remover

Многие программы прекрасно умеют работать с различными файлами и с разными задачами.

Но мы рассмотрим только одну программу - , которая максимально хорошо может справиться с поставленной задачей. Почему именно эта программа? AntiDupl.NET- бесплатная программа с очень мощным функционалом. Она позволяет делать поиск похожих или полностью одинаковых изображений во всех основных графических форматах типа JPEG, GIF, TIFF, BMP, PNG и т.д. Стоит отметить что программа анализирует само содержание графических файлов, что позволяет находить не только полностью идентичные, но и похожие изображения . Программа поддерживает русский интерфейс, есть возможность гибкого управления параметрами поиска а также можно определять некоторые типы дефектов на изображениях. И в то же время программа довольно понятна и я уверен, что у вас не возникнет каких-либо трудностей.

Давайте посмотрим пример поиска и удаления одинаковых изображений

Открываем программу и указываем язык интерфейса

И добавить каталог в котором будут учитываться все картинки во всех внутренних папках. Или же какую-то конкретную папку на ваше усмотрение.

Также можете настроить опции поиска (если необходимо). После чего нажимаем "Начать поиск ".

Запасаемся терпением на несколько минут.

Далее программа в окне результата покажет все "пары" одинаковых картинок и Вы можете начать удалять ненужные копии ваших фото. Есть два варианта - удалить первую или вторую. Можете смотреть в окошках просмотра и определить какую фотографию хотите удалить. Если вы хотите удалить к примеру все первые картинки тогда нужно нажать сочетание клавиш Ctrl + A и нажать в верхней панели кнопку "Удалить первые картинки в выделенных результатах ". После чего все первые картинки попадут в корзину. После удаления всех дубликатов на моем компьютере стало больше места примерно на 4,6Gb. Надеюсь эта статья поможет и вам избавиться от ненужных копий. Успехов!