Программы для поиска дубликатов фотографий. Программы для поиска дубликатов файлов (или как найти одинаковые картинки, фото, документы, аудио и видео в разных папках)

Сколько у Вас фотографий хранится в компьютере? Много? А сколько из общего числа занимают копии фотографий ? У Вас нет копий? Наивные Вы мои.

У меня в фотоальбоме 5624 фотографий хранится. Из них было 251 — дубликаты (точные копии). Зачем они мне? А Вам нужны лишние, абсолютно похожие, занимающие место на диске фотографии? Правильно — нет.

А ведь есть маленькая, удобная, простая, быстрая программа на русском языке, которая находит и управляет одинаковыми изображениями. А как находит? Да очень отлично находит, даже с разным названием, ужатые, изменённые, перевёрнутые. Вам нужна она?

Называется программа для поиска копий (дубликатов) фотографий (любых изображений) — Image Comparer . Она очень проста в применении — убедитесь сами…

Копии фотографий — программа Image Comparer

Скачать самую новую версию всегда можно с официального сайта производителя . Или воспользовавшись поиском .

Вот и установили Image Comparer. Теперь у Вас на рабочем столе есть ярлык этой программы…

Теперь разберёмся, как собственно, находить копии фотографий…

При первом запуске появится данное окно. Галочка внизу — по желанию.

Первая точка — искать в заданной (в следующем шаге) папке , а вторая (ниже) — искать копии между заданными папками…

…выбираем папку из фотоальбома, например…

Тут всё ясно…

…задайте размещение результата поиска, желательно на не системном диске, а лучше всего в самой (цветной) папке фотоальбома…

…переходим в вид с парами изображений…

Всё просто и логично — выделять отличия или нет, регулируем степень схожести, отмечаем лишние фотографии и жмём (Действия)…

Были рассмотрены программы для нахождения и удаления одинаковых файлов. Процедура, конечно же нужная, но что делать если Вам нужно обнаружить и стереть с компьютера одинаковые или похожие картинки или фотографии? Разумеется воспользоваться специальной программой.

Утилита называется Awesome Duplicate Photo Finder и скачать её можно с .

Она бесплатная, маленького размера и имеет версию не требующую установки. Портит её лишь отсутствие русскоязычного интерфейса, но она настолько интуитивно понятна, что разобраться с ней довольно просто. Особенно прочитав эту статью.

Итак, главное окно программы представляет собой следующий вид:

Слева и справа показываются найденные изображения, а по середине между ними показан процент сходства.
Под изображениями отображаются их свойства, такие как расширение, разрешение и размер (при поиске можно ориентироваться на них).
При нажатии на картинку можно её открыть в .
1 - позволяет переместить изображение в другую папку
2 - открывает папку с картинкой
3 - удаляет в корзину

Теперь о Настройках (Settings в верхнем меню)

Слева указываете какие форматы искать.

Move Files to Resycle Bin - удалять файл в корзину

Delete Files without Confirmation - удалять без предупреждения

Search Only 100% Indetical Pictures - искать только 100% совпадение картинок

Automatically Check for Updates - автоматически проверять наличие обновлений программы

Выставляете как Вам удобнее, жмем ОК и читаем дальше.

Разбираем вот эту менюшку

она нужна для добавления папок для сканирования и поиска.

По порядку назначение кнопок слева-направо: Добавить, Удалить, Переместить вверх, Переместить Вниз, Очистить.

Кнопка Start Search - начать поиск.

Галочка на Scan Subdirectories - поиск по подпапкам (которые внутри).

После окончания поиска, если результаты будут, то окно программы будет таким:

я специально замазал пути, но суть не изменилась.

Нижняя часть показывает путь оригинальной картинки (Original Image), похожую картинку (Dublicate Image) и процент сходства (Similarity).

Объяснять тут больше нечего, кроме того, что переключение между найденными дубликатами осуществляется в нижнем списке.
Вот так можно достаточно легко найти не только одинаковые картинки и изображения, а так же фотографии на вашем компьютере.

Доброго времени суток.

Статистика вещь неумолимая - у многих пользователей на жестких дисках лежат, порой, десятки копий одного и того же файла (например, картинки, или музыкального трека). Каждая из таких копий, разумеется, отнимает место на винчестере. А если диск ваш уже «забит» под завязку - то таких копий может быть достаточно много!

Чистить дубликаты файлов вручную - вещь не благодарная, именно поэтому, я хочу собрать в этой статье программы для поиска и удаления дубликатов файлов (причем, даже тех, которые отличаются и по формату файла, и по размеру друг от друга - а это довольно сложная задача!). Итак…

Список программ для поиска дубликатов

1. Универсальные (для любых файлов)

Осуществляют поиск одинаковых файлов по их размеру (контрольным суммам).

Под универсальными программами, я понимаю, те, которые годятся для поиска и удаления дублей любых типов файлов: музыки, фильмов, картинок и пр. (ниже в статье для каждого типа будет приведены «свои» более точные утилиты). Работают они все в большинстве по одному типу: они просто сравнивают размеры файлов (и их контрольную сумму), если есть среди всех файлов одинаковые по этой характеристике - показывают вам!

Т.е. благодаря ним можно быстро найти на диске полные копии (т.е. один в один) файлов. Кстати, так же отмечу, что данные утилиты работают быстрее, чем те, которые специализированы для конкретного типа файлов (например, поиска картинок).

DupKiller

Эту программу я поставил на первое место по ряду причин:

поддерживает просто огромное число разнообразных форматов, по которым она может проводить поиск;
высокая скорость работы;
бесплатная и с поддержкой русского языка;
очень гибкая настройка поиска дублей (поиск по названию, размеру, типу, дате, содержимому (ограниченно)).

Duplicate Finder

Эта утилита, помимо поиска копий, еще и сортирует их так, как вам вздумается (что очень удобно, когда копий находится неимоверное количество!). Так же к возможностям поиска добавьте побайтовое сравнение, сверка контрольных сумм, удаление файлов с нулевым размером (и пустых папок тоже). В общем-то, с поиском дублей эта программа справляет довольно неплохо (и быстро, и качественно!).

Немного не комфортно будут себя чувствовать те пользователи, которые плохо знакомы с английским: русского в программе нет (возможно после будет добавлен).

Glary Utilites

Вообще, это не одна утилита, а целый сборник: поможет удалить «мусорные» файлы, задать оптимальные настройки в Windows, дефрагментировать и очистить жесткий диск и т.д. В том числе, в этом сборнике есть утилита для поиска дублей. Работает она относительно не плохо, поэтому я и порекомендую этот сборник (как один из самых удобных и универсальных - что называется на все случаи жизни!) еще раз на страницах сайта.

2. Программы поиска дубликатов музыки

Данные утилиты пригодятся всем меломанам, у которых на диске скопилась порядочная коллекция музыки. Рисую довольно типичную ситуацию: скачиваете различные сборники музыки (100 лучших песен октября, ноября и пр.), часть композиций в них повторяется. Не удивительно, что, накопив музыки на 100 ГБ (к примеру), 10-20ГБ - могут быть копиями. Причем, если бы размер этих файлов в разных сборниках был одинаковый - то их бы можно было бы удалить первой категорией программ (см. выше в статье), но так как это не так - то эти дубли не находятся ничем, кроме вашего «слуха» и специальных утилит (которые представлены ниже).

M usic Duplicate Remover

Результат работы утилиты.

Эта программа отличается от остальных, прежде всего, свои быстрым поиском. Она ищет повторные треки по их ID3 тегам и по звуку. Т.е. она как бы за вас прослушает композицию, запомнит ее, а затем сравнит ее с другими (таким образом, проделывает огромный объем работы!).

На скриншоте выше представлен ее результат работы. Свои найденные копии она представит перед вами в виде небольшой таблички, в которой к каждому треку будет приписана цифра в процентах схожести. В общем, достаточно удобно!

Найденные повторные MP3 файлы…

Эта утилита схожа с вышеприведенной, но у нее есть один несомненный плюс: наличие удобнейшего мастера, который будет Вас вести по шагам! Т.е. человек, впервые запустивший эту программу, легко разберется куда нажимать и что делать.

Например, в своих 5000 треках за пару часов, мне удалось найти и удалить несколько сотен копий. Пример работы утилиты представлен на скрине выше.

3. Для поиска копий картинок, изображений

Если анализировать популярность тех или иных файлов, то картинки, пожалуй, не отстанут от музыки (а для некоторых пользователей и перегонят!). Без картинок вообще сложно представить работу за ПК (и другими устройствами)! Но поиск картинок с одинаковым изображением на них - дело довольно трудное (и долгое). И, должен признаться, программ этого рода сравнительно не много…

ImageDupeless

Сравнительно небольшая утилита с довольно неплохими показателями поиска и устранения дублей картинок. Программа сканирует все изображения в папке, а затем сравнивает их между собой. В результате вы увидите список картинок, которые похожи друг на друга и сможете сделать вывод о том, какую из них оставить, а какую удалить. Очень полезно, иногда, прореживать свои архивы фото.

Пример работы ImageDupeless

Кстати, вот небольшой пример личного испытания:

подопытные файлы: 8997 файлов в 95 каталогах, 785Мб (архив картинок на флешке (USB 2.0) - gif и jpg форматы)
галерея заняла: 71.4Мб
время создания: 26 мин. 54 сек.
время сравнения и вывода результатов: 6 мин. 31 сек.
результат: 961 похожее изображение в 219 группах.

Image Comparer

Об этой программе я уже упоминал на страницах сайта. Представляет собой так же небольшую программу, но с довольно хорошими алгоритмами сканирования картинок. Есть пошаговый мастер, запускающийся при первом открытии утилиты, который проведет через все «тернии» первой настройки программы для поиска дублей.

Кстати, чуть ниже приведен скриншот работы утилиты: в отчетах вы можете просмотреть даже мелкие детали, где картинки несколько различаются. В общем-то, удобно!

4. Для поиска дублей фильмов, видео-роликов

Ну и последний популярный тип файлов, на котором хотелось бы остановиться - это видео (фильмы, ролики и пр.). Если когда-то раньше, обладая 30-50 ГБ диском, знал в какой папке где и какой фильм сколько отнимает (и они все были наперечет), то, например, сейчас (когда диски стали 2000-3000 и более ГБ) - часто встречаются одни и те же ролики и фильмы, но в разном качестве (что может отнять достаточно много места на жестком диске).

Допустим у Вас есть какое-то изображение (рисунок, картинка, фотография), и Вы хотите найти такое же (дубликат) или похожее в интернет. Это можно сделать при помощи специальных инструментов поисковиков Google и Яндекс, сервиса TinEye, а также потрясающего браузерного расширения PhotoTracker Lite, который объединяет все эти способы. Рассмотрим каждый из них.

Поиск по фото в Гугл

Указываем ссылку на изображение в интернете
Загружаем файл с компьютера

В итоге получаем полный список похожих картинок по изображению, которое было выбрано в качестве образца:

Есть еще один хороший способ, работающий в браузере Chrome. Находясь на страничке с интересующей Вас картинкой, подведите к ней курсор мыши, кликните правой клавишей и в открывшейся подсказке выберите пункт «Найти картинку (Google)»:

Вы сразу переместитесь на страницу с результатами поиска!

Поиск по картинкам в Яндекс

У Яндекса всё не менее просто чем у Гугла:) Переходите по ссылке https://yandex.by/images/ и нажимайте значок фотоаппарата в верхнем правом углу:

Укажите адрес картинки в сети интернет либо загрузите её с компьютера (можно простым перетаскиванием в специальную области в верхней части окна браузера):

Результат поиска выглядит таким образом:

Вы мгновенно получаете доступ к следующей информации:

Какие в сети есть размеры изображения, которое Вы загрузили в качестве образца для поиска
Список сайтов, на которых оно встречается
Похожие картинки (модифицированы на основе исходной либо по которым алгоритм принял решение об их смысловом сходстве)

Многие наверняка уже слышали об онлайн сервисе TinEye, который русскоязычные пользователи часто называют Тинай. Он разработан экспертами в сфере машинного обучения и распознавания объектов. Как следствие всего этого, тинай отлично подходит не только для поиска похожих картинок и фотографий, но их составляющих.

Проиндексированная база изображений TinEye составляет более 10 миллиардов позиций, и является крупнейших во всем Интернет. «Здесь найдется всё» — это фраза как нельзя лучше характеризует сервис.

Есть еще один способ поиска в один клик. По умолчанию в настройках приложения активирован пункт «Показывать иконку быстрого поиска». Когда Вы наводите на какое-то фото или картинку, всплывает круглая зеленая иконка, нажатие на которую запускает поиск похожих изображений – в новых вкладках автоматически откроются результаты поиска по Гугл, Яндекс, Тинай и Бинг.

Расширение создано нашим соотечественником, который по роду увлечений тесно связан с фотографией. Первоначально он создал этот инструмент, чтобы быстро находить свои фото на чужих сайтах.

Когда это может понадобиться

Вы являетесь фотографом, выкладываете свои фото в интернет и хотите посмотреть на каких сайтах они используются и где возможно нарушаются Ваши авторские права.
Вы являетесь блогером или копирайтером, пишите статьи и хотите подобрать к своему материалу «незаезженное» изображение.
А вдруг кто-то использует Ваше фото из профиля Вконтакте или Фейсбук в качестве аватарки на форуме или фальшивой учетной записи в какой-либо социальной сети? А ведь такое более чем возможно!
Вы нашли фотографию знакомого актера и хотите вспомнить как его зовут.

На самом деле, случаев, когда может пригодиться поиск по фотографии, огромное множество. Можно еще привести и такой пример…

Как найти оригинал заданного изображения

Например, у Вас есть какая-то фотография, возможно кадрированная, либо отфотошопленная, а Вы хотите найти её оригинал, или вариант в лучшем качестве. Как это сделать? Проводите поиск в Яндекс и Гугл, как описано выше, либо средствами PhotoTracker Lite и получаете список всех найденных изображений. Далее руководствуетесь следующим:

Оригинальное изображение, как правило имеет больший размер и лучшее качество по сравнению с измененной копией, полученной в результате кадрирования. Конечно можно в фотошопе выставить картинке любой размер, но при его увеличении относительно оригинала, всегда будут наблюдаться артефакты. Их можно легко заметить даже при беглом визуальном осмотре.
Оригинальные фотографии часто имеют водяные знаки, обозначающие авторство снимка (фамилия, адрес сайта, название компании и пр.). Конечно водяной знак может добавить кто угодно на абсолютно на любое изображение, но в этом случае можно поискать образец фото на сайте или по фамилии автора, наверняка он где-то выкладывает своё портфолио онлайн.
И наконец, совсем простой признак. Если Ваш образец фото черно-белый (сепия и пр.), а Вы нашли такую же, но полноцветную фотографию, то у Вас явно не оригинал. гораздо более сложнее, чем перевести цветную фотографию в черно-белую:)

Большие объемы встроенной памяти смартфонов очень разбаловали нас в плане мобильной фотографии. Мы больше не пытаемся с одного раза сделать удачный кадр, а вместо этого делаем серию снимков, чтобы потом выбрать среди них лучший. Проблема в том, что после обработки и публикации фотографии в Instagram неудачные дубли чаще всего остаются на смартфоне, захламляют галерею и занимают слишком много памяти. Со временем в приложении «Фото» наступает катастрофа - количество снимков становится так велико, что мысль пересмотреть все изображения и удалить лишние вызывает ужас. Например, у меня сейчас 28 602 фотографии и я даже не представляю, сколько времени нужно потратить на то, чтобы их все пересмотреть, сравнить похожие, выбрать из них лучшие, а все ненужно удалить.

Студия MacPaw несколько лет назад предложила пользователям Mac приложение Gemini, которое сканирует накопитель и помогает находить дублирующиеся файлы, а теперь предложила такую же возможность для фотогалереи мобильных устройств. Gemini в App Store можно скачать бесплатно, но за продолжительное использование придется платить. Разработчики дают три дня на пробу (этого хватит, чтобы разобрать относительно небольшую медиатеку), а потом придется оформить подписку либо с ежемесячной, либо с годовой оплатой.

Gemini сканирует все снимки, хранящиеся локально в приложении Фото на iPhone, но также умеет работать с «облачной» медиатекой в iCloud, если нужно почистить синхронизированные на всех устройствах фотографии. В моем случае на анализ всех фотографий ушло порядка 15 минут, iPhone X за это время непривычно сильно нагрелся сзади, в районе камеры. Очевидно, что приложение очень требовательно к ресурсам, а значит, на устройствах прошлых поколений процесс поиска дубликатов может занять больше времени. В результате сканирования Gemini выдает две «папки». В одной будут находится фотографии текста, скриншоты, размытые снимки и другие изображения, которые чаще всего не представляют для нас долгосрочной ценности. Найденные файлы можно посмотреть и быстро удалить либо часть из них, либо все сразу. Если какие-то изображения нельзя удалять ни сейчас, ни при будущих сканированиях - их можно добавить в список исключений.

Вторая папка после сканирования содержит «стопки» дублирующихся фотографий. Это - самое интересное. Разработчики придумали какой-то хитрый алгоритм, позволяющий автоматически выбирать лучше фото из серии. Например, если это люди, то приоритет отдается четким снимкам с улыбкой и открытыми глазами. Уличные снимки и пейзажи отбираются по другим критериям. Теоретически пользователь должен довериться работе приложения и очистить медиатеку iPhone от похожих и дублирующихся фотографий в автоматическом режиме, но после использования у меня сложилось ощущение, что такой шаг может оказаться опрометчивым. Например, в одной из папок с «одинаковыми» фотографиями я нашел и снятые на основную камеру виды Стамбула и Галатской башни и селфи на фоне города с фронтальной камерой. При таком раскладе все группы изображений все-таки стоит просматривать, иначе есть риск потерять некоторые важные и памятные снимки.

В общем, за пару минут почистить медиатеку не получится, однако Gemini все-таки экономит время на приведение фотографий в порядок. Во-первых, для некоторых групп достаточно быстрого взгляда, чтобы согласиться с тем, какой снимок алгоритмы Gemini признали лучшим, а все остальные можно быстро удалить. Во-вторых, в интерфейсе приложения проще и удобнее пересматривать сгруппированные похожие фотографии, если захочется переназначить лучшую из серии и перенести в корзину остальные.

Алгоритмы Gemini нельзя назвать идеальными и на очистку в автоматическом режиме едва ли можно полагаться, но приложение все-таки позволяет существенно сэкономить время и силы на приведение медиатеки в порядок. В общем, хотя бы на время трехдневного пробного периода