Форум русскоязычного сообщества Ubuntu


Считаете, что Ubuntu недостаточно дружелюбна к новичкам?
Помогите создать новое Руководство для новичков!

Автор Тема: Поиск дупликатов файлов  (Прочитано 2312 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Serg

  • Автор темы
  • Активист
  • *
  • Сообщений: 482
  • U 20.04/64
    • Просмотр профиля
Поиск дупликатов файлов
« : 10 Апреля 2010, 14:36:06 »
Кто нибудь знает есть ли в Ubuntu программа поиска дупликатов файлов (не только изображений или медийных)?
windows-аналоги:
Duplicate Finder,
DupKiller,
NoClone,
CloneSpy,
EF Duplicate files manager
Правильно заданный вопрос - уже половина ответа

Axa-Ru

  • Гость
Re: Поиск дупликатов файлов
« Ответ #1 : 10 Апреля 2010, 14:38:23 »
дупликаты - это которые дуплятся? :)

Оффлайн RussianNeuroMancer

  • Любитель
  • *
  • Сообщений: 84
    • Просмотр профиля

Оффлайн gva230

  • Активист
  • *
  • Сообщений: 981
  • GUI-овый линуксоид
    • Просмотр профиля
    • Моя дикая страничка
Re: Поиск дупликатов файлов
« Ответ #3 : 10 Апреля 2010, 16:02:51 »
http://gluf.net.ua/how-to/tips/poisk-i-udalenie-dublikatov-fajlov/
Не, это не совсем то. Эта штука ищет одинаковые файлы. А как быть с картинками, например, в которых одинаковое изображение, но разные разрешения? Я считаю это повтором и одну из них удалил бы, если б знал, что их две. А эта программулина мне не поможет. :(
Kubuntu - наше фсё! :Ь

Оффлайн Serg

  • Автор темы
  • Активист
  • *
  • Сообщений: 482
  • U 20.04/64
    • Просмотр профиля
Re: Поиск дупликатов файлов
« Ответ #4 : 25 Апреля 2010, 16:02:01 »
Я так понял, ничего нет :idiot2:
Правильно заданный вопрос - уже половина ответа

Оффлайн Sly_tom_cat

  • Don't worry, be happy!
  • Заслуженный пользователь
  • Старожил
  • *
  • Сообщений: 12130
  • Xubuntu 22.04
    • Просмотр профиля
    • Github
Re: Поиск дупликатов файлов
« Ответ #5 : 25 Апреля 2010, 18:01:00 »
http://gluf.net.ua/how-to/tips/poisk-i-udalenie-dublikatov-fajlov/
Не, это не совсем то. Эта штука ищет одинаковые файлы. А как быть с картинками, например, в которых одинаковое изображение, но разные разрешения? Я считаю это повтором и одну из них удалил бы, если б знал, что их две. А эта программулина мне не поможет. :(

Т.е. вы хотите что бы вам по изображению хранимому дубликаты определил кто-то автоматом, даже если они в разных размерах?
(Нажмите, чтобы показать/скрыть)

А вот по имени (или части имени) - нет ли утилитки - а то есть большущая свалка фотографий в RAW и частично в JPG. Так вот JPG называются почти в 100% случаев так же как и RAW - т.е. только расширения разные. Причем раскидано все довольно беспорядочно  :(. Так вот мне бы по имени (без расширения) поискать хочется...
Индикатор для Yandex-Disk: https://forum.ubuntu.ru/index.php?topic=241992
UEFI-Boot - грузимся без загрузчика: https://help.ubuntu.ru/wiki/uefiboot

Оффлайн ArcFi

  • Старожил
  • *
  • Сообщений: 15189
    • Просмотр профиля
    • aetera.net
Re: Поиск дупликатов файлов
« Ответ #6 : 25 Апреля 2010, 19:44:56 »
А вот по имени (или части имени) - нет ли утилитки - а то есть большущая свалка фотографий в RAW и частично в JPG. Так вот JPG называются почти в 100% случаев так же как и RAW - т.е. только расширения разные. Причем раскидано все довольно беспорядочно  :(. Так вот мне бы по имени (без расширения) поискать хочется...
Типа такого:
find $HOME -name '*' -type f -printf '%p\t%f\n' | sed -e 's/ /^/g' -e 's/\.jpg//g' -e 's/\.JPG//g' -e 's/\.raw//g' -e 's/\.RAW//g' | sort -k2 | uniq -Df1 | sed 's/\^/ /g';)

Оффлайн Magomed

  • Любитель
  • *
  • Сообщений: 92
    • Просмотр профиля
Re: Поиск дупликатов файлов
« Ответ #7 : 25 Апреля 2010, 20:04:33 »
Пользуюсь fdupes. Консольная, но у меня с ней проблем не было... пока.
Для установки:

sudo aptitude install fdupes
А вот так ее надо использовать:

fdupes -r 'путь'
Если список слишком большой можно вывести его в файл:

fdupes -r 'path' >abc.txt

Оффлайн Sly_tom_cat

  • Don't worry, be happy!
  • Заслуженный пользователь
  • Старожил
  • *
  • Сообщений: 12130
  • Xubuntu 22.04
    • Просмотр профиля
    • Github
Re: Поиск дупликатов файлов
« Ответ #8 : 25 Апреля 2010, 21:06:24 »
Типа такого:
find $HOME -name '*' -type f -printf '%p\t%f\n' | sed -e 's/ /^/g' -e 's/\.jpg//g' -e 's/\.JPG//g' -e 's/\.raw//g' -e 's/\.RAW//g' | sort -k2 | uniq -Df1 | sed 's/\^/ /g';)

Отжег не по децки :2funny: я сейчас буду с пол часа мануалы копать что б понять точно, что ты написал. Хотя, конечно, общий смыл улавливается. Спасибо!  :D
Индикатор для Yandex-Disk: https://forum.ubuntu.ru/index.php?topic=241992
UEFI-Boot - грузимся без загрузчика: https://help.ubuntu.ru/wiki/uefiboot

Оффлайн gva230

  • Активист
  • *
  • Сообщений: 981
  • GUI-овый линуксоид
    • Просмотр профиля
    • Моя дикая страничка
Re: Поиск дупликатов файлов
« Ответ #9 : 02 Июня 2010, 01:21:15 »
http://gluf.net.ua/how-to/tips/poisk-i-udalenie-dublikatov-fajlov/
Не, это не совсем то. Эта штука ищет одинаковые файлы. А как быть с картинками, например, в которых одинаковое изображение, но разные разрешения? Я считаю это повтором и одну из них удалил бы, если б знал, что их две. А эта программулина мне не поможет. :(

Т.е. вы хотите что бы вам по изображению хранимому дубликаты определил кто-то автоматом, даже если они в разных размерах?
(Нажмите, чтобы показать/скрыть)
Под винду таких прог пруд-пруди... Обычно при подозрении на одинаковость прога предлагает удолить одну из картинок, показывая превьюшки и всякие ТТХ. Дубликаты могут такие проги искать не только с разными размерами, но и, например, разной цветовой гаммой: если одну картинку сделать монохромной, а другую оставить цветной, то чудо-прога распознает "дубликат". Степень похожести обычно в процентах задаётся... Это что касается картинок, а такие есть и для видео, и для аудио, и для архивов и для...

Один из ярчайших представителей искателей дубликатов картинок под виндой - DupDetector.
Kubuntu - наше фсё! :Ь

Axa-Ru

  • Гость
Re: Поиск дупликатов файлов
« Ответ #10 : 02 Июня 2010, 06:44:40 »
Это правда.
Под линух только вот такие способы: http://www.linuxquestions.org/questions/programming-9/a-bash-script-to-find-duplicate-image-files-519144/

Оффлайн Desperados

  • Новичок
  • *
  • Сообщений: 4
    • Просмотр профиля
Re: Поиск дупликатов файлов
« Ответ #11 : 01 Июля 2010, 09:09:17 »
Вообще-то на форуме много тем по этому поводу, можно ещё сдеся глянуть http://ru.wikipedia.org/wiki/Fdupes

Оффлайн ya4ept

  • Новичок
  • *
  • Сообщений: 7
    • Просмотр профиля
Re: Поиск дупликатов файлов
« Ответ #12 : 28 Июля 2010, 12:49:07 »
Пользователи начали жаловаться что у них в почте присутствует куча одинаковых файлов...

вопрос какой прогой можно просканировать все файлы в папке на предмет наличия дубликатов?

думаю что поиск нужен именно по одинаковому содержимому, а не по именам файлов

Axa-Ru

  • Гость
Re: Поиск дупликатов файлов
« Ответ #13 : 28 Июля 2010, 22:25:06 »
А что за почта? России?  ;D

Оффлайн dimas000

  • Старожил
  • *
  • Сообщений: 1437
  • Ubuntu 9.10 @ 2.6.34
    • Просмотр профиля
Re: Поиск дупликатов файлов
« Ответ #14 : 28 Июля 2010, 22:34:55 »
картинки digikam ищет похожие. и еще то ли фспот, то ли еще кто. как раз недавно в рассылке обсуждалось, чтим архивы.
Цитировать
думаю что поиск нужен именно по одинаковому содержимому, а не по именам файлов
md5 сверяй
лучше на "ты"

 

Страница сгенерирована за 0.031 секунд. Запросов: 23.