fdupes

fdupes — программа написанная Андрианом Лопесом (Adrian Lopez), сканирующая папки для поиска дубликатов файлов, с возможностью вывода списка и автоматическим удалением дублей. Она сравнивает размер файла и MD5 хэш, и после сравнения начинает сверку по-байтно. Написана на языке программирования C и выпущена под Лицензией MIT.

Использование

fdupes -r /home/user/downloads ключ -r — заставляет искать в том числе и в подкаталогах, ниже заданного.

fdupes -r /home/user/downloads > /home/user/dublikati.txt — перенаправление в файл, будет удобно если список дубликатов слишком большой.

Аналогичные программы

Другие программы в юниксоподобных системах, служащие для поиска дубликатов:

• duff (англ).
• dupmerge (англ). — работает на различных платформах (Win32/64 with Cygwin, *nix, Linux и т. п.)
• fdf (англ). — основана на Perl/c и запускается на большинстве платформ (Win32, *nix и вероятно и других). Использует MD5, SHA1 и другие алгоритмы подсчёта контрольной суммы
• freedup (англ). — совместима со стандартом POSIX C и запускаеться на различных платформах (Windows с использованием средств Cygwin, Linux, AIX и т. п.)
• freedups (англ). — скрипт на perl
• fslint (англ). — имеет графический и консольный(командной строки) интерфейс.
• liten (англ). — Утилита предназначена для поиска дубликатов. Написана на чистом Питоне и работает из командной строки. В основе данной утилиты лежит библиотека, использующая подсчет контрольных сумм файлов, а также новейший алгоритм побайтового сравнения.
• rdfind (англ).
• ua (англ). — Unix/Linux утилита командной строки (консольная), спроектированная для использования программы find или ей подобных.
• findrepe (англ). — свободная Java-утилита командной строки, предназначенная для эффективного поиска дубликатов файлов (для платформ — GNU/Linux, Mac OS X, *nix, Windows)

См. также

• fdupes(1)(англ.) man-страницы Линукс (страницы встроенного руководства по использованию)
• Официальная домашняя страница программы fdupes (англ).
• Программы UNIX-подобных операционных систем