千家信息网

Linux怎么优雅的清理重复文件

发表于:2024-11-11 作者:千家信息网编辑
千家信息网最后更新 2024年11月11日,这篇"Linux怎么优雅的清理重复文件"文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇"
千家信息网最后更新 2024年11月11日Linux怎么优雅的清理重复文件

这篇"Linux怎么优雅的清理重复文件"文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇"Linux怎么优雅的清理重复文件"文章吧。

1. Rdfind –在Linux中查找重复文件

Rdfind 意即 redundant data find(冗余数据查找),是一个通过访问目录和子目录来找出重复文件的自由开源的工具。它是基于文件内容而不是文件名来比较。Rdfind 使用排序算法来区分原始文件和重复文件。如果你有两个或者更多的相同文件,Rdfind 会很智能的找到原始文件并认定剩下的文件为重复文件。一旦找到副本文件,它会向你报告。你可以决定是删除还是使用硬链接或者符号(软)链接代替它们。

要在Linux中安装rdfind,请根据您的Linux发行版使用以下命令。

  1. $ sudo apt-get install rdfind [在 Debian/Ubuntu 上]

  2. Misplaced & sudo yum install rdfind [在 CentOS/RHEL 上]

  3. $ sudo dnf install rdfind [在 Fedora 22+ 上]

  4. $ sudo pacman -S rdfind [在 Arch Linux 上]

要在目录上运行rdfind,只需键入rdfind和目标目录。下面来看一个例子:

linuxmi@linuxmi:~$ rdfind /home/user

正如你所看到rdfind将结果保存在一个文件名为RESULTS.TXT位于从那里你运行该程序的目录中。该文件包含rdfind找到的所有重复文件。您可以查看文件,并根据需要手动删除重复的文件。

您可以做的另一件事是使用-dryruna选项,该选项将提供重复项列表,而无需执行任何操作:

rdfind -dryrun true /home/user

找到重复项后,您可以选择将其替换为硬链接。

rdfind -makehardlinks true /home/user

如果您希望删除重复项,则可以运行。

rdfind -deleteduplicates true /home/user

要查看rdfind的其他有用选项,可以使用rdfind手册。

man rdfind

2. Fdupes –在Linux中扫描重复文件

Fdupes是另一个程序,它使您可以识别系统上的重复文件。它是免费的并且是开源的,并且使用C语言编写。它使用以下方法来确定重复的文件:

  • 比较部分md5sum签名

  • 比较完整的md5sum签名

  • 逐字节比较验证

就像rdfind一样,它具有类似的选项:

  • 递归搜索

  • 排除空文件

  • 显示重复文件的大小

  • 立即删除重复项

  • 排除其他所有者的文件

要在Linux中安装fdupes,请根据Linux发行版使用以下命令。

  1. $ sudo apt-get install fdupes [在Debian / Ubuntu上]

  2. Misplaced & sudo yum install fdupes [在CentOS / RHEL上]

  3. $ sudo dnf install fdupes [在Fedora 22+上]

  4. $ sudo pacman -S fdupes [在Arch Linux上]

Fdupes语法类似于rdfind。只需键入命令,然后键入您要扫描的目录即可。

  1. $ fdupes

  2. linuxmi@linuxmi:~$ fdupes /home/linuxmi/www.linuxmi.com

  3. /home/linuxmi/www.linuxmi.com/linuxmi.txt

  4. /home/linuxmi/www.linuxmi.com/linuxmi(复件).txt

要递归地搜索文件,必须像这样指定-r选项。

  1. $ fdupes -r

  2. linuxmi@linuxmi:~$ fdupes -r /home/linuxmi/www.linuxmi.com

  3. /home/linuxmi/www.linuxmi.com/linuxmi.txt

  4. /home/linuxmi/www.linuxmi.com/linuxmi(复件).txt

  5. /home/linuxmi/www.linuxmi.com/color-schemes/.git/logs/refs/remotes/origin/HEAD

  6. /home/linuxmi/www.linuxmi.com/color-schemes/.git/logs/refs/heads/master

  7. /home/linuxmi/www.linuxmi.com/color-schemes/.git/logs/HEAD

  8. /home/linuxmi/www.linuxmi.com/color-schemes/script/test

  9. /home/linuxmi/www.linuxmi.com/test

还可以指定多个目录,并指定递归搜索的目录。

fdupes -r

要使fdupes计算重复文件的大小,请使用该-S选项。

fdupes -S

要收集有关找到的文件的摘要信息,请使用-m选项。

fdupes -m

fdupes -m /home/linuxmi/www.linuxmi.com/

最后,如果要删除所有重复项,请使用如下所示-d的选项。

fdupes -d

Fdupes将询问要删除哪些找到的文件。您将需要输入文件号:

  1. fdupes -d /home/linuxmi/www.linuxmi.com/

绝对不建议使用的解决方案是使用该-N选项,该选项将导致仅保留第一个文件。

fdupes -dN

要获取与fdupes一起使用的可用选项的列表,请通过运行查看帮助页面。

fdupes -help

3. dupeGuru –在Linux中查找重复文件

dupeGuru是一个开放源代码和跨平台的工具,可用于在Linux系统中查找重复文件。该工具可以扫描文件名或一个或多个文件夹中的内容。它还允许您找到与要搜索的文件相似的文件名。

dupeGuru有适用于Windows,Mac和Linux平台的不同版本。它的快速模糊匹配算法功能可帮助您在短时间内找到重复的文件。它是可自定义的,您可以提取所需的确切重复文件,并从系统中清除不需要的文件。

要在Linux中安装dupeGuru,请根据您的Linux发行版使用以下命令。

  1. ————— 在 Debian/Ubuntu/Mint 上—————

  2. $ sudo add-apt-repository ppa:dupeguru/ppa

  3. $ sudo apt-get update

  4. $ sudo apt-get install dupeguru


  5. ————— 在 Arch Linux 上—————

  6. $ sudo pacman -S dupeguru

4. FSlint – Linux的重复文件查找器

FSlint是一个免费实用程序,用于查找和清除文件系统上各种形式的皮棉。它还报告重复文件,空目录,临时文件,重复/冲突(二进制)名称,错误的符号链接等。它同时具有命令行和GUI模式。

要在Linux中安装FSlint,请根据Linux发行版使用以下命令。

  1. $ sudo apt-get install fslint [在 Debian/Ubuntu 上]

  2. Misplaced & sudo yum install fslint [在 CentOS/RHEL 上]

  3. $ sudo dnf install fslint [在 Fedora 22+ 上]

  4. $ sudo pacman -S fslint [在 Arch Linux 上]

以上就是关于"Linux怎么优雅的清理重复文件"这篇文章的内容,相信大家都有了一定的了解,希望小编分享的内容对大家有帮助,若想了解更多相关的知识内容,请关注行业资讯频道。

0