如何以递归方式从另一个文件夹中清除一个文件夹中存在的重复项？

Question

摘要：文件夹 A 只有许多优秀文件 文件夹 B 有许多混合优秀/好/坏文件的文件夹 我如何才能删除文件夹 B 文件夹中的文件，以防它们位于文件夹 A 中。或者简单地放置相同的东西：如何制作检查文件夹 A 文件是否存在于文件夹 B 文件夹中，然后从文件夹 B 文件夹中删除？

解决方案的想法 也许是命令女巫：

1. 检查字母表的一部分，如所有以 A 开头的字母
2. 对文件夹 B 子文件夹中的文件执行删除
3. 重复 1. + 一个字母。

导致复制程序不好：

1. 距离第一次删除很长时间 - 仅在完成扫描时
2. 并且无法选择在文件夹 B 中删除。只能保留最新的和其他内容，但不能选择在女巫文件夹中保留。

无用的历史：文件是从文件夹 B 中的 Recuva 复制并部分排列，但其中很多是坏的，所以我第一次思考文件夹 B 是否存在与再次恢复的巫婆进行比较，但现在只是由 Recuva 在文件夹 A 中恢复的 Excelent 所以大多数 Excelent 会只是在文件夹 A 中。

示例文件树：

.
??? A
?   ??? 1.png
?   ??? 2.png
?   ??? Excellent
?       ??? e1.png
?       ??? e2.png
??? B
    ??? 1.png
    ??? 2.png
    ??? Bad
    ?   ??? 1.png
    ?   ??? 2.png
    ?   ??? e1.png
    ?   ??? e2.png
    ??? Excellent
        ??? e1.png
        ??? e2.png

Answer 1

以下是两种解决方案，具体取决于我们如何定义“重复”：

• 具有相同相对路径的文件，或
• 内容相同但名称不一定相同的文件

如果“重复”是指共享相同相对路径的两个文件，那么您可以使用find和xargs删除重复项。例如，假设你有

~/tmp% tree A
A
??? Excellent
    ??? bar
    ??? baz
    ??? foo
~/tmp% tree B
B
??? Bad
?   ??? quux
??? Excellent
?   ??? bar
?   ??? baz
?   ??? foo
??? Good

然后

find /home/unutbu/tmp/A  -depth -type f -print0 | xargs -0 -I{} bash -c 'rm "/home/unutbu/tmp/B${1#*A}"' - {}

结果是

~/tmp% tree B
B
??? Bad
?   ??? quux
??? Excellent
??? Good

或者，如果“重复”是指两个文件共享相同的内容，尽管文件名可能不同，那么您可以使用rdfind：

sudo apt-get install rdfind

如果我们有这个目录结构：

~/tmp% tree A
A
??? Excellent
    ??? bar
    ??? baz
    ??? foo

1 directory, 3 files
~/tmp% tree B
B
??? Bad
?   ??? quux
??? Excellent
?   ??? barbar
?   ??? bazbaz
?   ??? foofoo
??? Good

where 与barbar具有相同的内容bar，对于bazbaz和也类似foofoo，那么

rdfind -deleteduplicates true A B

结果是

~/tmp% tree B
B
??? Bad
?   ??? quux
??? Excellent
??? Good

替代解决方案，以防您的 Ubuntu 版本不包含 rdfind：

您可以改为使用fdupes：

sudo apt-get install fdupes
fdupes --recurse --delete --noprompt A B