转寄人: sortie (sortie)
标 题: NAS清理重复文件,bash脚本,群晖适用
发信站: 水木社区 (Sun May 24 14:55:12 2026)
来 源: 120.245.106.254
【以下内容由 sortie 转寄于 DigiHome 版】
标 题: NAS清理重复文件,bash脚本,群晖适用
发信站: 水木社区 (Sun May 24 14:55:12 2026)
来 源: 120.245.106.254
【以下内容由 sortie 转寄于 DigiHome 版】
https://github.com/jkzhang2019/cldup/
手册在 https://github.com/jkzhang2019/cldup/wiki
命令行工具,能扫描目录建立一个数据库,记录文件校验和,此后依赖数据库判定重复文件,也可以删除重复文件。
数据库是增量维护,第一次慢,之后就很快了。
cldup -u #建立/更新数据库
cldup -l file.name #判断文件是不是重复文件,不清理
cldup -f filename #清理重复文件,清理前会比对md5.
cldup -f * #清理目录内所有重复文件
不错,以前我挂windows下弄了很久
【 在 Saab 的大作中提到: 】
: https://github.com/jkzhang2019/cldup/
: 手册在 https://github.com/jkzhang2019/cldup/wiki
: 命令行工具,能扫描目录建立一个数据库,记录文件校验和,此后依赖数据库判定重复文件,也可以删除重复文件。
nb,收藏了。以前都是用windows程序搞
东西不错!不过有个现成的来源工具dupeGuru,也有docker版,装好之后是个web服务。不过也未必比楼主的好用…
不是有个存储分析器吗
【 在 Saab 的大作中提到: 】
: https://github.com/jkzhang2019/cldup/
: 手册在 https://github.com/jkzhang2019/cldup/wiki
: 命令行工具,能扫描目录建立一个数据库,记录文件校验和,此后依赖数据库判定重复文件,也可以删除重复文件
命令行,能用通配符能批处理。
【 在 wjjchen 的大作中提到: 】
: 不是有个存储分析器吗发自「今日水木 on&nbsp ...
能把重复文件自动硬链接吗
【 在 Saab 的大作中提到: 】
: https://github.com/jkzhang2019/cldup/手册在 https://github ...
擦,我上周刚刚悬赏一个xbox游戏,让娃拿python弄的。早知道可以省了这笔钱了。
【 在 Saab 的大作中提到: 】
: https://github.com/jkzhang2019/cldup/
: 手册在 https://github.com/jkzhang2019/cldup/wiki
-l给出的重复文件参数,再写个脚本能飞速处理吧
【 在 ldw218 的大作中提到: 】
: 能把重复文件自动硬链接吗
现在不行。可以考虑安排
【 在 ldw218 的大作中提到: 】
: 能把重复文件自动硬链接吗
- 有些重复文件本来就是hard link, 需要判别inode号
- shell脚本坑太多, 尽量用python之类的
判断了……
【 在 unknownzerx 的大作中提到: 】
: - 有些重复文件本来就是hard link, 需要判别inode号
- shell脚本坑太多, 尽量用python之类的...