[请问] 搜寻重复档案 快速:只检查部分内容

楼主: i8i (状况已经不能再糟了)   2016-12-05 20:47:47
因为NAS共用,上面的照片跟影片好多被重复上传。
现在正在找删除重复档案的软件。
试用了两三个都有达到我的目的,但核对的时间非常久。
想要请问有没有删除重复档案的软件,
可以设定档案大小相同的话就只核对前10MB 或前1MB的档案内容(可设定)。
我的影片如果不是同一部的话,应该前1MB的内容就全都不一样了。
前面档案内容一样的话,后面的内容就不要核对了。
用这个方式增加速度。
谢谢~~
作者: agreerga (鸭毛)   2016-12-05 23:16:00
不能直接针对档名就好吗?
楼主: i8i (状况已经不能再糟了)   2016-12-05 23:29:00
我同档很常有不同档名 name 或 name(2) 或 name_2 都发生过
作者: rick65134   2016-12-06 08:54:00
加上档案大小为判断依据?
楼主: i8i (状况已经不能再糟了)   2016-12-06 23:01:00
我想要检查1.档案大小 2.档案前1MB内容 符合这两项就当作相同
作者: spfy (spfy)   2016-12-07 08:54:00
这样还是要解析影片吧 个人感觉没你想像的这么简单...
作者: agreerga (鸭毛)   2016-12-07 09:04:00
我是觉得既然都确定是重复上传了 档名直接看不会错吧除非你又有改掉档名
楼主: i8i (状况已经不能再糟了)   2016-12-08 00:08:00
我再补充一下别的状况,太多人共用这个NAS,抓影片的渠道不同很常会有档名不同,但内容物相同的状况。例如:*****.HR-HDTV.AC3.1024X550.x264-人人影视制作.mkv跟 :*****.国日音轨.双语字幕.mkv是同个档案,被重复抓下来。占用太多空间。全部扫速度又太慢
作者: y3k (激流を制するは静水)   2016-12-08 07:07:00
CRC
作者: spfy (spfy)   2016-12-08 08:38:00
你指的相同是只有影片相同 还是要连压缩编码 音轨 通通相同?只对比前者的话应该不可能用软件帮你找 同影片不同压缩BDRIP/DVDRIP 1080P/720P 这些对软件来说通通是不同的
楼主: i8i (状况已经不能再糟了)   2016-12-08 19:56:00
我指的是完全相同的档案,只是档案名称叙述不同。档案大小不一样就不检查内容
作者: eight0 (欸XD)   2016-12-09 03:09:00
我 google 到了很多类似的工具,不过都在 linux 底下现在我用这个 https://github.com/mixu/file-dedupe
作者: rick65134   2016-12-12 12:58:00
这种用途不错 不过还真没在windows下看过这种软件...linux的话 感觉搭配head指令兜一兜就出来了

Links booklink

Contact Us: admin [ a t ] ucptt.com