司机社

标题: 视频查重小工具 [打印本页]

---

作者: 我随大王来巡山    时间: 2026-4-3 01:37
标题: 视频查重小工具

8 E+ ^) ~" {7 v* I3 ?' i( O
       混迹论坛良久，一直索取没有回报，挺愧疚的。
7 x" v5 q1 M4 v1 x0 r       今天如往常一样当“囤囤鼠”，下载了某合集，内含488个视频，下完一看重复的数量太多了，有些是加了水印算新的，有些是改了分辨率算新的。对于老哥们无私奉献，我是非常感激的，不过重复太多看着难受，于是萌生出搓一个查重工具的念头。
       整个工具由AI开发。基于python，无复杂流程，1分钟可以部署完成，命令行界面很轻量，已测试效果不错。

---

5 c$ {. x6 z: B        工具文件如下：

       (, 下载次数: 211)

上传

点击文件名下载附件

* t3 D/ [  @3 d. x1 E- X

# w, f8 h& |: E, }$ b: C
      部署方法：

       1.[安装python]：访问 https://www.python.org/downloads/，下载安装python 3.1x.x
       2.验证python是否安装成功：Win+R - CMD ，输入python --version，有版本出来就成功了。
9 J6 `- t. d9 z1 _* \2 q+ _; R       3.安装必要组件，在cmd里粘贴：
5 k, [0 n. n$ j( Y9 G* J* u              pip install opencv-python-headless imagehash pandas tqdm openpyxl
       安装成功后，所有的准备工作就完全结束了。


+ K) [( v$ c# g$ ~0 ?2 d" X0 v1 s
5 r: v2 p, r1 r+ _4 V  {2 D6 m8 {# [      使用方法：
' J* {. V) ]) k( m       01.双击打开脚本，自动弹出窗口让你选择素材文件夹(支持子文件夹)，你选择视频文件夹，点击确认，开始自动扫描，你的工作就全部做完了，点根烟去吧。
' j  Z5 s. X4 O$ y& r       02.扫描完成后，疑似重复的素材，会被自动移动至“疑似重复”目录下，但工具不会“擅自”删除文件或重命名文件。
       03.在原始目录下，会同时给出一个“重复视频对照表.xlsx”报表，告诉你保留了哪些文件在原地，移动了哪些文件。可以简单的核对一下，核对无误直接删掉“疑似重复”目录就完事了。

8 o5 ?; J" K9 V7 b- w, @       [关于扫描对比的精度调整]：
       如果水印太大或者裁剪严重，可能识别不出来。
% h4 D- Z2 V7 V       搜索代码里的“duplicate_groups = find_duplicates(folder_path, threshold=10)”
       改成 threshold=5（精度更高，更严格，误报少但可能漏检）
       改成 threshold=15（精度更低，更宽松，能抓到更多变形但可能误报）
- L+ `# P3 y4 [0 P9 r

9 L" G) }$ G( O' X! ]' }
7 a% `7 }; q0 {4 l2 ^       这个脚本不会删除文件，只会扫描、移动重复视频、生成报表，没有其他功能了。百分百安全的，我不会写代码，不会偷偷藏东西来偷老哥们电脑里的小姐姐。如果有自动删除的需要，可以把这个代码丢给AI，增加这种功能。
" P, A+ {, B1 ]; a2 K: f+ u2 X+ q
) \- k8 v2 c2 q$ N

---

4 g3 H5 B; W' Q% P* o' I       使用截图：

(, 下载次数: 0)

上传

点击文件名下载附件

(自动扫描视频，提取特征)

(, 下载次数: 0)

上传

点击文件名下载附件

(扫描完成后，统一把所有疑似重复的文件移入“疑似重复”文件夹)
+ ^: W+ S9 _- e2 ]% F+ U' J
. }+ w! D. a; r* ]/ @
(, 下载次数: 0)

上传

点击文件名下载附件

(抽查结果，完全没问题。那就可以直接删除整个文件夹了)
, E# V8 T" Y$ o: f- E
0 M) b3 ^! @: ^/ h2 H
$ a; z4 |! m' w9 g6 Y  V% ?; A
2 s# e  v0 \3 i3 I4 T" w


$ q0 E5 I) j+ q+ [
, O/ }$ U3 _* `# w/ a  M+ O: D& V
; t* x( W. Y$ D7 s  W

2 ~6 l. e9 M- J* {

9 @5 I/ b% H+ m7 {6 n

---

作者: qintian224    时间: 2026-4-3 22:40
提示: 作者被禁止或删除 内容自动屏蔽

---

作者: 我随大王来巡山    时间: 2026-4-3 23:57

qintian224 发表于 2026-4-3 22:40
1 ]% A7 l7 |4 {/ N  I等我深入研究一下python

/ ], D) P7 @* n; U" f3 [/ g哈哈哈不用深入研究，我完全0基础不会写代码，安装完了python啥也不设置。直接就能运行

---

作者: sfporn    时间: 2026-4-6 15:20
大佬能不能加上声音检查？有的探花视频看着画面没有广告，实际上隔一段时间就突然大声播放广告，tm网址还是一个字母一个字母读出来的，时间贼长

---

作者: 我随大王来巡山    时间: 2026-4-6 18:42

sfporn 发表于 2026-4-6 15:20
( U- t2 S8 _# V6 c大佬能不能加上声音检查？有的探花视频看着画面没有广告，实际上隔一段时间就突然大声播放广告，tm网址还是 ...

( B' K3 h4 D& c" N9 u. w# N4 b这种我还真遇到过，但是一般遇到了我直接就给他删了，然后去电报上找没广告的资源了

---

作者: asebuse    时间: 2026-4-7 13:46
大佬这个怎么下载啊，我下完了zip后面还有一个html，删了也没法解压

---

作者: 我随大王来巡山    时间: 2026-4-7 20:33

asebuse 发表于 2026-4-7 13:46
0 b& D, m' h1 s! B" n% G大佬这个怎么下载啊，我下完了zip后面还有一个html，删了也没法解压

脚本就是一个4kb的脚本，没有密码，没有乱七八糟的限制，直接能下的，你看看是不是网络有问题

---

作者: asebuse    时间: 2026-4-7 22:19

我随大王来巡山 发表于 2026-4-7 20:33
脚本就是一个4kb的脚本，没有密码，没有乱七八糟的限制，直接能下的，你看看是不是网络有问题 ...

换了夸克能直接下载zip了但显示压缩包损坏，没法解压，大佬能不能给个网盘

---

作者: chaojibaocao    时间: 2026-4-8 05:54
看了LZ的帖子，我只想说一句很好很强大！

---

作者: 6261899    时间: 2026-4-8 22:37
大佬这个能说下怎么用吗 下载之后打不开

---

作者: 我随大王来巡山    时间: 2026-4-9 16:36

6261899 发表于 2026-4-8 22:37
) o- U8 |5 `+ F' Q3 u大佬这个能说下怎么用吗 下载之后打不开

8 `+ K4 g% |$ u. @2 h加里奥不救盲僧

---

作者: 我随大王来巡山    时间: 2026-4-9 16:37

asebuse 发表于 2026-4-7 22:19
5 X3 f' H2 q  b& Y% P3 c% a- [换了夸克能直接下载zip了但显示压缩包损坏，没法解压，大佬能不能给个网盘 ...

没网盘。这东西没用网盘，直接传在论坛上的，别用什么工具，就浏览器直接下载

---

作者: minfer    时间: 2026-4-21 21:26
试试看看哦哦

---

作者: ghszyzh997    时间: 2026-4-29 22:27
啥也不说了，楼主就是给力！

---

欢迎光临 司机社 (https://sjsapp.cc/)

Powered by Discuz! X3.4