[已解决]批量删除一个文件夹中与另一个文件夹名称相同的图片

yrhhh

急求助大佬们一个问题
具体问题就是现在有两个文件夹 A和B （假设A有100张，B有10张，但是A中的100张里面包括B中的10张），现在要从A中删除这10张和B重复的图片
下面的代码可以实现吗？后面部分要不要注释呐 注释掉的部分不注释输出结果和注释掉是一样的。。。。。。后面图片是最终输出了重复图片的名字 但是没有从文件夹中删除 是不是因为这个python2的代码不能在python3实现啊

1. #!/usr/bin/env python
   
2. # encoding: UTF-8
   
3. # function : 比较两个文件夹里面的图片，重复的删除
   
4. 
   
5. import glob
   
6. import os
   
7. import numpy as np
   
8. from PIL import Image
   
9. 
   
10. #outDir = os.path.abspath
    
11. 
    
12. #Use the function: os.path.join
    
13. imageDir1 = os.path.abspath('C:/Users/sheryood/Desktop/Compared/Wait_to_delete')#待删除图片的文件夹
    
14. 
    
15. #Define the List of the images
    
16. image1 = []
    
17. 
    
18. #Get the absolute path of the images
    
19. imageList1 = glob.glob(os.path.join(imageDir1, '*.jpg'))
    
20. 
    
21. #Use the function: os.path.basename() Get the name of the images
    
22. for item in imageList1:
    
23.     image1.append(os.path.basename(item))
    
24. 
    
25. imageDir2 = os.path.abspath('C:/Users/sheryood/Desktop/Compared')#对比文件夹
    
26. image2 = []
    
27. imageList2 = glob.glob(os.path.join(imageDir2, '*.jpg'))
    
28. 
    
29. for item in imageList2:
    
30.     image2.append(os.path.basename(item))
    
31. 
    
32. for item in image1:
    
33.     print (item)
    
34. 
    
35. for item in image2:
    
36.     print (item)
    
37. 
    
38. for item1 in image1:
    
39.     for item2 in image2:
    
40.         if item1 == item2:
    
41.             """
    
42.             dir = imageList1(image1.index( item1 + '.jpg'))
    
43.             img = Image.open(dir)
    
44.             name = os.path.basename(dir)
    
45.             """
    
46.             os.remove(imageDir1+'\\'+item1)
    
47.             """
    
48.             img = Image.open(os.path.join(imageDir2, item1))
    
49.             os.remove(os.path.join(imageDir1, item1))
    
50.             img.save(os.path.join(outDir, item2))
    
51.             img.remove()
    
52.             img.remove(os.path.join( item1))
    
53.             img.remove(os.path.join(imageDir1, item1))
    
54.             """
    
55.             
    
56.                
    

复制代码

最佳答案

月排行榜 / 总排行榜

nahongyan1997

2020-8-8 17:44:52

这是我写的通过效验文件抽样MD5和文件大小的程序，稍微改了改，给你用吧。
代码：

1. import hashlib
   
2. from os import walk as os_walk
   
3. from os import sep,remove
   
4. from os.path import getsize,expanduser
   
5. from os.path import join as os_join
   
6. import easygui
   
7. 
   
8. class Delete_Repeat_File:
   
9.     def __init__(self,sign=1):
   
10.         self.sign = sign
    
11. 
    
12.         # 所有遍历到的文件（不包括重复文件）
    
13.         self.all_file = {}
    
14.         
    
15.         # 所有重复文件
    
16.         self.all_repeat_file = []
    
17.         
    
18.     def main(self):
    
19.         # 刷新主窗口
    
20.         while True:
    
21.             file = easygui.diropenbox(f'线程{self.sign}:请选择将要清理的文件夹。')
    
22.             
    
23.             # 返回-1表示取消操作
    
24.             if file == -1:
    
25.                 return '操作被取消！'
    
26.             
    
27.             # 集合目录
    
28.             _dir = []
    
29.             _dir.extend(file)
    
30. 
    
31.             
    
32.             # 如果所选文件里没有目录
    
33.             if not _dir:
    
34.                 print(f'线程{self.sign}:未指定任何文件目录！')
    
35.                 continue
    
36.             break
    
37.         
    
38.         # 启动筛选程序
    
39.         return self.start(_dir)
    
40.    
    
41.     # 获取文件MD5
    
42.     def get_file_md5(self,file_path):
    
43.         with open(file_path, 'rb') as file:
    
44.             for each_time in range(3000):
    
45.                 data = file.read(1024)  #将文件分块读取
    
46.                 if not data:
    
47.                     break
    
48.                 self.md5.update(data)
    
49.         return self.md5.hexdigest()
    
50.    
    
51.     # 比对MD5
    
52.     def compare_md5(self,file_path):
    
53.         self.md5 = hashlib.md5()
    
54.         file_md5 = self.get_file_md5(file_path)
    
55.         file_size = str(getsize(file_path))
    
56.         # 提取相同的文件
    
57.         repeat_file = self.all_file.get(file_md5+file_size)
    
58.         
    
59.         # 如果提取到了相同的文件
    
60.         if repeat_file:
    
61.             # 刷新主窗口
    
62.             self.ui.thread_show(str(self.all_file[file_md5+file_size])+','+str(file_path)+'\n')
    
63.             # 将两个文件的路径写入txt
    
64.             with open(os_join(expanduser('~'),'Desktop\\重复的文件.txt'),'at',encoding='utf8') as result_file:
    
65.                 result_file.write(str(self.all_file[file_md5+file_size])+','+str(file_path)+'\n')
    
66.             # 记录重复的文件的路径
    
67.             self.all_repeat_file.append(file_path)
    
68. 
    
69.         # 如果没有提取到相同的文件
    
70.         else:
    
71.             # 记录非重复文件的路径
    
72.             self.all_file[file_md5+file_size] = file_path
    
73. 
    
74.     def start(self,dirs):
    
75.         # 刷新主窗口
    
76.         print(f'线程{self.sign}:正在清理重复文件中。。。')
    
77.         # 刷新主窗口
    
78.         print(f'线程{self.sign}:开始清理重复文件！')
    
79.         
    
80.         # 删除旧的txt
    
81.         try:remove(os_join(expanduser('~'),'Desktop\\重复的文件.txt'))
    
82.         except:pass
    
83.         
    
84.         # 开始效验文件
    
85.         for each_dir in dirs:
    
86.             for each_path in os_walk(each_dir):
    
87.                 for each_file in each_path[2]:
    
88.                     self.compare_md5(each_path[0]+sep+each_file)
    
89.                     del self.md5
    
90.                     
    
91.         # 清理内存
    
92.         del self.all_file
    
93.         
    
94.         # 如果找到了重复的文件
    
95.         if len(self.all_repeat_file):
    
96.             while True:
    
97.                 # 请求回复
    
98.                 response =  input(f'线程{self.sign}:发现{len(self.all_repeat_file)}个重复的文件,是否删除？【Y\\N】【详情请查看‘桌面\重复的文件.txt】')
    
99.                 # 删除重复的文件
    
100.                 if response.casefold() == 'y':
     
101.                     for each_path in self.all_repeat_file:
     
102.                         remove(each_path)
     
103.                     return '重复文件清除完成！'
     
104. 
     
105.                 # 操作被取消
     
106.                 elif response.casefold() == 'n':
     
107.                     return '操作被取消！'
     
108. 
     
109.                 # 返回了错误的输入
     
110.                 else:
     
111.                     self.ui.ai_show(f'线程{self.sign}:输入数据错误！')
     
112.         else:
     
113.             return '没有发现重复的文件！'
     
114. 
     
115. def main(args,sign=1):
     
116.     exec(f'deleter{sign} = Delete_Repeat_File(sign)')
     
117.     return eval(f'deleter{sign}.main()')
     
118.    
     
119. if __name__ == '__main__':
     
120.     deleter = Delete_Repeat_File()
     
121.     deleter.main()
     
122. 
     
123. 
     

复制代码

跳转到最佳答案楼层

陈尚涵

不着急，先让我仔细看看

nahongyan1997

这是我写的通过效验文件抽样MD5和文件大小的程序，稍微改了改，给你用吧。
代码：

1. import hashlib
   
2. from os import walk as os_walk
   
3. from os import sep,remove
   
4. from os.path import getsize,expanduser
   
5. from os.path import join as os_join
   
6. import easygui
   
7. 
   
8. class Delete_Repeat_File:
   
9.     def __init__(self,sign=1):
   
10.         self.sign = sign
    
11. 
    
12.         # 所有遍历到的文件（不包括重复文件）
    
13.         self.all_file = {}
    
14.         
    
15.         # 所有重复文件
    
16.         self.all_repeat_file = []
    
17.         
    
18.     def main(self):
    
19.         # 刷新主窗口
    
20.         while True:
    
21.             file = easygui.diropenbox(f'线程{self.sign}:请选择将要清理的文件夹。')
    
22.             
    
23.             # 返回-1表示取消操作
    
24.             if file == -1:
    
25.                 return '操作被取消！'
    
26.             
    
27.             # 集合目录
    
28.             _dir = []
    
29.             _dir.extend(file)
    
30. 
    
31.             
    
32.             # 如果所选文件里没有目录
    
33.             if not _dir:
    
34.                 print(f'线程{self.sign}:未指定任何文件目录！')
    
35.                 continue
    
36.             break
    
37.         
    
38.         # 启动筛选程序
    
39.         return self.start(_dir)
    
40.    
    
41.     # 获取文件MD5
    
42.     def get_file_md5(self,file_path):
    
43.         with open(file_path, 'rb') as file:
    
44.             for each_time in range(3000):
    
45.                 data = file.read(1024)  #将文件分块读取
    
46.                 if not data:
    
47.                     break
    
48.                 self.md5.update(data)
    
49.         return self.md5.hexdigest()
    
50.    
    
51.     # 比对MD5
    
52.     def compare_md5(self,file_path):
    
53.         self.md5 = hashlib.md5()
    
54.         file_md5 = self.get_file_md5(file_path)
    
55.         file_size = str(getsize(file_path))
    
56.         # 提取相同的文件
    
57.         repeat_file = self.all_file.get(file_md5+file_size)
    
58.         
    
59.         # 如果提取到了相同的文件
    
60.         if repeat_file:
    
61.             # 刷新主窗口
    
62.             self.ui.thread_show(str(self.all_file[file_md5+file_size])+','+str(file_path)+'\n')
    
63.             # 将两个文件的路径写入txt
    
64.             with open(os_join(expanduser('~'),'Desktop\\重复的文件.txt'),'at',encoding='utf8') as result_file:
    
65.                 result_file.write(str(self.all_file[file_md5+file_size])+','+str(file_path)+'\n')
    
66.             # 记录重复的文件的路径
    
67.             self.all_repeat_file.append(file_path)
    
68. 
    
69.         # 如果没有提取到相同的文件
    
70.         else:
    
71.             # 记录非重复文件的路径
    
72.             self.all_file[file_md5+file_size] = file_path
    
73. 
    
74.     def start(self,dirs):
    
75.         # 刷新主窗口
    
76.         print(f'线程{self.sign}:正在清理重复文件中。。。')
    
77.         # 刷新主窗口
    
78.         print(f'线程{self.sign}:开始清理重复文件！')
    
79.         
    
80.         # 删除旧的txt
    
81.         try:remove(os_join(expanduser('~'),'Desktop\\重复的文件.txt'))
    
82.         except:pass
    
83.         
    
84.         # 开始效验文件
    
85.         for each_dir in dirs:
    
86.             for each_path in os_walk(each_dir):
    
87.                 for each_file in each_path[2]:
    
88.                     self.compare_md5(each_path[0]+sep+each_file)
    
89.                     del self.md5
    
90.                     
    
91.         # 清理内存
    
92.         del self.all_file
    
93.         
    
94.         # 如果找到了重复的文件
    
95.         if len(self.all_repeat_file):
    
96.             while True:
    
97.                 # 请求回复
    
98.                 response =  input(f'线程{self.sign}:发现{len(self.all_repeat_file)}个重复的文件,是否删除？【Y\\N】【详情请查看‘桌面\重复的文件.txt】')
    
99.                 # 删除重复的文件
    
100.                 if response.casefold() == 'y':
     
101.                     for each_path in self.all_repeat_file:
     
102.                         remove(each_path)
     
103.                     return '重复文件清除完成！'
     
104. 
     
105.                 # 操作被取消
     
106.                 elif response.casefold() == 'n':
     
107.                     return '操作被取消！'
     
108. 
     
109.                 # 返回了错误的输入
     
110.                 else:
     
111.                     self.ui.ai_show(f'线程{self.sign}:输入数据错误！')
     
112.         else:
     
113.             return '没有发现重复的文件！'
     
114. 
     
115. def main(args,sign=1):
     
116.     exec(f'deleter{sign} = Delete_Repeat_File(sign)')
     
117.     return eval(f'deleter{sign}.main()')
     
118.    
     
119. if __name__ == '__main__':
     
120.     deleter = Delete_Repeat_File()
     
121.     deleter.main()
     
122. 
     
123. 
     

复制代码

yrhhh

陈尚涵 发表于 2020-8-8 17:31
不着急，先让我仔细看看

好的大佬 你先研究一下

yrhhh

nahongyan1997 发表于 2020-8-8 17:44
这是我写的通过效验文件抽样MD5和文件大小的程序，稍微改了改，给你用吧。
代码：

感谢 大神太厉害了 膜拜！

nahongyan1997

yrhhh 发表于 2020-8-8 22:14
感谢 大神太厉害了 膜拜！

我的最佳尼

yrhhh

nahongyan1997 发表于 2020-8-9 11:46
我的最佳尼

不好意思 老哥 忘记了 昨天先试验了一下 但是不太会用 请问在哪里填我文件夹的路径呐

nahongyan1997

有文件夹选择框啊，你把所有图片放到一个文件夹，然后选择那个文件夹，他就会检测重复文件，然后提示你是否删除，重复的文件路径保存在桌面了。

yrhhh

nahongyan1997 发表于 2020-8-9 20:14
有文件夹选择框啊，你把所有图片放到一个文件夹，然后选择那个文件夹，他就会检测重复文件，然后提示你是否 ...

老哥 你说的和我的是一个意思吗 我的不是检测一个文件夹的重复文件 是两个文件夹

nahongyan1997

那你得改改，我这个是我软件的一部分，在我这是可以选很多个文件夹的，但是拆出来就不能用了。

yrhhh

nahongyan1997 发表于 2020-8-10 07:40
那你得改改，我这个是我软件的一部分，在我这是可以选很多个文件夹的，但是拆出来就不能用了。

好的好的 感谢了