python文件打不开一闪
作者:siseniao
从该文章改进:https://post.smzdm.com/p/an370emp/?zdm_ss=Android_1106136211_&send_by=1106136211&from=other&invite_code=zdmwffzv7winv
原文每次扫描都需要重新计算MD5,对于大文件来说,磁盘消耗较大,增加了缓存文件存储md5,每次扫描只计算新文件,提高效率。
不废话,直接贴代码:
import os
import hashlib
# 只删除以下列表中的重复文件类型.如果想删除其他类型的文件,自己添加一下就行了
file_type = ['.jpg', '.jpeg', '.png', '.gif', '.psd', '.bmp', '.webp', '.mp4', '.mkv', '.avi', '.mov', 'mpeg', 'mpg',
'.rar', '.zip']
check_files = []
#自行修改目录列表
work_dir_list = [r'/volume2/111', r'/volume1/222']
def save_md5_file(files_dict:dict):
if files_dict is None:
return
try:
with open("md5.txt", "w") as f:
for path_md5, file_md5, in files_dict.items():
f.write(str(path_md5) + "=" + str(path_md5) + 'n')
except Exception as e:
pass
def open_md5_file():
files_md5 = {}
try:
with open("md5.txt", "r") as f:
for md5_line in iter(lambda: f.readline(), ""):
list_keys = md5_line.split('=')
if len(list_keys) == 2:
files_md5[list_keys[0].strip()] = list_keys[1].strip()
except Exception as e:
pass
return files_md5
def remove_repeat_files():
for work_dir in work_dir_list:
for root, dirs, files in os.walk(work_dir):
for name in files:
p_type = os.path.splitext(os.path.join(root, name))[1]
if p_type in file_type:
check_files.append(os.path.join(root, name))
for name in dirs:
p_type = os.path.splitext(os.path.join(root, name))[1]
if p_type in file_type:
check_files.append(os.path.join(root, name))
files_dict = {}
files_md5 = open_md5_file()
r_index = 0
print('Files Num:%s' % len(check_files))
for file_path in check_files:
try:
md5_path = hashlib.md5()
md5_path.update(file_path.encode('utf-8'))
path_md5 = md5_path.hexdigest()
file_md5 = files_md5.get(path_md5)
if file_md5 is None:
md5_hash = hashlib.md5()
with open(file_path, "rb+") as f:
for byte_block in iter(lambda: f.read(4096), b""):
md5_hash.update(byte_block)
file_md5 = md5_hash.hexdigest()
print('Check file MD5:%s' % file_path)
files_md5[path_md5] = file_md5
if files_dict.get(file_md5) is None:
files_dict[file_md5] = file_path
else:
d_path = files_dict[file_md5]
d_path_stats = os.stat(d_path)
file_stats = os.stat(file_path)
d_time = d_path_stats.st_ctime
f_time = file_stats.st_ctime
if d_time > f_time:
os.remove(d_path)
files_dict[file_md5] = file_path
print('Delete File:', d_path)
r_index += 1
else:
os.remove(file_path)
print('Delete File:', file_path)
r_index += 1
except Exception as e:
pass
print('File Count:%s, Repeat Files Num:%s. All deleted!' %( len(check_files),str(r_index)))
save_md5_file(files_md5)
if __name__ == '__main__':
remove_repeat_files()
可以在ssh或者任务计划里执行
","gnid":"9a931522e9730c14b","img_data":[{"flag":2,"img":[{"desc":"","height":"385","title":"","url":"https://p0.ssl.img.360kuai.com/t01a2508b2adc68479c.jpg","width":"600"}]}],"original":0,"pat":"art_src_1,fts0,sts0","powerby":"cache","pub_time":1679316661000,"pure":"","rawurl":"http://zm.news.so.com/1715a84bea2900132874605fea6f9a81","redirect":0,"rptid":"71260418b6e0ce01","rss_ext":[],"s":"t","src":"什么值得买","tag":[],"title":"利用python删除群晖重复文件(缓存文件MD5方式)
明东很2427Python3.3.2打不开,显示程序无法正常启动0xc000007b -
范寿祁18024637077 ______ 兼容模式试下,这些游戏是基于32位的
明东很2427安装了python 2.7,IDLE打不开,而且系统环境变量里也没有TCL之类的变量.咋办? -
范寿祁18024637077 ______ 默认情况下,Python是不会自动添加到环境变量的,需要自己在Path环境变量中添加Python的安装目录,TCL也是;至于IDLE不能启动,linux...
明东很2427为什么不能直接打开Python而要用命令指示器 -
范寿祁18024637077 ______ ~看来是新手~ 在cmd下运行 python hi.py即可 如果在cmd下运行 python 就会展示你的截图内容.但是这是一个类似命令行的运行环境,代码你需要一个个敲下来;或者说,不能直接运行一个python文件的话.
明东很2427安装了python记事本改变了格式还闪了几下还是打不开? -
范寿祁18024637077 ______ 您好,python是一种编程语言,记事本是创建txt文件用的.改变txt文档的格式在python的编译器里应该是不能直接打开的.
明东很2427python的GUI打不开 -
范寿祁18024637077 ______ 版本不兼容啊.你卸载3.1,然后把c盘的python33, python31目录彻底删除, 然后进入注册表,把python相关的注册项再删除,然后重新安装python31就可以了.如果你有探索精神,就直接进入python31的...
明东很2427Python3.3 建立一个新的新的.PY文件问什么打开报错啊? -
范寿祁18024637077 ______ 编码格式不对,记事本默认是windows的gbk,你可以把c.py的编码格式改成utf8
明东很2427python写了个程序能正常运行,但是封装成exe后打不开没有提示,怎么解决? -
范寿祁18024637077 ______ 你在cmd里输入exe的全文件名,看报什么错
明东很2427python绘图文件出现错误 -
范寿祁18024637077 ______ 在代码第一行加上#coding:utf-8 试试
明东很2427python运行后出现这个,怎么回事? -
范寿祁18024637077 ______ 打不开new 1 ,文件或目录不存在
明东很2427在python中打开一个文件显示如下,是为什么 -
范寿祁18024637077 ______ 我也遇到过你的问题,当时就是明明有这个文件就是打不开,各种百度也解决不了,后来我把文件放到D盘就打开了,你可以试试,至于为啥在C盘打不开我也不知道