python检测文件夹变化,并拷贝有更新的文件到对应目录的方法
作者:fuyou_h 发布时间:2023-11-07 12:56:06
标签:python,文件夹,拷贝,目录
检测文件夹,拷贝有更新的文件到对应目录 2016.5.19
亲测可用,若有借鉴请修改下文件路径;
学习python小一个月后写的这个功能,属于初学,若有大神路过,求代码优化~
newcopy.py:
检测文件夹中最后修改时间变化的文件,并拷贝复制到相应路径下,拷贝目录会自动检测后输出;测试文件夹路径记得修改;
pyinotify.py:
借用window接口,检测脚本所在目录下文件夹变化(更新、删除、添加等),输出日志到桌面上;
# newcopy.py文件
# -*- coding:UTF-8 -*-
import os
import os.path
import sys
import time
import datetime
import stat
import difflib
import linecache, shutil
# 文件全路径和对应最后修改时间写入到out.txt文档中;
def add_log(path):
with open('out.txt','w') as f:
f.close()
for root , dirs, files in os.walk(path):
for name in files:
temp_path = os.path.join(root,name)
file_name = temp_path.replace('C:/Users/Enter/Desktop/', '')
file_time = os.stat(temp_path).st_mtime
with open('out.txt','a') as f:
f.write( ','.join( ['%s' % file_name , '%s\n' % file_time] ) )
f.close()
# 注意时间格式转换
#file_time = time.localtime(os.stat(root).st_mtime)
#file_time=date.strftime('%Y-%m-%d %H:%M:%S')
def if_exist():
# 判断文件out.txt是否存在,不存在则创建
filename = 'out.txt'
if os.path.exists(filename):
message = 'OK, the "%s" file exists.'
else:
message = "Sorry, I cannot find the '%s' file..and I create it."
a = open('out.txt', 'w')
a.close()
print message % filename
# 判断update文件夹是否存在,不存在则创建
files_name='update'
if os.path.exists(files_name):
message = 'OK, the "%s" file exists.'
else:
message = "Sorry, I cannot find the '%s' file.and I create it. "
os.mkdir('update')
print message % files_name
# path 待比较的文件夹路径
# 返回生成的txt(包含更新或者添加的文件路径)的路径
def log_compare(path):
# 先确保out.txt存在
if_exist()
# 获取out.txt文件内容(文件全路径key和最后修改时间value),生成dict
txt = open('out.txt', 'r').readlines()
myDic = {}
for row in txt:
(key, value) = row.split(',')
myDic[key] = value
print myDic
# 创建以时间命名的文件和文件夹
setup_filename = str(datetime.datetime.now().strftime('%Y%m%d%H%M%S')) # 获取当前时间
setup_file_path = '%s%s.txt' %('C:/Users/Enter/Desktop/update/' ,setup_filename) # 生成以当前时间命名的.txt文件,准备写入更新日志
setup_file_dir = '%s%s' %('C:/Users/Enter/Desktop/update/' ,setup_filename) # 生成以当前时间命名的.txt文件夹
#判断key,比较value值是否变化
#原始需要有一个out.txt文件,才能比较value确定是否有更新
#运行程序时,重新遍历一遍文件全路径和最后修改时间
for root , dirs, files in os.walk(path):
for name in files:
temp_path = os.path.join(root,name)
file_name = temp_path.replace('C:/Users/Enter/Desktop/', '')
time = os.stat(temp_path).st_mtime # 获取最后修改时间
file_time = '%s\n' % time # 加%s\n是为了与out.txt里值完全对应
if myDic.has_key(file_name) == True:
if cmp(myDic[file_name], file_time): # myDic[file_name]旧最后修改时间,file_time新最后修改时间
print (file_name,file_time) # 输出有变化的文件名及其对应的最后修改时间
# 输出以文件时间命名的更新日志,生成路径是update下
with open(setup_file_path,'a') as f: # 有更新的文件,写入更新日志
f.write( '%s\n' % file_name )
f.close()
else:
print "add",file_name
with open(setup_file_path,'a') as f: # 新增的文件,写入更新日志
f.write( '%s\n' % file_name )
f.close()
# 返回 当前时间,以时间命名的文件夹路径,更新文件路径
return (setup_filename, setup_file_dir, setup_file_path)
# 将src目录中的内容拷贝到dest目录
# 如果dest或者其子目录不存在,先创建
# txt_path为更新日志路径,有更新的文件才拷贝
def copy_directory(src, dest, txt_path):
if not os.path.exists(txt_path):
print "no file update"
return
# 读更新日志,获取更新文件的全路径
txt = open(txt_path, 'r').readlines()
myDic = {}
myDic2 = {}
for row in txt:
myDic[row] = "1"
tempArray = os.path.split(row)
key = tempArray[0]
myDic2[key] = "1"
print "myDic2:", myDic2
print "dict:", myDic
# 遍历原始文件夹,得到所有文件的全路径
for root, dirs, files in os.walk(src):
for name in files:
#print "dirs:",dirs
fpath = os.path.join(root, name)
newroot = root
newroot = newroot.replace(src, dest) # 根据文件绝对路径,创建将要拷贝的路径(相对路径),没有则创建
#print newroot
rel_dir = root.replace('C:/Users/Enter/Desktop/', '')
if not os.path.exists(newroot) and myDic2.has_key(rel_dir):
print "rel_dir:" , rel_dir
print newroot
os.makedirs(newroot)
os.chmod(newroot, stat.S_IWRITE)
temp = fpath
temp = temp.replace(src, dest)
rel_path = fpath.replace('C:/Users/Enter/Desktop/', '') # 将绝对路径改为相对路径,便于遍历对比,挑出要拷贝的文件
rel_path += '\n'
if myDic.has_key(rel_path) == True:
print "real_path:" , rel_path
# os.mkdir(rel_path)
shutil.copy(fpath, temp)
print "copyfile:", fpath
def main():
path_dir = 'C:/Users/Enter/Desktop/acd'
path_file = 'C:/Users/Enter/Desktop/out.txt'
params = log_compare(path_dir)
add_log(path_dir)
copy_directory(path_dir, params[1], params[2])
if __name__ == '__main__':
main()
#pyinotify.py文件
# -*- coding:UTF-8 -*-
import os
import win32file
import win32con
# #检测当前目录下所有文件删除、更新、修改等变化。更新日志输出到桌面。2016.5.23 copy
ACTIONS = {
1 : "Created",
2 : "Deleted",
3 : "Updated",
4 : "Renamed from something",
5 : "Renamed to something"
}
# Thanks to Claudio Grondi for the correct set of numbers
FILE_LIST_DIRECTORY = 0x0001
path_to_watch = "."
hDir = win32file.CreateFile (
path_to_watch,
FILE_LIST_DIRECTORY,
win32con.FILE_SHARE_READ | win32con.FILE_SHARE_WRITE,
None,
win32con.OPEN_EXISTING,
win32con.FILE_FLAG_BACKUP_SEMANTICS,
None
)
while 1:
#
# ReadDirectoryChangesW takes a previously-created
# handle to a directory, a buffer size for results,
# a flag to indicate whether to watch subtrees and
# a filter of what changes to notify.
#
# NB Tim Juchcinski reports that he needed to up
# the buffer size to be sure of picking up all
# events when a large number of files were
# deleted at once.
#
results = win32file.ReadDirectoryChangesW (
hDir,
1024,
True,
win32con.FILE_NOTIFY_CHANGE_FILE_NAME |
win32con.FILE_NOTIFY_CHANGE_DIR_NAME |
win32con.FILE_NOTIFY_CHANGE_ATTRIBUTES |
win32con.FILE_NOTIFY_CHANGE_SIZE |
win32con.FILE_NOTIFY_CHANGE_LAST_WRITE |
win32con.FILE_NOTIFY_CHANGE_SECURITY,
None,
None
)
#print "results:", results
for action, file in results:
full_filename = os.path.join (path_to_watch, file)
print full_filename, ACTIONS.get (action, "Unknown")
with open('C:/Users/Enter/Desktop/fileupdate.txt','a') as f:
#str = ','.join( ['%s' % full_filename , '%s\n' % ACTIONS.get (action, "Unknown")] )
#print str
f.write( ','.join( ['%s' % full_filename , '%s\n' % ACTIONS.get (action, "Unknown")] ) )
f.close()
来源:https://blog.csdn.net/Tina224243/article/details/51853732
0
投稿
猜你喜欢
- 一、概述一个gRPC服务的大体结构图为:图一表明,grpc的服务是跨语言的,但需要遵循相同的协议(proto)。相比于REST服务,gPRC
- 1 动机greenlet 包是 Stackless 的副产品,其将微线程称为 “tasklet” 。tasklet运
- 切片操作首先支持下标索引,通过[ N:M :P ]操作索引正向从0开始,逆向从-1开始N:切片开始位置M:切片结束位置(不包含)P:指定切片
- 基础教程介绍了基本概念,特别是对象和类。进阶教程对基础教程的进一步拓展,说明Python的细节。希望在进阶教程之后,你对Python有一个更
- 在Python中的break语句终止当前循环,继续执行下一个语句,就像C语言中的break一样。break最常见的用途是当一些外
- 当我们建立一个数据库时,并且想将分散在各处的不同类型的数据库分类汇总在这个新建的数据库中时,尤其是在进行数据检验、净化和转换时,将会面临很大
- 在Perfection kills上看到他去年写的一篇文章,关于HTML优化的,讲的很详细,姑且记录之,尽管里面有些东西并不能在目前的环境里
- 一、什么是进程进程是执行中的程序,是资源分配的最小单位:操作系统以进程为单位分配存储空间,进程拥有独立地址空间、内存、数据栈等操作系统管理所
- 基于 Snapchat 的增强现实胡子挂件融合第一个项目中,我们将在检测到的脸上覆盖了一个小胡子。我们可以使用从摄像头捕获的连续视频帧,也可
- 什么是php: PHP,是英文超级文本预处理语言Hypertext Preprocessor的缩写。PHP 是一种 HTML 内嵌式的语言,
- NopCommerce为了实现松耦合的框架设计目的,使用了IOC框架:Autofac。据有人测试,Autofac是性能很好的IOC工具。1、
- 这篇文章主要介绍了Python实现自定义读写分离代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的
- 效果如下所示:# -*- coding: utf-8 -*-import turtle# 绘制太极图函数def draw_TJT(R):&n
- 前言我们见到几乎所有的 Web 网站或者手机 App 也好,它们的最终目的都是要留住用户,提升自己网站的用户注册量,所以说用户的概念也必须深
- 简介集合对象 set 是由具有唯一性的可哈希对象组成的无序多项集,如 list 不能哈希因此,不能作为 set 的一项。set 的常见用途包
- 近期接手越来越多的东西,发布和运维的工作相当机械,加上频率还蛮高,导致时间浪费还是优点多。修复bug什么的,测试,提交版本库(2分钟),ss
- 近年来流行 Ajax,而 Ajax 的本质就是 XMLHttpRequest,是客户端 XMLHttpRequest 对象的使用。相对于 A
- 今天在写爬虫程序的时候由于要翻页,做除法分页的时候出现了totalCount = '100' totalPage = int
- 本文的重点就是如何创建一个PHP类来实现两个数间的加减乘除,这种类似于极简单的计算器功能。实现起来是非常简单的,继续往下看:这里简单给大家介
- jupyter介绍jupyter的全称为Jupyter Notebook,之前一度被称为(IPython notebook),是一种交互式的