Python：如何使用"listfiles"的输出来删除/移动/等文件

Question

背景：

我的目标是在两个不同的文件夹（没有子文件夹）中找到重复的文件。为此，我使用以下 Python 脚本：

###Check ob alle Archive noch vorhanden oder ob Daten bei Check gelöscht wurden
def listfiles(path):
    files = []
    for dirName, subdirList, fileList in os.walk(path):
        dir = dirName.replace(path, '')
        for fname in fileList:
                if fname.endswith("_GIS.7z"):
                    files.append(os.path.join(dir, fname))
    return files

x = listfiles(root)
y = listfiles(backupfolderGIS)

#q = [filename for filename in x if filename not in y]

files_only_in_x = set(x) - set(y) 
files_only_in_y = set(y) - set(x)
files_only_in_either = set(x) ^ set(y)
files_in_both = set(x) & set(y)
all_files = set(x) | set(y)

print "Alle Datein:"
print all_files
print " "

print "Nur im Zwischenspeicher:"
print files_only_in_x
print " "

print "Nur im Backupordner:"
print files_only_in_y
print " "

print "Nur einem von beiden Ordnern:"
print files_only_in_either
print " "

print "In beiden Ordnern:"
print files_in_both
print " "

相关输出变量/列表为files_in_both（文件夹）；它向我展示了重复项；如果我使用 print，它看起来像 set(['NameoftheProject_GIS.7z', 'NameofanotherProject_GIS.7z'])。

问题：

如何使用此输出/信息（目录中的重复文件）删除/移动它们？例如，文件夹 backupfolderGIS / 列表 files_in_both.

中的文件 NameoftheProject_GIS.7z 和 NameofanotherProject_GIS.7z

Answer 1

os.walk 递归检查从您传递的根目录开始的所有文件夹和子文件夹，您想检查 两个不同的文件夹（没有子文件夹） 所以只需搜索每个文件夹使用 glob，如果你想移动你可以使用 shutil.move:

from glob import iglob
from os import path
from shutil import move

pt1, pt2 = "/path_1", "path_2"
dupe = set(map(path.basename, iglob("/path_1./*_GIS.7z"))).intersection(map(path.basename, iglob("/path_2./*_GIS.7z")))

for fle in dupe:
    # move(src, dest)
    move(path.join(pt1, fle), "wherever")

或删除使用 os.remove:

for fle in dupe:
    os.remove(path.join(pt1, fle))

如果你想 move/delete 来自 pt2 的文件然后将其传递给 path.join 代替 pt1。

您还可以将 str.endwith 与 os.listdir:

一起使用

dupe = set(fname for fname in os.listdir(pt1) if fname.endswith("_GIS.7z")).intersection(fname for fname in os.listdir(pt2) if fname.endswith("_GIS.7z"))

为避免重复，您可以将其放在一个函数中：

from shutil import move
from os import path, listdir
def listfiles(path, end):
    return set(fname for fname in listdir(path) if fname.endswith(end))

for fle in listfiles(pt1,"_GIS.7z").intersection(listfiles(pt2, "_GIS.7z")):
    move(path.join(t1, fle), "wherever")

现在，如果您确实想检查所有文件夹中是否有具有相同基本名称的文件，以及是否有一些重复名称，您需要记录完整路径，您可以使用 defaultdict:

from os import path, walk
from collections import defaultdict

def listfiles(pth, end):
    files = defaultdict(list)
    for dirName, subdirList, fileList in walk(pth):
        for fname in fileList:
            if fname.endswith(end):
                files[fname].append(path.join(dirName, fname))
    return files

你会得到一个字典，其中键是基本名称，值是文件列表以及每个文件的完整路径，任何具有多个值的列表意味着你至少有两个文件具有相同的名称但是你应该记住具有相同的基本名称并不意味着文件实际上是相同的。

Python：如何使用"listfiles"的输出来删除/移动/等文件

Python: How to use output of "listfiles" to delete/ move/ etc. files

python

directory

list

os.walk

delete-file