Python递归文件夹读取

我有c++ /Obj-C背景，我刚刚发现Python(写了大约一个小时)。我正在写一个脚本递归地读取文件夹结构中的文本文件的内容。

我的问题是，我写的代码将只工作于一个文件夹深度。我可以在代码中看到为什么(见#hardcoded path)，我只是不知道如何使用Python，因为我对它的经验只是全新的。

Python代码:

import os
import sys

rootdir = sys.argv[1]

for root, subFolders, files in os.walk(rootdir):

    for folder in subFolders:
        outfileName = rootdir + "/" + folder + "/py-outfile.txt" # hardcoded path
        folderOut = open( outfileName, 'w' )
        print "outfileName is " + outfileName

        for file in files:
            filePath = rootdir + '/' + file
            f = open( filePath, 'r' )
            toWrite = f.read()
            print "Writing '" + toWrite + "' to" + filePath
            folderOut.write( toWrite )
            f.close()

        folderOut.close()

当前回答

如果你想要一个给定目录下的所有路径的平面列表(比如find。在壳中):

   files = [ 
       os.path.join(parent, name)
       for (parent, subdirs, files) in os.walk(YOUR_DIRECTORY)
       for name in files + subdirs
   ]

若要只包含基本目录下文件的完整路径，请省略+ subdirs。

2019-02-05 00:31:14

其他回答

pathlib库非常适合处理文件。你可以在Path对象上做这样的递归glob。

from pathlib import Path

for elem in Path('/path/to/my/files').rglob('*.*'):
    print(elem)

2019-12-27 01:06:18

使用os.path.join()来构造你的路径-这样更整洁:

import os
import sys
rootdir = sys.argv[1]
for root, subFolders, files in os.walk(rootdir):
    for folder in subFolders:
        outfileName = os.path.join(root,folder,"py-outfile.txt")
        folderOut = open( outfileName, 'w' )
        print "outfileName is " + outfileName
        for file in files:
            filePath = os.path.join(root,file)
            toWrite = open( filePath).read()
            print "Writing '" + toWrite + "' to" + filePath
            folderOut.write( toWrite )
        folderOut.close()

2010-02-06 09:39:08

同意Dave Webb的观点。Walk将为树中的每个目录生成一个项。事实上，您不需要关心子文件夹。

这样的代码应该可以工作:

import os
import sys

rootdir = sys.argv[1]

for folder, subs, files in os.walk(rootdir):
    with open(os.path.join(folder, 'python-outfile.txt'), 'w') as dest:
        for filename in files:
            with open(os.path.join(folder, filename), 'r') as src:
                dest.write(src.read())

2010-02-06 09:59:58

我认为问题在于你没有处理os的输出。正确的走路。

首先,改变:

filePath = rootdir + '/' + file

to:

filePath = root + '/' + file

Rootdir是固定的起始目录;Root是os.walk返回的目录。

其次，您不需要缩进您的文件处理循环，因为对每个子目录运行这个没有意义。您将获得每个子目录的根集。您不需要手动处理子目录，除非您想对目录本身做一些事情。

2010-02-06 09:34:45

如果你使用的是Python 3.5或更高版本，你可以在一行内完成。

import glob

# root_dir needs a trailing slash (i.e. /root/dir/)
for filename in glob.iglob(root_dir + '**/*.txt', recursive=True):
     print(filename)

正如文档中提到的

如果递归为true，模式'**'将匹配任何文件以及零个或多个目录和子目录。

如果你想要每个文件，你可以使用

import glob

for filename in glob.iglob(root_dir + '**/**', recursive=True):
     print(filename)

2017-07-18 16:26:06

Python递归文件夹读取

推荐文章

最新文章

标签