python如何读取文件夹内txt文件

Python读取文件夹内txt文件的主要方法有使用os模块遍历文件夹、使用open函数打开文件、使用with语句确保文件正确关闭、此外，还可以结合pandas库进行更高级的数据处理。下面将详细描述其中的一种方法。

使用os模块遍历文件夹：os模块提供了与操作系统进行交互的功能，通过os.listdir()函数可以获取指定目录下的所有文件和子目录的名称列表。结合os.path.isfile()函数和字符串操作，可以筛选出所有txt文件。

import os
指定文件夹路径
folder_path = '/path/to/your/folder'
遍历文件夹内所有文件
for filename in os.listdir(folder_path):
    # 只处理txt文件
    if filename.endswith('.txt'):
        file_path = os.path.join(folder_path, filename)
        with open(file_path, 'r', encoding='utf-8') as file:
            content = file.read()
            print(content)

一、导入所需模块

导入os模块是读取文件夹内txt文件的第一步。os模块提供了一些函数，使得我们能够轻松地与操作系统进行交互，比如获取文件列表、检查文件类型等。

import os

二、指定文件夹路径

指定需要读取的文件夹路径是必要的。可以使用绝对路径或相对路径。绝对路径是从根目录开始的完整路径，而相对路径是相对于当前工作目录的路径。

folder_path = '/path/to/your/folder'

三、获取文件列表并筛选txt文件

使用os.listdir()函数获取文件夹内所有文件和子目录的名称列表。然后通过字符串操作筛选出所有txt文件。

for filename in os.listdir(folder_path):
    if filename.endswith('.txt'):

四、构建完整文件路径

使用os.path.join()函数可以构建文件的完整路径。os.path.join()函数会根据操作系统的不同，自动选择正确的路径分隔符（比如在Windows上是“\”，在Linux上是“/”）。

file_path = os.path.join(folder_path, filename)

五、打开并读取文件内容

使用open()函数打开文件，并读取文件内容。为了确保文件在读取完毕后正确关闭，可以使用with语句。with语句会在代码块结束时自动关闭文件。

with open(file_path, 'r', encoding='utf-8') as file:
    content = file.read()
    print(content)

六、处理文件内容

在读取文件内容后，可以根据需要对内容进行处理。例如，可以将内容存储在列表中、写入到另一个文件中，或者进行数据分析等。

import os
指定文件夹路径
folder_path = '/path/to/your/folder'
存储所有txt文件内容的列表
all_contents = []
遍历文件夹内所有文件
for filename in os.listdir(folder_path):
    if filename.endswith('.txt'):
        file_path = os.path.join(folder_path, filename)
        with open(file_path, 'r', encoding='utf-8') as file:
            content = file.read()
            all_contents.append(content)
打印所有内容
for content in all_contents:
    print(content)

七、处理文件夹内子目录

如果文件夹内还有子目录，并且需要遍历子目录内的txt文件，可以使用os.walk()函数。os.walk()函数会生成一个三元组(root, dirs, files)，分别表示当前遍历的目录路径、该目录下的子目录列表和文件列表。

import os
指定文件夹路径
folder_path = '/path/to/your/folder'
存储所有txt文件内容的列表
all_contents = []
遍历文件夹及子目录
for root, dirs, files in os.walk(folder_path):
    for file in files:
        if file.endswith('.txt'):
            file_path = os.path.join(root, file)
            with open(file_path, 'r', encoding='utf-8') as f:
                content = f.read()
                all_contents.append(content)
打印所有内容
for content in all_contents:
    print(content)

八、处理文件内容中的特定数据

有时我们需要从txt文件中提取特定数据，例如某些关键词或特定格式的数据。可以使用正则表达式（re模块）来实现这一功能。

import os
import re
指定文件夹路径
folder_path = '/path/to/your/folder'
存储所有txt文件内容的列表
all_contents = []
关键词
keyword = 'specific data'
遍历文件夹及子目录
for root, dirs, files in os.walk(folder_path):
    for file in files:
        if file.endswith('.txt'):
            file_path = os.path.join(root, file)
            with open(file_path, 'r', encoding='utf-8') as f:
                content = f.read()
                if re.search(keyword, content):
                    all_contents.append(content)
打印所有内容
for content in all_contents:
    print(content)

九、使用pandas进行数据处理

如果需要对txt文件中的数据进行更高级的数据处理，可以结合pandas库。pandas库提供了强大的数据处理和分析功能，适用于结构化数据。

import os
import pandas as pd
指定文件夹路径
folder_path = '/path/to/your/folder'
存储所有txt文件内容的列表
all_contents = []
遍历文件夹及子目录
for root, dirs, files in os.walk(folder_path):
    for file in files:
        if file.endswith('.txt'):
            file_path = os.path.join(root, file)
            with open(file_path, 'r', encoding='utf-8') as f:
                content = f.read()
                all_contents.append(content)
创建DataFrame
df = pd.DataFrame(all_contents, columns=['content'])
打印DataFrame
print(df)