在Python中，可以通过多种方式来分行读取数据。常用的方法包括使用readline()、readlines()、for循环遍历文件对象。其中，使用readline()方法可以逐行读取文件，适合处理较大的文件；readlines()方法会将文件所有行读入列表中，适合处理较小的文件；使用for循环遍历文件对象也是一种简便且高效的方式。下面将详细描述使用for循环遍历文件对象的方法。
使用for循环遍历文件对象时，Python会自动逐行读取文件内容，并且这种方法是内存友好的，不会一次性将整个文件内容加载到内存中，非常适合处理大文件。具体示例如下：
with open('example.txt', 'r') as file:
for line in file:
print(line.strip())
在这段代码中，open函数以只读模式打开文件example.txt，with语句确保文件会在代码块结束后自动关闭。for循环逐行读取文件内容，strip()方法用于去除每行末尾的换行符。
接下来，将详细介绍不同方法的实现和使用场景。
一、使用readline()逐行读取
readline()方法每次读取文件的一行，适合处理大型文件，因为它不会一次性将文件内容全部加载到内存中。以下是一个示例：
with open('example.txt', 'r') as file:
line = file.readline()
while line:
print(line.strip())
line = file.readline()
在这个示例中，readline()方法每次读取文件的一行，并将其赋值给变量line。while循环会持续执行，直到readline()返回一个空字符串，表示文件的末尾。strip()方法用于去除每行末尾的换行符。
优点：
- 内存友好，适合处理大文件。
缺点：
- 代码较为冗长，不如
for循环简洁。
二、使用readlines()读取所有行
readlines()方法将文件中所有行读入一个列表中，适合处理较小的文件。以下是一个示例：
with open('example.txt', 'r') as file:
lines = file.readlines()
for line in lines:
print(line.strip())
在这个示例中，readlines()方法将文件中所有行读入列表lines中。for循环遍历该列表，并打印每一行内容。
优点：
- 简单直接，代码简洁。
缺点：
- 不适合处理大文件，因为会将整个文件内容加载到内存中。
三、使用for循环遍历文件对象
这种方法是最为简便且高效的，适合各种文件大小。以下是一个示例：
with open('example.txt', 'r') as file:
for line in file:
print(line.strip())
在这个示例中，open函数以只读模式打开文件example.txt，with语句确保文件会在代码块结束后自动关闭。for循环逐行读取文件内容，strip()方法用于去除每行末尾的换行符。
优点：
- 简便高效，内存友好，适合处理各种大小的文件。
缺点：
- 无明显缺点。
四、读取大文件的注意事项
对于非常大的文件，除了使用上述方法外，还可以结合itertools模块中的islice方法来控制每次读取的行数，以避免内存占用过高。以下是一个示例：
from itertools import islice
with open('example.txt', 'r') as file:
for line in islice(file, 1000): # 每次读取1000行
print(line.strip())
在这个示例中，islice方法从文件中每次读取1000行，适合处理超大文件或需要分批次处理数据的场景。
五、读取CSV文件
对于结构化的CSV文件，可以使用Python标准库中的csv模块进行逐行读取。以下是一个示例：
import csv
with open('example.csv', 'r') as file:
reader = csv.reader(file)
for row in reader:
print(row)
在这个示例中，csv.reader对象可以逐行读取CSV文件，并将每行内容作为列表返回，便于进一步处理。
六、读取特定格式文件
对于特定格式的文件（如JSON、XML等），可以使用相应的库来进行逐行读取。以下是读取JSON文件的示例：
import json
with open('example.json', 'r') as file:
for line in file:
data = json.loads(line)
print(data)
在这个示例中，json.loads方法用于将每行内容解析为JSON对象，便于进一步处理。
七、异步读取文件
对于需要提高读取速度的场景，可以使用aiofiles库进行异步读取。以下是一个示例：
import aiofiles
import asyncio
async def read_file():
async with aiofiles.open('example.txt', 'r') as file:
async for line in file:
print(line.strip())
loop = asyncio.get_event_loop()
loop.run_until_complete(read_file())
在这个示例中，aiofiles库提供异步文件操作，结合asyncio库实现异步读取文件，适合处理高并发或需要提高读取速度的场景。
八、总结
在Python中，逐行读取文件的方法多种多样，包括使用readline()、readlines()、for循环遍历文件对象等。根据文件大小、内存占用和处理需求，可以选择合适的方法来逐行读取文件内容。对于大文件，推荐使用内存友好的方法（如for循环遍历文件对象）；对于结构化文件（如CSV、JSON等），可以使用相应的库进行逐行读取；对于需要提高读取速度的场景，可以结合异步操作进行文件读取。通过合理选择和使用这些方法，可以高效地处理各种类型和大小的文件。
相关问答FAQs：
如何使用Python读取文本文件的每一行？
使用Python的内置open()函数可以轻松读取文本文件的每一行。通过将文件以读取模式打开，并使用readline()或readlines()方法，可以逐行处理文件数据。示例代码如下：
with open('filename.txt', 'r') as file:
for line in file:
print(line.strip()) # 使用strip()去掉行末的换行符
在读取文件时如何处理空行或异常情况？
在读取文件时，可能会遇到空行或者文件不存在的情况。可以在读取的过程中加入条件判断，确保程序的稳定性。例如，可以在循环中检查行是否为空，或者使用try-except结构来捕获可能的异常。示例代码如下：
try:
with open('filename.txt', 'r') as file:
for line in file:
if line.strip(): # 仅处理非空行
print(line.strip())
except FileNotFoundError:
print("文件未找到，请检查文件路径。")
如何将读取到的数据存储到列表中？
将读取到的数据存储到列表中非常简单。可以使用readlines()方法直接将所有行读入到一个列表中。每一行会作为列表的一个元素。示例代码如下：
with open('filename.txt', 'r') as file:
lines = file.readlines()
lines = [line.strip() for line in lines if line.strip()] # 去掉空行
print(lines)
这种方法使得后续的数据处理更加方便。
