本文共 622 字，大约阅读时间需要 2 分钟。

Python读取大文件

用Python读取2GB文件的时候，用普通方式读取报错MemoryError，说明该无文件无法被装载在内存中发生溢出了。

read和readlines都是将整个文件加入到内存中，文件较大时，会引发MemoryError

逐行读取

with open('filename', 'r', encoding = 'utf-8') as f:    while True:        line = f.readline()  # 逐行读取        if not line:  # 到 EOF，返回空字符串，则终止循环            break        print(line)

指定长度读取

while True:        data = f.read(1024)  # 每次读取指定的长度        if not data:            break        print(data)

自动管理

with open('filename', 'r', encoding = 'utf-8') as f:    for line in f:        do_something(line)

with：语句句柄负责打开和关闭文件（包括在内部块中引发异常时）

转载地址：http://nmrlz.baihongyu.com/