python yield 大文件读取

最新推荐文章于 2026-04-17 22:38:06 发布

原创最新推荐文章于 2026-04-17 22:38:06 发布 · 651 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#python #生成器

收录于

python 同时被 2 个专栏收录

16 篇文章

订阅专栏

笔记

15 篇文章

订阅专栏

本文介绍了一种使用Python处理大文件的方法，通过定义一个生成器函数`read_file`，利用`yield`关键字逐块读取文件内容，避免一次性加载整个文件到内存中，有效防止内存溢出。

大文件读取 python yield

def read_file(fpath):
   BLOCK_SIZE = 1024
   with open(fpath, 'rb') as f: 
       print(f)
       while True:
           block = f.read(BLOCK_SIZE)
           if block:
               yield block
           else:
               return

a = read_file('E:\odoo14\odoo\dlfs_addons.rar')
print(a)
print(next(a))
print(next(a))
print(next(a))
print(next(a))
print(next(a))


![效果图](https://img-blog.csdnimg.cn/20210310094427927.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbnNrYW5n,size_16,color_FFFFFF,t_70)
###  将文件使用 yield 生成一个可迭代的 generator 对象，然后不停迭代，传输文件流，此操作不会造成超大文件的读取后内存崩溃。