Python 官方文档:入门教程 => 点击学习
python中读取文件最常用的方式是: for line in open('myfile','r').readlines(): do_something(line) When this is done, however
python中读取文件最常用的方式是:
for line in open('myfile','r').readlines():
do_something(line)
When this is done, however, the readlines() function loads the entire file into memory as it runs.
在这种情况下,在运行的时候,readlines()函数将整个文件加载到内存中。
如果这个文件很大的话,就会影响到程序运行的速度,甚至会导致程序挂掉
目前我查到的可供选择的解决办法:
#BUF_SIZE = 1024
#bigfile = open('tmplog.log','r')
#tmp_lines = bigfile.readlines(BUF_SIZE)
#while tmp_lines:
# for line in tmp_lines:print line
# tmp_lines = bigfile.readlines(BUF_SIZE)
一次读一部分数据!
法2.
for line in fileinput.input(['tmplog.log']):
print line
利用fileinput模块处理!
--结束END--
本文标题: python打开大文件整理
本文链接: https://www.lsjlt.com/news/188332.html(转载时请注明来源链接)
有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341
下载Word文档到电脑,方便收藏和打印~
2024-03-01
2024-03-01
2024-03-01
2024-02-29
2024-02-29
2024-02-29
2024-02-29
2024-02-29
2024-02-29
2024-02-29
回答
回答
回答
回答
回答
回答
回答
回答
回答
回答
0