python中open函数是不是一次性载入内存？

Question

背景：语料库，词袋

形如：

dictionary=corpora.Dictionary(line.split() for line in open(mycorpora.txt))

文本文件是不是一次性载入内存？

Answer 1

open 不会
for ... in 不会

文件读取貌似只有open(xxx).read()会一次性读完整个文件内容，其他方式(readlines之类的)都不会

但是corpora.Dictionary 是什么行为就不清楚了

Answer 2

line.split() for line in open(mycorpora.txt)会返回一个generator给corpora.Dictionary.

We can use the generator expressions as arguments to various functions
that consume iterators.

sum(((x*x for x in range(10))) 285
When there is only one argument to the calling function, the
parenthesis around generator expression
can be omitted.

sum(x*x for x in range(10)) 285

而open函数只是给你个handle，他可不知道你要去读还是写。