Python 教程 / 理解迭代器、yield 与生成器消费

迭代器每次提供下一个元素,生成器则让你用 yield 编写这种按需推进的行为。它们记录消费位置,已经取出的值不会自动重来;需要再次完整读取时,要保存结果或重新创建合适的迭代过程。

区分可迭代对象与迭代器

列表是可迭代对象,iter(列表) 创建遍历它的迭代器。next 请求一个值,耗尽后抛出 StopIteration,for 循环会处理这个结束信号。列表本身仍保存数据,可以创建新的遍历,但已经耗尽的那个迭代器不会自己重置。

调用包含 yield 的普通生成器函数时,会得到生成器对象,而不是立刻运行完函数体。下一次请求值时才继续执行,在 yield 处暂停并保留局部状态。机制见Python 官方生成器教程。

逐步消费累计金额

将以下完整代码以 UTF-8 保存为 generators.py,在项目环境执行 python generators.py。若已核对的解释器命令为 python3,则使用 python3 generators.py。本例无第三方依赖:

def running_totals(amounts):
    total = 0
    for amount in amounts:
        total += amount
        yield total

values = running_totals([3500, 8000, 2500])
print(next(values))
print(list(values))
print(list(values))
print(list(running_totals([3500, 8000, 2500])))

预期输出:

3500
[11500, 14000]
[]
[3500, 11500, 14000]

第一次 next 返回 3500。随后 list(values) 从当前位置继续,只收集 11500、14000;再调用一次就得到空列表。最后重新调用 running_totals 创建新生成器,所以能够得到完整的三项累计结果。

total 在每次暂停之间保留;yield 输出的是当前累计值,不是把控制流永远终止。这里输入是列表,因此可以用同一组数重新创建过程;如果上游本身也是已消费的迭代器,仅重新调用外层函数不一定能恢复上游数据。

比较列表存储、延迟计算与重新遍历

第二份完整程序另存为 iterator.py,执行 python iterator.py,保留前一份文件:

values = [1, 2, 3]
iterator = iter(values)
print(next(iterator))
print(list(iterator))
print(list(iterator))
print(list(values))
expression = (n * 2 for n in values)
print(list(expression))

预期输出:

1
[2, 3]
[]
[1, 2, 3]
[2, 4, 6]

iterator 走到末尾后是空的,但 values 列表仍为 [1, 2, 3]。生成器表达式使用圆括号,按需计算 n * 2;list(expression) 会消费它并把结果全部存进新列表,再次消费该 expression 不会重新生成一遍。

生成器可避免预先保存所有输出,但原输入若已经是大列表,仍占用相应空间,生成器也可能保持对它的引用。用 list 收集全部结果后,输出本身仍要存储。延迟计算改变求值时机与保管方式,不保证任何场景都更快或使用固定大小内存。

生成器函数的函数体是延迟执行的,但调用前的参数表达式仍会立即求值。生成器表达式的最左侧可迭代部分也有立即求值的规则,因此“所有错误都会延迟”同样不准确。细节见Python 官方生成器表达式说明。

检查延迟异常与资源寿命

  1. 在 generators.py 第一个 print(next(values)) 后再增加一次相同语句,应先输出 3500、11500,之后剩余列表变为 [14000];恢复原来的单次 next。
  2. 只把赋给 values 的第一处输入改为空列表,第一次 next 应抛出 StopIteration,程序会在后续打印前停止。若需要空输入也正常处理,可以明确使用 next(values, 默认值) 或改用 for,而不是忽略所有异常。
  3. 恢复原始输入并重新运行,核对四行结果;再单独运行 iterator.py,确认原列表与已耗尽迭代器的区别。

若把金额换为不支持加法的值,异常可能发生在请求下一项时,而不是创建生成器那一刻。应把相应的消费步骤也放进需要处理的异常边界;仅包住生成器创建不等于覆盖整个处理过程。

文件生成器还涉及何时关闭文件。只从迭代中 break,并不能普遍保证所有迭代器所持资源立即释放。可以由调用者用 with 管理文件并在块内消费,或为自己创建的生成器明确安排关闭,避免依赖垃圾回收时机。文件对象管理可结合with 与文本文件理解;不要把本例纯内存数据的结束行为直接推广到所有外部资源。