返回专栏
专栏 ·

6.3 高效迭代工具箱:itertools 标准库核心函数在数据清洗与组合计算中的实战

作者: 九路 共 12 章 · 48 小节

欢迎回到 HelloWorld 技术社区(www.helloworld.net) 《Python 现代开发实战》专栏。

标准库 itertools 全部由底层 C 语言编写,是处理流式数据的“瑞士军刀”,内存占用极低且执行速度飞快:

import itertools

# 1. batched (Python 3.12+ 新增!):将海量任务按固定批次切分(如每 500 条批量写入一次数据库)
user_ids = range(1, 13)
for batch in itertools.batched(user_ids, 5):
    print("批量入库分片:", batch)  # (1, 2, 3, 4, 5), (6, 7, 8, 9, 10), (11, 12)

# 2. chain:将多个分散的列表/生成器无缝串联成一个流,零内存拷贝
page1 = ["post_1", "post_2"]
page2 = ["post_3", "post_4"]
for post in itertools.chain(page1, page2):
    print("串联处理:", post)

# 3. groupby:对已排序的日志按日期分组聚合(注意:使用前必须先按分组键排序!)
logs = [("2026-11-20", "login"), ("2026-11-20", "post"), ("2026-11-21", "logout")]
for day, group in itertools.groupby(logs, key=lambda x: x[0]):
    print(day, "事件数:", len(list(group)))

💬 HelloWorld 社区实战打卡

使用 itertools.islice 从一个无限斐波那契生成器中,截取第 10 个到第 15 个数字。带 #Python专栏打卡 晒出你的代码!