专栏 · Python

Python 工程入门:从第一段脚本到可交付的命令行工具

用一个网站日志分析工具串起 Python 工程入门。从读文件、提取路径和状态码开始,逐步处理大文件、计算 P95、导出报表,并写测试和打包。每节用合成数据复现结果。

作者: 九路 共 5 章 · 16 小节
开始阅读 从第一章开始,按目录循序阅读。

内容目录

5 章 · 16 小节

第一章 · 写出能解决问题的脚本4 个小节

  1. 1.1 专栏导读|用 Python 做一个网站日志分析工具阅读
  2. 1.2 用 Python 读网站日志,统计请求量、404 和热门路径阅读
  3. 1.3 用 Python 字典和集合按请求方法与路径分组阅读
  4. 1.4 把 Python 日志脚本拆成解析、统计和输出函数阅读

第二章 · 处理真实数据3 个小节

  1. 2.1 用 Python 解析 JSON Lines 和带时区的时间戳阅读
  2. 2.2 用 Python 处理空行、坏 JSON 和缺失字段阅读
  3. 2.3 用 Python 逐行读取大日志,并实测内存差异阅读

第三章 · 做成命令行工具3 个小节

  1. 3.1 用 argparse 给 Python 日志工具加文件和时间参数阅读
  2. 3.2 用 Python 统计日志错误率、P95 和热门接口阅读
  3. 3.3 用 Python 把日志报表导出为 CSV 和 JSON阅读

第四章 · 让代码可以放心修改3 个小节

  1. 4.1 用 pytest 测试 Python 日志的解析、筛选和统计阅读
  2. 4.2 用类型标注和数据类重构 Python 日志工具阅读
  3. 4.3 用 pyproject.toml 管理 Python 依赖和 hwlog 命令入口阅读

第五章 · 用工具回答实际问题3 个小节

  1. 5.1 用 Python 对比两个时间窗口,排查 5xx 上升阅读
  2. 5.2 用请求量和 P95 定位慢接口阅读
  3. 5.3 整理 README 和样例日志,发布 hwlog 0.1.0阅读