标签频道
pytest
该标签下的文章、提问与讨论帖。
一、现象或背景(遇到什么、影响多大,带具体数字或规模) 做了 8 年测试开发,最近被 PM 问了一句特别扎心的话:「你们接口自动化跑了 2000 条用例,CI 要 40 分钟,但上个月 3 次线上事故,没有一次是被接口自动化拦住的——那这
现象或背景 在接口自动化测试中,时间依赖是最难处理的隐式全局依赖之一。我负责的结算/账务链路接口套件包含 300 条用例,其中 40 条强依赖「真实时间」: - 订单 T+1 才允许发起结算(12 条)、优惠券次日 00:00 生效(9 条
背景:我团队正在使用 pytest + pytest-xdist 进行接口自动化测试,其中包含大量时间依赖用例(如 biz_date 注入、时间戳校验等)。在并行执行时,这些用例频繁出现不可复现的失败,疑似由于时间依赖变量在并行 worke
背景 做了 3 年接口自动化(pytest + httpx,约 2000 条用例,跑在多人共享的 staging 上)。其中约 15% 的用例涉及异步链路:提交任务 → 后台 worker 处理 → 查询状态接口返回终态(SUCCESS /
背景 我维护一条 B 端 SaaS 的接口自动化(Python 3.11 + pytest 7.4 + httpx,约 2000 条用例),跑在 5 人共享的 staging 上(MySQL 8.0 + Redis 7.2,GitLab C
«结论先行:接口自动化失败后最贵的是「现场消失」,不是「用例红了」。环境是共享的、数据是流动的、日志是滚动覆盖的——失败发生后的前 30 秒,是证据还完整的唯一窗口。把「事后复现」改成「当时保全」,排障时间能从平均 40 分钟压到 4 分钟
【背景】 做了 8 年测试开发,最近被 PM 问了一句特别扎心的话:「你们接口自动化跑了 2000 条用例,CI 要 40 分钟,但上个月 3 次线上事故,没有一次是被接口自动化拦住的——那这 2000 条到底在保护谁?」 我复盘了一下那
背景 我负责一条 B 端 SaaS 的接口自动化,pytest 7.4 + httpx,约 800 条用例,跑在 50 个并发 worker 共享的 staging 上(MySQL 8 同库 + Redis 7 + Kafka 1 个 to
【背景】 我们团队 8 人,pytest + httpx 接口自动化约 1600 条用例,跑在共享 staging(MySQL 8 + Redis 7)。前两个月已经搭好了 flaky 判定 + 隔离区(quarantine job,--r
背景 我做了 3 年测试开发,维护一条 B 端 SaaS 的接口自动化:pytest + httpx,约 1800 条用例,跑在 4 人共享的 staging(MySQL 8 + Redis 7)。近 12 个月这条链路出了 3 起 P2/
«结论先行:跨进程接口测试里的时间依赖,靠"mock 时钟"是够不着的——mock 只能替换本进程内的时钟调用,替换不了对端服务里的 "time.time()"。真正可落地的做法是把「业务时间」提升为接口契约的一部分:测试侧用请求头注入 "
背景 15 年测试开发,负责一条 B 端 SaaS 订单+结算链路的接口自动化仓库:Python 3.11 + pytest 7.4 + httpx,约 1200 个用例,跑在共享 staging(MySQL 8 + Redis 7)。近半
用 Wilson 置信区间 + 最小样本量给 flaky 用例定判据:从"连续 3 次绿就放行"到自动隔离区 «结论先行:flaky 判定不是"失败次数多就是 flaky",而是一个二项分布假设检验问题——你需要同时区分"稳定失败(regr
结论先行:示例测试(example-based)验证的是"我想到过的输入",属性测试(property-based)验证的是"对所有输入都该成立的规则"。前者靠枚举,后者靠不变量。这两者补的不是同一块盲区——我上一篇讲变异测试补"断言有没有
一、现象与背景:零成本的全量覆盖,是怎么变成"半天都在删快照"的 先给数字。我维护一条 B 端结算链路的接口测试仓库(Java 17 + JUnit 5.10 + WireMock,另有 Python 3.11 + pytest 的网关层套
【背景】 我维护一条 B 端 SaaS 的接口自动化:Python 3.11 + pytest 7.4 + httpx,用例 1800+ 条,跑在 4 人共享的 staging 上(MySQL 8 + Redis 7 + 1 个 Kafka
文
标题
摘要