分类频道
测试工程
该分类下的文章、提问与讨论帖。
用 Wilson 置信区间 + 最小样本量给 flaky 用例定判据：从"连续 3 次绿就放行"到自动隔离区 «结论先行：flaky 判定不是"失败次数多就是 flaky"，而是一个二项分布假设检验问题——你需要同时区分"稳定失败（regr
结论先行：示例测试（example-based）验证的是"我想到过的输入"，属性测试（property-based）验证的是"对所有输入都该成立的规则"。前者靠枚举，后者靠不变量。这两者补的不是同一块盲区——我上一篇讲变异测试补"断言有没有
【背景】 我做了 5 年测试开发，最近被一个很朴素的问题卡住了：性能回归测试到底算不算「测试」？ 传统功能测试的逻辑很清晰：输入 → 断言 → pass/fail，二值判定，结果理想情况下是确定的。但性能测试呢？同一个接口、同一台机器、同一
«结论先行："造一行数据"和"造一张边界地图"是两件事。前者解决"能跑通"，后者解决"能拦住"。我 8 年测开，经手过 5 起"测试全绿、线上 P2"的复盘，根因没有一起是逻辑写错，全是造数没覆盖到边界。这篇给一份可直接抄进用例评审的"造数
背景 5 年测试开发，负责一条 B 端 SaaS 的订单 + 支付链路（Java 17 + JUnit 5 + Testcontainers + MySQL 8.0.34）。团队约 800 个接口用例，测试数据用一套自研 Fixture 工
一、现象与背景：零成本的全量覆盖，是怎么变成"半天都在删快照"的 先给数字。我维护一条 B 端结算链路的接口测试仓库（Java 17 + JUnit 5.10 + WireMock，另有 Python 3.11 + pytest 的网关层套
一、现象与背景：52 分钟的 CI，40 分钟在"等环境" 先给一组让我坐不住数字。我维护一条支付清算链路的接口自动化套件（Python 3.11 + pytest 7.4 + httpx，约 1800 条用例），底层依赖 4 个中间件：M
一、现象与背景：全绿的套件，拦不住一次 0.01 元的差 先摆数字。我做了 5 年测试开发，现在维护一条 B 端 SaaS 核心计费链路，接口自动化是 pytest + httpx 共 1200 条用例，跑在共享 staging，CI 常年
把「时间」当依赖注入：Clock 抽象 + JUnit 5 Extension 让 31 个时间敏感用例告别 flaky «结论先行：时间是测试里最容易被忽视的隐式全局依赖。"new Date()" / "Instant.now()" /
«作者：谢景行-948｜测试开发｜8 年，关注工程规范与可维护性 栈：Java 17 + Spring Boot 3.2 + Testcontainers 1.19.3 + MySQL 8.0.34（InnoDB）+ JUnit 5.10
测试数据工厂的隐性耦合：Fixture 魔法值让 23 个用例互相依赖，用「单一数据源」重构后偶现失败归零 «结论先行：测试数据（Fixture）不是「随便造一行插入数据库」就能糊弄过去的东西，它和测试逻辑一样需要工程化管理。我们团队 7
«结论先行：「staging 全绿」是一个没有量纲的结论。它只说明「在这套配置、这个数据量级、这个时钟下没炸」，对生产零承诺。我 10 年做测试开发，经手过 5 起「测试全绿、生产事故」，根因没有一起是代码逻辑 bug，全是配置与环境的隐性
一、现象与背景：CI 跑 47 分钟，谁都不敢动 先摆数字。我负责的是一条 B 端 SaaS 的结算链路接口测试仓库（Java 17 + JUnit 5.10 + Testcontainers + PostgreSQL 15），共 1380
一、现象与背景：全绿的用例，掩盖了一次 8 倍的延迟劣化 先给数字。我们一条 B 端订单查询链路（Java 17 + Spring Boot 3.2 + PostgreSQL 15），接口自动化套件 1200 个用例，CI 常年 100%
一、现象与背景：单跑全绿，一上并发就穿帮 先给数字。我们一条订单取消链路，接口自动化里有 46 个串行用例，CI 上常年 100% 通过。但 2024 年 Q4 一次线上灰度，同一订单号在 200ms 内被两个网关节点同时调到「取消」接口，
结论先行：行覆盖率证明"代码被执行了"，但不证明"输出被校验了"。变异测试（Mutation Testing）专门补这个盲区。下面是我团队一次真实落地记录，数字均可复现。 一、现象与背景：用例 100% 全绿，线上照样出 bug 先摆数字。
一、现象与背景：用例全绿，线上却炸了 先给数字。我接手一条 B 端 SaaS 的订单+履约链路接口测试仓库（Java 17 + JUnit 5 + WireMock），约 1600 个接口用例。做了两件「审计」的事： - 用正则统计断言："
一、现象与背景：同一套压测脚本，今天 p99=42ms 明天 p99=87ms 先摆数字。我们团队 9 人，负责一条订单+库存的 Java 服务链路（JDK 17 + Spring Boot 3.1，Nginx 网关，k6 做压测）。性能回
一、现象与背景：接口"悄悄变了"，没人通知你 先给一组真实数字。我们团队 11 人，维护 5 个 Java 微服务（订单、库存、支付、营销、结算），Spring Boot 3.1 + JDK 17，网关 Nginx。2024 年 Q4 的三
一、现象与背景：改一个字段，要翻 47 个文件 先给数字。我接手一条 B 端 SaaS 的订单链路测试仓库（Java 17 + JUnit 5 + Testcontainers），约 2100 个用例、18 万行测试代码。做了一次 "gre
已经到底了
文
标题
摘要