深入压测(05)流量染色、影子数据与副作用隔离
一次生产压测可以同时做到「运行真实代码」和「只写测试数据」。为此要在入口识别测试流量,沿同步调用、线程切换和异步消息传递测试上下文,并在执行副作用前验证路由。业务结果和流量标签需要分别核对。
在入口建立可信上下文
压测平台使用专用身份,入口校验该身份与已启用的运行编号,再由可信组件建立内部上下文。上下文保存用途、运行编号和过期条件。身份限定谁能开启测试流量,运行编号限定能用的场景和数据,并用于收尾对账。公网传入的同名字段由入口按已授权身份处理,压测权限与普通请求的身份独立。
OpenTelemetry Baggage 可携带跨服务的观测信息。其规范说明 Baggage 缺少内建完整性检查,也可能被自动传给第三方。可以用经允许的字段关联链路,写隔离仍应依赖可信的身份与路由校验。涉及外部目标时专门限定带出的字段。OpenTelemetry Baggage
同步 RPC 传受控元数据。线程池应显式传播、恢复并清理上下文,防止复用线程时串到后一个任务。消息属性或事件信封需要携带业务运行上下文。重试、重投、延迟事件、批处理和死信回放都可能脱离原线程,必须从持久化字段恢复,同时核对测试主体与目的地是否一致。跨批次合单时,应先按运行和流量类别拆开。
每个副作用出口都需要隔离
| 出口 | 常用隔离单位 | 需要验收的细节 |
|---|---|---|
| 数据库 | 影子库或影子表 | 事务内所有表、查询与写入走同一侧,测试身份无正式写权限 |
| 缓存和搜索 | 独立命名空间或实例、影子索引 | 缓存失效、索引更新、通配检索及批量删除遵守同一边界 |
| MQ 和任务调度 | 影子主题、分组和任务命名空间 | 正常消费、重试、DLQ 与补偿保持运行归属 |
| 支付、物流、短信 | 经授权的沙箱或测试替身 | 拦住真实扣款、履约、回调和通知,验证替身上的状态 |
| 数仓与运营报表 | 测试数据集或显式排除 | 检查 CDC、离线重算和报表汇总不会混入合成订单 |
影子表与线上表结构相同的价值,是让业务 SQL 和索引路径尽可能一致。两张表若共享数据库实例,仍会竞争 CPU、磁盘、日志和连接。遇到需要强隔离的场景可以用独立数据库或集群,同时记录因此消失的争用。阿里云的全链路方案展示了标记随异步消息及中间件传播再落影子区的做法。阿里云 PTS 核心要素
真实规则可能有兜底路由。ShardingSphere Shadow 文档描述了未匹配影子规则的 DML 回到生产库的行为。验证时可用测试身份提交一条缺少运行上下文的请求。对于不可逆写入,边界应报错并留下日志,正式库写权限还需要拦住误路由。正常流量依然经过原有的身份与路由判断。Apache ShardingSphere Shadow
以对账验收染色覆盖率
根据实际运行环境,为跨线程、回调、连接池和重试设计探针。同一批合成订单需要能用业务 ID 从网关对到账本,trace 用于辅助解释经过的路径。
| 样本 | 应检查的结果 |
|---|---|
| 合法测试身份与有效运行编号 | 同步写、消息、消费和终态均落在影子区 |
| 测试身份携带缺失、过期或错配的上下文 | 在约定边界被拒绝,无正式副作用 |
| 普通身份携带测试字段 | 身份校验不授予测试权限,也未进入影子区 |
| 消息重投、死信回放与补偿 | 运行归属可追溯,最多一次业务效果,落点仍在影子区 |
| 停压期间仍在途的写入 | 能按运行编号排空或隔离,正式侧无对应测试记录 |
一次测到 1,000 笔受理订单,最终应核对这些订单 ID 的受理数、事件记录、消费尝试、有效终态和残留;库表、缓存、索引、通知及报表可据预定标识查异常样本。消息投递次数可以大于业务完成数,统计单位和期望去重位置应提前写进校验。停压后将运行资源按归属清理,先保存证据并确认迟到回调、重试与 DLQ 能在过期后按规则处理。直接删表会抹去对账依据,也可能让在途写落到错误位置。
系列导航
| 上一篇 | 系列目录 | 下一篇 |
|---|---|---|
| 怎样划定全链路边界 | 深入压测 | 升压、稳压、过载和恢复 |
