FA8# 流量录制回放功能设计点归纳

引言

本文对流量录制和回放常见的方案、用途以及设计原理做个归纳整理。

一、解决的问题

1.回归测试覆盖率

测试用例不足或者遗漏难以覆盖所有场景，导致回归测试费时费力，线上稳定存在隐患，通过真实流量录制在回归测试时进行覆盖。

• 回归特定接口和链路
• 回归特定业务场景
• 全量回归特定业务线

2.与全链路压测闭环

解决全链路压测的数据准备问题，通过流量录制和回放系统与压测系统打通，形成从流量录制到压测闭环。

• 定向录制某个链路接口线上流量
• 对录制流量进行压测打标
• 增压发起全链路压测

3.数据的其他用处

• 抽取线上流量测试环境调试复现
• 其他用到线上请求数据的地方

二、常用方案

流量录制的方案和采用技术各种各样，下面梳理两种常用的技术方案。

1.GoReplay

https://github.com/buger/goreplay

实现原理

依赖数据包捕获函数库（Packet Capture library）通过抓网络流量包，实现流量录制功能，go语言编写。

优点归纳

• 支持流量录制
• 支持流量回放
• 支持流量过滤
• 支持插件机制
• 支持重写（URL、参数、Header等）
• 支持录制限流
• 抓包实现与服务语言无关

缺点归纳

• 只支持HTTP，其他协议需要二次开发

2.jvm-sandbox-repeater

https://github.com/alibaba/jvm-sandbox-repeater

实现原理

实现Java Instrumentation接口编写Agent，通过jvm对外编程接口规范JVMTI，实现对jvm运行信息的获取以及执行程序的加载，java开发。

优点归纳

• 流量录制和回放
• 快速扩展插件机制
• 已支持众多插件支持http/dubbo/mybatis/java/redis等

缺点归纳

• 需要侵入运行服务的jvm
• 依赖虚拟机

三、实现架构图

下图为基于上述两种方案的设计简图，通过运行一个录制代理ReplayAgent的方式实现。

功能点归纳

• 录制代理ReplayAgent负责接收控制台指令对GoReplay或sandbox-repeater管控
• 录制代理上报录制数据流量和监控信息
• 控制台对流量录制管理 例如：数据完整性、录制任务状态和结果、录制时间、录制流量过滤
• 控制台对流量回放管理 例如：回放结果状态、时长设定、回放速度等
• 控制台与压测平台、回归测试平台的通信