FA8# 流量录制回放功能设计点归纳

瓜农老梁

共 1061字,需浏览 3分钟

 ·

2022-01-23 05:19


本文对流量录制和回放常见的方案、用途以及设计原理做个归纳整理。

一、解决的问题

1.回归测试覆盖率

测试用例不足或者遗漏难以覆盖所有场景,导致回归测试费时费力,线上稳定存在隐患,通过真实流量录制在回归测试时进行覆盖。

  • 回归特定接口和链路
  • 回归特定业务场景
  • 全量回归特定业务线

2.与全链路压测闭环

解决全链路压测的数据准备问题,通过流量录制和回放系统与压测系统打通,形成从流量录制到压测闭环。

  • 定向录制某个链路接口线上流量
  • 对录制流量进行压测打标
  • 增压发起全链路压测

3.数据的其他用处

  • 抽取线上流量测试环境调试复现
  • 其他用到线上请求数据的地方
二、常用方案


量录制的方案和采用技术各种各样,下面梳理两种常用的技术方案。

1.GoReplay

https://github.com/buger/goreplay

实现原理

依赖数据包捕获函数库(Packet Capture library)通过抓网络流量包,实现流量录制功能,go语言编写。

优点归纳

  • 支持流量录制
  • 支持流量回放
  • 支持流量过滤
  • 支持插件机制
  • 支持重写(URL、参数、Header等)
  • 支持录制限流
  • 抓包实现与服务语言无关

缺点归纳

  • 只支持HTTP,其他协议需要二次开发

2.jvm-sandbox-repeater

https://github.com/alibaba/jvm-sandbox-repeater

实现原理

实现Java Instrumentation接口编写Agent,通过jvm对外编程接口规范JVMTI,实现对jvm运行信息的获取以及执行程序的加载,java开发。

优点归纳

  • 流量录制和回放
  • 快速扩展插件机制
  • 已支持众多插件支持http/dubbo/mybatis/java/redis等

缺点归纳

  • 需要侵入运行服务的jvm
  • 依赖虚拟机
三、实现架构图

下图为基于上述两种方案的设计简图,通过运行一个录制代理ReplayAgent的方式实现。

功能点归纳

  • 录制代理ReplayAgent负责接收控制台指令对GoReplay或sandbox-repeater管控

  • 录制代理上报录制数据流量和监控信息

  • 控制台对流量录制管理 例如:数据完整性、录制任务状态和结果、录制时间、录制流量过滤

  • 控制台对流量回放管理 例如:回放结果状态、时长设定、回放速度等

  • 控制台与压测平台、回归测试平台的通信


浏览 80
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报