web test Grinder / nGrinder / ngrinder / gor / tcpcopy

向右看齐 2022-04-12 12:58 179阅读 0赞

https://github.com/naver/ngrinder/wiki/User-Guide

nGrinder安装指南

http://www.cnblogs.com/yzuzhang/p/5692771.html

https://my.oschina.net/u/939534/blog/102878

利用nGrinder进行性能测试操作指南

http://ju.outofmemory.cn/entry/197566

**大促系统全流量压测及稳定性保证——京东交易架构分享（含PPT）**

http://toutiao.com/i6301184939064820226/

**终极 Web 应用性能和压力测试工具 Gor**

http://sanyue.iteye.com/blog/2221036

### Web 应用压力测试工具有很多，比如 Apache ab，[node-ab][]，Apache JMeter, LoadRunner, httperf。但是这些工具都没能解决一个问题： ###

**如何正确模拟生产环境的流量**

如今 Web 应用的架构变得非常复杂，内部包含复杂的各种负载均衡、 服务和 RPC 调用关系，简单的发送 GET 请求到某些 URL 或者 API 接口完全无法模拟真实的流量。假如回放 HTTP 日志，操作又异常麻烦。Tcpcopy 虽然能够复制实时流量，但是操作也很复杂。之前的 [亚马逊云平台的迁移][Link 1] 就用到了 Gor 这个工具。

http://www.oschina.net/p/tcpcopy

tcpcopy是一种应用请求复制（基于tcp的packets）工具，其应用领域较广，目前已经应用于国内各大互联网公司。

总体说来，tcpcopy主要有如下功能：

1）分布式压力测试工具，利用在线数据，可以测试系统能够承受的压力大小（远比ab压力测试工具真实地多）,也可以提前发现一些bug

2）普通上线测试，可以发现新系统是否稳定，提前发现上线过程中会出现的诸多问题，让开发者有信心上线

3）对比试验，同样请求，针对不同或不同版本程序，可以做性能对比等试验

4）利用多种手段，构造无限在线压力，满足中小网站压力测试要求

5）实战演习（架构师必备）

tcpcopy可以用于实时和离线回放领域，并且tcpcopy支持mysql协议的复制，开源二年以来，功能上越来越完善。

如果你对上线没有信心，如果你的单元测试不够充分，如果你对新系统不够有把握，如果你对未来的请求压力无法预测，tcpcopy可以帮助你解决上述难题。

### Gor 是 Web 应用压力测试的完美方案 ###

我一直在找一个简单又方便的解决方案，直到找到了 Gor 。Gor 是用 Golang 写的一个 HTTP 实时流量复制工具。只需要在 LB 或者 Varnish 入口服务器上执行一个进程，就可以把生产环境的流量复制到任何地方，比如 Staging 环境、Dev 环境。完美解决了 HTTP 层实时流量复制和压力测试的问题。

### Gor 的功能 ###

Gor 支持流量的放大和缩小、频率限制，这样不需要搭建和生产环境一致的服务器集群也可以正确测试。Gor 还支持根据正则表达式过滤流量，这意味着可以单独测试某个 API 服务。还可以修改 HTTP 请求头，比如替换 User-Agent, 或者增加某些 HTTP Header 。

Gor 还可以把请求记录到文件，以备回放和分析。Gor 支持和 ElasticSearch 集成，将流量存入 ES 进行实时分析。

### Gor 的常用命令 ###

**简单的 HTTP 流量复制：**

gor –input-raw :80 –output-http “http://staging.com”

**HTTP 流量复制频率控制：**

gor –input-tcp :28020 –output-http “http://staging.com|10″

**HTTP 流量复制缩小：**

gor –input-raw :80 –output-tcp “replay.local:28020|10%”

**HTTP 流量记录到本地文件：**

gor –input-raw :80 –output-file requests.gor

**HTTP 流量回放和压测：**

gor –input-file “requests.gor|200%” –output-http “staging.com”

**HTTP 流量过滤复制：**

gor –input-raw :8080 –output-http staging.com –output-http-url-regexp ^www.

### 最后 ###

这个 Golang 写的 Gor 是开源的，意味着可以方便的集成到自己的[架构][Link 2]中，可以用在压力测试平台、实时流量分析、应用层防火墙等等方面。

### 有用的链接 ###

[https://github.com/buger/gor][https_github.com_buger_gor]  
[https://github.com/doubaokun/node-ab][node-ab]  
[https://github.com/session-replay-tools/tcpcopy][https_github.com_session-replay-tools_tcpcopy]  
[https://github.com/httperf/httperf][https_github.com_httperf_httperf]  
[https://github.com/buger/gor/blob/master/ELASTICSEARCH.md][https_github.com_buger_gor_blob_master_ELASTICSEARCH.md]

**ngrinder**

参照www.cubrid.org/wiki\_ngrinder/entry/installation-guide

1、下载安装Controller，下载地址：sourceforge.net/projects/ngrinder/files

2、下载Agent；配置NGRINDER\_AGENT\_HOME，C:\\DOCUME~1\\ADMINI~1\\.grinder\_agent

3、安装monitor

http://www.iteye.com/topic/1127810

nGrinder是一个基于Grinder（http://grinder.sourceforge.net/）开发的一个非常易于管理和使用的，开源的性能测试系统。   
  
它是由一个controller和连接它的多个agent组成，用户可以通过web界面管理和控制测试，以及查看测试报告，controller会把测试分发到一个或多个agent去执行。用户可以设置使用多个进程和线程来并发的执行该脚本，而且在同一线程中，来重复不断的执行测试脚本，来模拟很多并发用户。   
  
nGrinder的测试是基于一个python的测试脚本，用户按照一定规则编写测试脚本以后，controller会将脚本以及需要的其他文件分发到agent，用Jython执行。并在执行过程中收集运行情况、响应时间、测试目标服务器的运行情况等。并保存这些数据生成运行报告，以供以后查看。   
  
nGrinder的一大特点就是非常容易使用，安装也非常容易，可以做到开箱即用，测试用户也可以很容易就开始测试任务。当然，如果想执行一些比较复杂场景的性能测试，就需要测试人员对python有一定认识。   
  
项目网址：   
http://www.nhnopensource.org/ngrinder/   
  
index页面：   
  
![点击查看原始大小图片][6638ca73-6e28-372b-b724-f9bebc450e3a.gif]  
  
test list页面   
  
![点击查看原始大小图片][42c33480-e6d8-33ce-ac95-5976c2676e83.gif]  
  
test配置页面   
  
![点击查看原始大小图片][747ed18c-b4d9-3db7-ad97-1b290b7c400c.gif]  
  
  
test执行页面   
  
![点击查看原始大小图片][33e15e40-4cc9-3f19-8168-4c70919a6fb0.gif]  
  
test report页面   
  
![点击查看原始大小图片][e7fd98ac-8077-3532-aa23-fe44ed71c4c2.gif]  
  
script编辑页面   
  
![点击查看原始大小图片][f2ea53fc-42ae-3c4c-bcfe-caabaeb7b1a7.gif]

end

[node-ab]: https://github.com/doubaokun/node-ab
[Link 1]: http://blog.eood.cn/aws_cloud_migration
[Link 2]: http://blog.eood.cn/category/architecture
[https_github.com_buger_gor]: https://github.com/buger/gor
[https_github.com_session-replay-tools_tcpcopy]: https://github.com/session-replay-tools/tcpcopy
[https_github.com_httperf_httperf]: https://github.com/httperf/httperf
[https_github.com_buger_gor_blob_master_ELASTICSEARCH.md]: https://github.com/buger/gor/blob/master/ELASTICSEARCH.md
[6638ca73-6e28-372b-b724-f9bebc450e3a.gif]: /images/20220412/aee086a886eb4cdbb8ea83251c708a01.png
[42c33480-e6d8-33ce-ac95-5976c2676e83.gif]: /images/20220412/6a07a47b00e94a29a802ec7e7585bd96.png
[747ed18c-b4d9-3db7-ad97-1b290b7c400c.gif]: /images/20220412/955d387af20a473a81dcd91c24698a84.png
[33e15e40-4cc9-3f19-8168-4c70919a6fb0.gif]: /images/20220412/0c3a41fd046b4dfa8dc7d78d976131d4.png
[e7fd98ac-8077-3532-aa23-fe44ed71c4c2.gif]: /images/20220412/80a66559bb314abfab56f75517184283.png
[f2ea53fc-42ae-3c4c-bcfe-caabaeb7b1a7.gif]: /images/20220412/0117dd53b0c142a8bd5c3cc0db02f93a.png