minminmsn
minminmsn

TCPCOPY 1.0 安装使用

TCPCOPY 1.0 安装使用


简介

TCPCOPY 是一个 tcp 流量的实时复制工具，其1.0版本由网易工程师 @tcpcopy 开发和维护。一般用来将生产环境的线上流量实时复制到测试环境进行测试。例如新系统上线前，如果我们希望进行一些基本的压力测试，那么我们可以直接利用 tcpcopy 来复制线上的流量过来对系统进行测试，这样的好处是测试数据接近真实水平，且实施起来相对简单。


一，架构

 wKioL1ZyhYmCHx8cAABqy5fkEU8034.gif

二，安装

测试中用到的3台服务器信息如下：

线上服务器 online server       内网IP地址 192.168.0.8/24    外网IP 214.167.0.8/28

测试服务器 test server        内网IP地址 192.168.0.230/24   外网IP 214.167.0.13/28

辅助服务器 assistant server   内网IP地址 192.168.0.219/24   外网IP 214.167.1.76/24

192.168.0.8是线上服务器，192.168.0.230和192.168.0.219是测试环境。我们在192.168.0.8上运行tcpcopy把线上流量拷贝到192.168.0.230，在192.168.0.230上我们通过路由将应答转向

192.168.0.219，在192.168.0.219上把应答丢弃。



第一步，在 online server 192.168.0.8上安装并运行 tcpcopy daemon :

我们从github上下载1.0版本的源码包；

wget https://github.com/session-replay-tools/tcpcopy/archive/1.0.0.tar.gz -O tcpcopy-1.0.0.tar.gz

安装依赖包；

yum -y install libpcap-devel

解压编译和安装；

tar zxvf tcpcopy-1.0.0.tar.gz

cd tcpcopy-1.0.0

./configure （默认raw socket方式抓包）

make 

make install

最后运行 tcpcopy；

/usr/local/tcpcopy/sbin/tcpcopy -x 80-192.168.0.230:80 -s 192.168.0.219 -c 10.10.10.x -d -C 4 -l tcpcopy.log  -P /var/run/tcpcopy.pid


指令说明：

-x 80-192.168.0.230:80将本机上80端口的流量复制到192.168.0.230（测试服务器）的80端口

-s指定intercept进程所在的服务器192.168.0.219。（丢包服务器）

-c修改请求的host地址为10.10.10.x，以便在230测试服务器上设置路由（设置路由是为了将应答转向丢219包服务器）

-C 开启4个进程

-d 以daemon形式运行

-l 记录日志

-P 记录pid

其他参数可以通过/usr/local/tcpcopy/sbin/tcpcopy -h查看


成功运行后可以观察到的网路连接状态：

#ss -an|grep 192.168.0.219

ESTAB      0      0                192.168.0.8:49034         192.168.0.219:36524 

ESTAB      0      0                192.168.0.8:49035         192.168.0.219:36524 

ESTAB      0      0                192.168.0.8:49032         192.168.0.219:36524 

ESTAB      0      0                192.168.0.8:49033         192.168.0.219:36524 



第二步，在 auxiliary server 192.168.0.219上安装并运行 intercept daemon :

从github上下载1.0版本的源码包；

wget https://github.com/session-replay-tools/intercept/archive/1.0.0.tar.gz -O intercept-1.0.0.tar.gz

安装依赖包；

yum -y install libpcap-devel（CentOS6系统直接yum安装即可1.4版本）

注意CentOS5系统libpcap-devel版本是libpcap-devel-0.9.4-15.el5，intercept-1.0需要libcap-devel1.4以上版本此时需要源码包安装

yum remove libpcap

wget http://www.tcpdump.org/release/libpcap-1.4.0.tar.gz

tar zxvf libpcap-1.4.0.tar.gz

cd libpcap-1.4.0

./configure

make

make install



解压编译和安装；

tar zxvf intercept-1.0.0.tar.gz

cd intercept-1.0.0

./configure （默认raw socket方式抓包）

make && make install

最后运行 intercept；

/usr/local/intercept/sbin/intercept -i eth1 -l intercept.log -P /var/run/intercept.pid -F 'tcp and src port 80' -d


指令说明：

-i 监控网卡接口

-l 记录日志

-F 监控的协议和端口

-P 记录pid

-d 以daemon形式运行

其他参数可以通过/usr/local/intercept/sbin/intercept -h查看



成功运行后可以观察到的网路连接状态：

# ss -an |grep 36524

LISTEN     0      5                         *:36524                    *:*     

ESTAB      0      66             192.168.0.219:36524           192.168.0.8:49034 

ESTAB      0      0              192.168.0.219:36524           192.168.0.8:49035 

ESTAB      0      66             192.168.0.219:36524           192.168.0.8:49032 

ESTAB      0      0              192.168.0.219:36524           192.168.0.8:49033 


第三步，在 test server 192.168.0.230上设置一条路由 :

[root@bogon ~]# route add -net 10.10.10.0 netmask 255.255.255.0 gw 192.168.0.219

成功运行测试时可以观察到的网络连接状态：

# ss -an |head

State      Recv-Q Send-Q        Local Address:Port          Peer Address:Port

LISTEN     0      0                 127.0.0.1:199                      *:*    

LISTEN     512    0                         *:80                       *:*    

ESTAB   0      0              192.168.0.230:80           10.10.10.1:62602

ESTAB   0      0              192.168.0.230:80           10.10.10.4:54595

ESTAB   0      0              192.168.0.230:80           10.10.10.3:53566

ESTAB   0      0              192.168.0.230:80           10.10.10.6:49260

ESTAB   0      0              192.168.0.230:80           10.10.10.8:57598

ESTAB   0      0              192.168.0.230:80           10.10.10.7:64454

ESTAB   0      0              192.168.0.230:80           10.10.10.1:63081



参考链接：

http://blog.csdn.net/wangbin579/article/details/8949315

http://blog.csdn.net/wangbin579/article/details/8950282




你可能感兴趣的:(tcpcopy1.0,intercept1.0)

  • 基于流量回放的性能测试 Alex笔记
    TCPCopy使用简介一、TCPCopy使用简介1概述tcpcopy是一种请求复制（所有基于tcp的packets）工具，可以把在线流量导入到测试系统中去（也可以在测试系统内部放大流量），从而模拟真实运行环境，以便排查测试系统的性能问题和风险。TCPCopy的优势在于其实时性及真实性，除了少量的丢包，可以完全拷贝线上流量到测试机器，真实的模拟线上流量的变化规律。在tcpcopy1.0版本中对整个架
  • tcpcopy1.0系列使用方法 wangbin579 tcpcopy
    新旧架构详细对比：http://blog.csdn.net/wangbin579/article/details/8949315tcpcopy运行需要intercept的支持，tcpcopy负责抓包和发包工作，而intercept负责截获应答包tcpcopy代码下载地址：gitclonehttp://github.com/session-replay-tools/tcpcopyconfigure：
  • TCPCopy使用简介 shine_在路上
    1概述tcpcopy是一种请求复制（所有基于tcp的packets）工具，可以把在线流量导入到测试系统中去（也可以在测试系统内部放大流量），从而模拟真实运行环境，以便排查测试系统的性能问题和风险。TCPCopy的优势在于其实时性及真实性，除了少量的丢包，可以完全拷贝线上流量到测试机器，真实的模拟线上流量的变化规律。在tcpcopy1.0版本中对整个架构进行了改进，将原本低版本tcpcopy需要运行
  • tcpcopy1.0系列使用方法 十三疯86
    tcpcopy运行需要intercept的支持，tcpcopy负责抓包和发包工作，而intercept负责截获应答包tcpcopy代码下载地址：gitclonehttp://github.com/session-replay-tools/tcpcopyconfigure：./configure（默认rawsocket方式抓包）或者./configure--pcap-capture（pcap方式抓包
  • 【测试环境】tcpcopy1.0系列使用方法 ronmy
    新旧架构详细对比：http://blog.csdn.NET/wangbin579/article/details/8949315tcpcopy运行需要intercept的支持，tcpcopy负责抓包和发包工作，而intercept负责截获应答包tcpcopy代码下载地址：Git clonehttp://github.com/session-replay-tools/tcpcopyconfigure
  • tcpcopy 1.0 安装使用 wennan
    转载文章(99%)tcpcopy1.0.0安装使用在tcpcopy1.0版本中对整个架构的一个改进，将原本需要运行在测试机上的intercept移除放到一个独立的辅助机上来，使得测试机需要做的操作少到仅仅是添加一条路由而已，对整个测试机的性能损耗可以忽略，排除了intercept运行在测试机上时产生的性能影响，使得测试数据更加接近真实水平。一、系统环境centos6.7x86_64线上服务器：19
  • TCPCOPY 1.0 安装使用 minminmsn tcpcopy1.0intercept1.0
    TCPCOPY1.0安装使用简介TCPCOPY是一个tcp流量的实时复制工具，其1.0版本由网易工程师@tcpcopy开发和维护。一般用来将生产环境的线上流量实时复制到测试环境进行测试。例如新系统上线前，如果我们希望进行一些基本的压力测试，那么我们可以直接利用tcpcopy来复制线上的流量过来对系统进行测试，这样的好处是测试数据接近真实水平，且实施起来相对简单。一，架构 二，安装测试中用到的3台服
  • TCPCOPY 1.0 安装使用 三杯水 tcpcopy1.0intercept1.0系统软件
    TCPCOPY1.0安装使用简介TCPCOPY是一个tcp流量的实时复制工具，其1.0版本由网易工程师@tcpcopy开发和维护。一般用来将生产环境的线上流量实时复制到测试环境进行测试。例如新系统上线前，如果我们希望进行一些基本的压力测试，那么我们可以直接利用tcpcopy来复制线上的流量过来对系统进行测试，这样的好处是测试数据接近真实水平，且实施起来相对简单。一，架构二，安装测试中用到的3台服务
  • TCPCOPY 1.0 安装使用 minminmsn intercept1.0tcpcopy1.0
    TCPCOPY1.0安装使用简介TCPCOPY是一个tcp流量的实时复制工具，其1.0版本由网易工程师@tcpcopy开发和维护。一般用来将生产环境的线上流量实时复制到测试环境进行测试。例如新系统上线前，如果我们希望进行一些基本的压力测试，那么我们可以直接利用tcpcopy来复制线上的流量过来对系统进行测试，这样的好处是测试数据接近真实水平，且实施起来相对简单。一，架构 二，安装测试中用到的3台服
  • tcpcopy-1.0.0实战之拷贝生产服务器流量做压力测试 fhy365 tcpcopy-1.0.0
    tcpcopy1.0.0安装使用在tcpcopy1.0版本中对整个架构的一个改进，将原本需要运行在测试机上的intercept移除放到一个独立的辅助机上来，使得测试机需要做的操作少到仅仅是添加一条路由而已，对整个测试机的性能损耗可以忽略，排除了intercept运行在测试机上时产生的性能影响，使得测试数据更加接近真实水平。一、系统环境：centos6.5x86_64线上服务器：172.16.1.2
  • tcpcopy-1.0.0实战之拷贝生产服务器流量做压力测试 fhy365 tcpcopy-1.0.0tcpcopy
    tcpcopy1.0.0安装使用在tcpcopy1.0版本中对整个架构的一个改进，将原本需要运行在测试机上的intercept移除放到一个独立的辅助机上来，使得测试机需要做的操作少到仅仅是添加一条路由而已，对整个测试机的性能损耗可以忽略，排除了intercept运行在测试机上时产生的性能影响，使得测试数据更加接近真实水平。一、系统环境：centos6.5x86_64线上服务器：172.16.1.2
  • tcpcopy-1.0.0实战之拷贝生产服务器流量做压力测试 fhy365 tcpcopy-1.0.0
    tcpcopy1.0.0安装使用在tcpcopy1.0版本中对整个架构的一个改进，将原本需要运行在测试机上的intercept移除放到一个独立的辅助机上来，使得测试机需要做的操作少到仅仅是添加一条路由而已，对整个测试机的性能损耗可以忽略，排除了intercept运行在测试机上时产生的性能影响，使得测试数据更加接近真实水平。一、系统环境：centos6.5x86_64线上服务器：172.16.1.2
  • [置顶] tcpcopy1.0系列使用方法 wangbin579 使用方法tcpcopy新架构
    新旧架构详细对比：http://blog.csdn.net/wangbin579/article/details/8949315tcpcopy运行需要intercept的支持，tcpcopy负责抓包和发包工作，而intercept负责截获应答包tcpcopy代码下载地址：gitclonehttp://github.com/session-replay-tools/tcpcopyconfigure：
  • VMware Workstation 11 或者 VMware Player 7安装MAC OS X 10.10 Yosemite iwindyforest vmwaremac os10.10workstationplayer
    最近尝试了下VMware下安装MacOS 系统， 安装过程中发现网上可供参考的文章都是VMware Workstation 10以下， MacOS X 10.9以下的文章， 只能提供大概的思路， 但是实际安装起来由于版本问题， 走了不少弯路， 所以我尝试写以下总结， 希望能给有兴趣安装OSX的人提供一点帮助。     写在前面的话： 其实安装好后发现， 由于我的th
  • 关于《基于模型驱动的B/S在线开发平台》源代码开源的疑虑？ deathwknight JavaScriptjava框架
    本人从学习Java开发到现在已有10年整，从一个要自学 java买成javascript的小菜鸟，成长为只会java和javascript语言的老菜鸟（个人邮箱：[email protected]） 一路走来，跌跌撞撞。用自己的三年多业余时间，瞎搞一个小东西（基于模型驱动的B/S在线开发平台，非MVC框架、非代码生成）。希望与大家一起分享，同时有许些疑虑，希望有人可以交流下 平台
  • 如何把maven项目转成web项目 Kai_Ge mavenMyEclipse
    创建Web工程，使用eclipse ee创建maven web工程 1.右键项目,选择Project Facets,点击Convert to faceted from 2.更改Dynamic Web Module的Version为2.5.(3.0为Java7的,Tomcat6不支持). 如果提示错误,可能需要在Java Compiler设置Compiler compl
  • 主管？？？ Array_06 工作
    转载：http://www.blogjava.net/fastzch/archive/2010/11/25/339054.html 很久以前跟同事参加的培训，同事整理得很详细，必须得转！ 前段时间，公司有组织中高阶主管及其培养干部进行了为期三天的管理训练培训。三天的课程下来，虽然内容较多，因对老师三天来的课程内容深有感触，故借着整理学习心得的机会，将三天来的培训课程做了一个
  • python内置函数大全 2002wmj python
    最近一直在看python的document，打算在基础方面重点看一下python的keyword、Build-in Function、Build-in Constants、Build-in Types、Build-in Exception这四个方面，其实在看的时候发现整个《The Python Standard Library》章节都是很不错的，其中描述了很多不错的主题。先把Build-in Fu
  • JSP页面通过JQUERY合并行 357029540 JavaScriptjquery
    在写程序的过程中我们难免会遇到在页面上合并单元行的情况，如图所示 如果对于会的同学可能很简单，但是对没有思路的同学来说还是比较麻烦的，提供一下用JQUERY实现的参考代码 function mergeCell(){         var trs = $("#table tr"); &nb
  • Java基础 冰天百华 java基础
    学习函数式编程 package base; import java.text.DecimalFormat; public class Main { public static void main(String[] args) { // Integer a = 4; // Double aa = (double)a / 100000; // Decimal
  • unix时间戳相互转换 adminjun 转换unix时间戳
    如何在不同编程语言中获取现在的Unix时间戳(Unix timestamp)？ Java time JavaScript Math.round(new Date().getTime()/1000) getTime()返回数值的单位是毫秒 Microsoft .NET / C# epoch = (DateTime.Now.ToUniversalTime().Ticks - 62135
  • 作为一个合格程序员该做的事 aijuans 程序员
    作为一个合格程序员每天该做的事 1、总结自己一天任务的完成情况 最好的方式是写工作日志，把自己今天完成了什么事情，遇见了什么问题都记录下来，日后翻看好处多多 2、考虑自己明天应该做的主要工作 把明天要做的事情列出来，并按照优先级排列，第二天应该把自己效率最高的时间分配给最重要的工作 3、考虑自己一天工作中失误的地方，并想出避免下一次再犯的方法 出错不要紧，最重
  • 由html5视频播放引发的总结 ayaoxinchao html5视频video
    前言   项目中存在视频播放的功能，前期设计是以flash播放器播放视频的。但是现在由于需要兼容苹果的设备，必须采用html5的方式来播放视频。我就出于兴趣对html5播放视频做了简单的了解，不了解不知道，水真是很深。本文所记录的知识一些浅尝辄止的知识，说起来很惭愧。   视频结构   本该直接介绍html5的<video>的，但鉴于本人对视频
  • 解决httpclient访问自签名https报javax.net.ssl.SSLHandshakeException: sun.security.validat bewithme httpclient
         如果你构建了一个https协议的站点，而此站点的安全证书并不是合法的第三方证书颁发机构所签发，那么你用httpclient去访问此站点会报如下错误   javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path bu
  • Jedis连接池的入门级使用 bijian1013 redisredis数据库jedis
    Jedis连接池操作步骤如下：         a.获取Jedis实例需要从JedisPool中获取；         b.用完Jedis实例需要返还给JedisPool；         c.如果Jedis在使用过程中出错，则也需要还给JedisPool； packag
  • 变与不变 bingyingao 不变变亲情永恒
    变与不变    周末骑车转到了五年前租住的小区，曾经最爱吃的西北面馆、江西水饺、手工拉面早已不在，    各种店铺都换了好几茬，这些是变的。    三年前还很流行的一款手机在今天看起来已经落后的不像样子。    三年前还运行的好好的一家公司，今天也已经不复存在。    一座座高楼拔地而起，
  • 【Scala十】Scala核心四：集合框架之List bit1129 scala
    Spark的RDD作为一个分布式不可变的数据集合，它提供的转换操作，很多是借鉴于Scala的集合框架提供的一些函数，因此，有必要对Scala的集合进行详细的了解   1. 泛型集合都是协变的，对于List而言，如果B是A的子类，那么List[B]也是List[A]的子类，即可以把List[B]的实例赋值给List[A]变量   2. 给变量赋值(注意val关键字，a，b
  • Nested Functions in C bookjovi cclosure
      Nested Functions 又称closure，属于functional language中的概念，一直以为C中是不支持closure的，现在看来我错了，不过C标准中是不支持的，而GCC支持。   既然GCC支持了closure，那么 lexical scoping自然也支持了，同时在C中label也是可以在nested functions中自由跳转的
  • Java-Collections Framework学习与总结-WeakHashMap BrokenDreams Collections
            总结这个类之前，首先看一下Java引用的相关知识。Java的引用分为四种：强引用、软引用、弱引用和虚引用。         强引用：就是常见的代码中的引用，如Object o = new Object();存在强引用的对象不会被垃圾收集
  • 读《研磨设计模式》-代码笔记-解释器模式-Interpret bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ package design.pattern; /* * 解释器（Interpreter）模式的意图是可以按照自己定义的组合规则集合来组合可执行对象 * * 代码示例实现XML里面1.读取单个元素的值 2.读取单个属性的值 * 多
  • After Effects操作&快捷键 cherishLC After Effects
    1、快捷键官方文档 中文版：https://helpx.adobe.com/cn/after-effects/using/keyboard-shortcuts-reference.html 英文版：https://helpx.adobe.com/after-effects/using/keyboard-shortcuts-reference.html 2、常用快捷键
  • Maven 常用命令 crabdave maven
    Maven 常用命令   mvn archetype:generate mvn install mvn clean mvn clean complie mvn clean test mvn clean install mvn clean package mvn test mvn package mvn site   mvn dependency:res
  • shell bad substitution daizj shell脚本
    #!/bin/sh /data/script/common/run_cmd.exp 192.168.13.168 "impala-shell -islave4 -q 'insert OVERWRITE table imeis.${tableName} select ${selectFields}, ds, fnv_hash(concat(cast(ds as string), im
  • Java SE 第二讲（原生数据类型 Primitive Data Type） dcj3sjt126com java
    Java SE  第二讲： 1.   Windows: notepad, editplus, ultraedit, gvim Linux: vi, vim, gedit 2.   Java 中的数据类型分为两大类： 1）原生数据类型  （Primitive Data Type） 2）引用类型（对象类型）  （R
  • CGridView中实现批量删除 dcj3sjt126com PHPyii
    1，CGridView中的columns添加 array( 'selectableRows' => 2, 'footer' => '<button type="button" onclick="GetCheckbox();" style=&
  • Java中泛型的各种使用 dyy_gusi java泛型
    Java中的泛型的使用：1.普通的泛型使用 在使用类的时候后面的<>中的类型就是我们确定的类型。 public class MyClass1<T> {//此处定义的泛型是T private T var; public T getVar() { return var; } public void setVa
  • Web开发技术十年发展历程 gcq511120594 Web浏览器数据挖掘
    回顾web开发技术这十年发展历程： Ajax 03年的时候我上六年级，那时候网吧刚在小县城的角落萌生。传奇，大话西游第一代网游一时风靡。我抱着试一试的心态给了网吧老板两块钱想申请个号玩玩，然后接下来的一个小时我一直在，注，册，账，号。 彼时网吧用的512k的带宽，注册的时候，填了一堆信息，提交，页面跳转，嘣，”您填写的信息有误，请重填”。然后跳转回注册页面，以此循环。我现在时常想，如果当时a
  • openSession()与getCurrentSession()区别： hetongfei javaDAOHibernate
    来自 http://blog.csdn.net/dy511/article/details/6166134 1.getCurrentSession创建的session会和绑定到当前线程,而openSession不会。 2. getCurrentSession创建的线程会在事务回滚或事物提交后自动关闭,而openSession必须手动关闭。 这里getCurrentSession本地事务(本地
  • 第一章 安装Nginx+Lua开发环境 jinnianshilongnian nginxluaopenresty
    首先我们选择使用OpenResty，其是由Nginx核心加很多第三方模块组成，其最大的亮点是默认集成了Lua开发环境，使得Nginx可以作为一个Web Server使用。借助于Nginx的事件驱动模型和非阻塞IO，可以实现高性能的Web应用程序。而且OpenResty提供了大量组件如Mysql、Redis、Memcached等等，使在Nginx上开发Web应用更方便更简单。目前在京东如实时价格、秒
  • HSQLDB In-Process方式访问内存数据库 liyonghui160com
        HSQLDB一大特色就是能够在内存中建立数据库，当然它也能将这些内存数据库保存到文件中以便实现真正的持久化。   先睹为快！   下面是一个In-Process方式访问内存数据库的代码示例：     下面代码需要引入hsqldb.jar包 （hsqldb-2.2.8）   import java.s
  • Java线程的5个使用技巧 pda158 java数据结构
    Java线程有哪些不太为人所知的技巧与用法？ 　　萝卜白菜各有所爱。像我就喜欢Java。学无止境，这也是我喜欢它的一个原因。日常 工作中你所用到的工具，通常都有些你从来没有了解过的东西，比方说某个方法或者是一些有趣的用法。比如说线程。没错，就是线程。或者确切说是Thread这个类。当我们在构建高可扩展性系统的时候，通常会面临各种各样的并发编程的问题，不过我们现在所要讲的可能会略有不同。
  • 开发资源大整合：编程语言篇——JavaScript（1） shoothao JavaScript
    概述：本系列的资源整合来自于github中各个领域的大牛，来收藏你感兴趣的东西吧。     程序包管理器   管理javascript库并提供对这些库的快速使用与打包的服务。 Bower - 用于web的程序包管理。 component - 用于客户端的程序包管理，构建更好的web应用程序。 spm - 全新的静态的文件包管
  • 避免使用终结函数 vahoa.ma javajvmC++
    终结函数（finalizer）通常是不可预测的，常常也是很危险的，一般情况下不是必要的。使用终结函数会导致不稳定的行为、更差的性能，以及带来移植性问题。不要把终结函数当做C++中的析构函数（destructors）的对应物。       我自己总结了一下这一条的综合性结论是这样的： 1）在涉及使用资源，使用完毕后要释放资源的情形下，首先要用一个显示的方
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他