TCP/UDP网络性能测试工具 - Netperf

上一篇 /下一篇  2007-10-05 20:28:54/ 个人分类：网络测试工具

概述

    在构建或管理一个网络系统时，我们更多的是关心网络的可用性，即网络是否连通，而对于其整体的性能往往考虑不多，或者即使考虑到性能的问题，但是却发现没有合适的手段去测试网络的性能。 
dm2]w1T9z d0    当开发出一个网络应用程序后，我们会发现，在实际的网络环境使用中，网络应用程序的使用效果不 是很理想，问题可能出现在程序的开发上面，也有可能由于实际的网络环境中存在着瓶颈。面对这种问题，程序员一般会一筹莫展，原因就在于不掌握一些网络性能测量的工具。  
3m OC;`$pp0    在本文中，首先介绍网络性能测量的一些基本概念和方法，然后结合 netperf 工具的使用，具体的讨论如何测试不同情况下的网络性能。 
6N?sC!hISx0网络性能测试概述51Testing软件测试网i*A3J7v9h ZjL&P

网络性能测量的五项指标

   测量网络性能的五项指标是：  

可用性（availability）
响应时间（response time）
网络利用率（networkutilization）
网络吞吐量（network throughput）
网络带宽容量（network bandwidthcapacity）51Testing软件测试网?PnO8N*c
~$UH'D

1． 可用性
g.D4S]pN8r.XUW0    测试网络性能的第一步是确定网络是否正常工作，最简单的方法是使用 ping 命令。通过向远端的机器发送 icmp echo request，并等待接收 icmp echo reply 来判断远端的机器是否连通，网络是否正常工作。 
&EFx0D ?9K`{ v0    Ping 命令有非常丰富的命令选项，比如 -c 可以指定发送 echo request 的个数，-l 可以指定每次发送的 ping 包大小。 51Testing软件测试网2t(Hz*f+fA
    网络设备内部一般有多个缓冲池，不同的缓冲池使用不同的缓冲区大小，分别用来处理不同大小的分组（packet）。例如交换机中通常具有三种类型的包缓冲：一类针对小的分组，一类针对中等大小的分组，还有一类针对大的分组。为了测试这样的网络设备，测试工具必须要具有发送不同大小分组的能力。 Ping 命令的 -l 就可以使用在这种场合。
p/Ox.Dz6Y.X6pU6wd02． 响应时间
2?5N.KU8`0    Ping 命令的 echo request/reply 一次往返所花费时间就是响应时间。有很多因素会影响到响应时间，如网段的负荷，网络主机的负荷，广播风暴，工作不正常的网络设备等等。 51Testing软件测试网7EMa2Ee*aNR
    在网络工作正常时，记录下正常的响应时间。当用户抱怨网络的反应时间慢时，就可以将现在的响应时间与正常的响应时间对比，如果两者差值的波动很大，就能说明网络设备存在故障。 51Testing软件测试网c9N3Q,gC9MHX
3． 网络利用率
J)F#]#@5Q,@W t0    网络利用率是指网络被使用的时间占总时间（即被使用的时间+空闲的时间）的比例。比如，Ethernet 虽然是共享的，但同时却只能有一个报文在传输。因此在任一时刻，Ethernet 或者是 100% 的利用率，或者是 0% 的利用率。
a-g5P"s^T)B9j0    计算一个网段的网络利用率相对比较容易，但是确定一个网络的利用率就比较复杂。因此，网络测试工具一般使用网络吞吐量和网络带宽容量来确定网络中两个节点之间的性能。51Testing软件测试网"ub$[)B+F1t
4． 网络吞吐量
[9b!Gd+~W0XAq0    网络吞吐量是指在某个时刻，在网络中的两个节点之间，提供给网络应用的剩余带宽。
vF9C:~?p+JD$`0   网络吞吐量可以帮组寻找网络路径中的瓶颈。比如，即使 client 和 server 都被分别连接到各自的 100M Ethernet上，但是如果这两个 100M 的Ethernet 被 10M 的 Ethernet 连接起来，那么 10M 的 Ethernet就是网络的瓶颈。
Ov,}aS9O0    网络吞吐量非常依赖于当前的网络负载情况。因此，为了得到正确的网络吞吐量，最好在不同时间（一天中的不同时刻，或者一周中不同的天）分别进行测试，只有这样才能得到对网络吞吐量的全面认识。
*{@:I/bgC.f0   有些网络应用程序在开发过程的测试中能够正常运行，但是到实际的网络环境中却无法正常工作（由于没有足够的网络吞吐量）。这是因为测试只是在空闲的网络环境中，没有考虑到实际的网络环境中还存在着其它的各种网络流量。所以，网络吞吐量定义为剩余带宽是有实际意义的。51Testing软件测试网y2|!S"_Q~E
5． 网络带宽容量 
8Y3gmYE?DA%Y0    与网络吞吐量不同，网络带宽容量指的是在网络的两个节点之间的最大可用带宽。这是由组成网络的设备的能力所决定的。
*P B'hK'|cH0    测试网络带宽容量有两个困难之处：在网络存在其它网络流量的时候，如何得知网络的最大可用带宽；在测试过程中，如何对现有的网络流量不造成影响。网络测试工具一般采用 packet pairs 和 packet trains 技术来克服这样的困难。

收集网络性能数据的方式

    当确定了网络性能的测试指标以后，就需要使用网络测试工具收集相应的性能数据，分别有三种从网络获取数据的方式： 51Testing软件测试网
I\4B1Mm*Lw E
1． 通过snmp协议直接到网络设备中获取，如net-snmp工具
xkY4?9opE3@02． 侦听相关的网络性能数据，典型的工具是tcpdump 51Testing软件测试网3Tq5|:a[b\6Z
3． 自行产生相应的测试数据，如本文中使用的netperf工具

Netperf

   Netperf是一种网络性能的测量工具，主要针对基于TCP或UDP的传输。Netperf根据应用的不同，可以进行不同模式的网络性能测试，即批量数据传输（bulk datatransfer）模式和请求/应答（request/reponse）模式。Netperf测试结果所反映的是一个系统能够以多快的速度向另外一个系统发送数据，以及另外一个系统能够以多块的速度接收数据。
1`p2e%N+s,W%}
|0   Netperf工具以client/server方式工作。server端是netserver，用来侦听来自client端的连接，client端是netperf，用来向server发起网络测试。在client与server之间，首先建立一个控制连接，传递有关测试配置的信息，以及测试的结果；在控制连接建立并传递了测试配置信息以后，client与server之间会再建立一个测试连接，用来来回传递着特殊的流量模式，以测试网络的性能。

TCP网络性能

    由于TCP协议能够提供端到端的可靠传输，因此被大量的网络应用程序使用。但是，可靠性的建立是要付出代价的。TCP协议保证可靠性的措施，如建立并维护连接、控制数据有序的传递等都会消耗一定的网络带宽。

@4U!wQ/a"]X0    Netperf可以模拟三种不同的TCP流量模式： 51Testing软件测试网Z1G%cF9J9_7m_g
1） 单个TCP连接，批量（bulk）传输大量数据51Testing软件测试网~x$ZNdV
l
2） 单个TCP连接，client请求/server应答的交易（transaction）方式
qvD1B3Ekb03） 多个TCP连接，每个连接中一对请求/应答的交易方式51Testing软件测试网Kp:JrCr

UDP网络性能

    UDP没有建立连接的负担，但是UDP不能保证传输的可靠性，所以使用UDP的应用程序需要自行跟踪每个发出的分组，并重发丢失的分组。
3R-z`$lg1E0Netperf可以模拟两种UDP的流量模式：51Testing软件测试网([ P"zw^'B xko
1） 从client到server的单向批量传输
Df_(NLAvf)D02） 请求/应答的交易方式
I3M5P7u%Gkj0    由于UDP传输的不可靠性，在使用netperf时要确保发送的缓冲区大小不大于接收缓冲区大小，否则数据会丢失，netperf将给出错误的结果。因此，对于接收到分组的统计不一定准确，需要结合发送分组的统计综合得出结论。 51Testing软件测试网axSKH]

Netperf的命令行参数

    在unix系统中，可以直接运行可执行程序来启动netserver，也可以让inetd或xinetd来自动启动netserver。
rBXB.EXQ2Y$}0   当netserver在server端启动以后，就可以在client端运行netperf来测试网络的性能。netperf通过命令行参数来控制测试的类型和具体的测试选项。根据作用范围的不同，netperf的命令行参数可以分为两大类：全局命令行参数、测试相关的局部参数，两者之间使用--分隔：
!Yd1V;LH2Z.w0netperf [global options]-- [test-specific options]
.j:F`?}&o-u/A0这里我们只解释那些常用的命令行参数，其它的参数读者可以查询netperf的man手册。
;HK?g K)O9\0-H host ：指定远端运行netserver的server IP地址。
twbI4D&z0p0-l testlen：指定测试的时间长度（秒）51Testing软件测试网:f XA5n+h,Lh
-t testname：指定进行的测试类型，包括TCP_STREAM，UDP_STREAM，TCP_RR，TCP_CRR，UDP_RR，在下文中分别对它们说明。
N%@.jc {?(t+r{0    在后面的测试中，netserver运行在192.168.0.28，server与client通过局域网连接（100M Hub）。 字串351Testing软件测试网-KN
F/li'N
I

Netperf测试网络性能

测试批量（bulk）网络流量的性能51Testing软件测试网D S^2Afo
    批量数据传输典型的例子有ftp和其它类似的网络应用（即一次传输整个文件）。根据使用传输协议的不同，批量数据传输又分为TCP批量传输和UDP批量传输。51Testing软件测试网Hj\;qUe'd5g
1． TCP_STREAM 51Testing软件测试网yo{#R?Lx3w
Netperf缺省情况下进行TCP批量传输，即-t TCP_STREAM。测试过程中，netperf向netserver发送批量的TCP数据分组，以确定数据传输过程中的吞吐量：
4f,C(H`C.O&HZ&K0 ./netperf -H 192.168.0.28 -l 6051Testing软件测试网pV{B#dr
TCP STREAM TEST to 192.168.0.28
AR
E8@-[:UlI0Recv   Send    Send51Testing软件测试网\PR8T:ER%`!dg
Socket Socket  Message  Elapsed
cU` YOP2f}0Size   Size    Size     Time     Throughput
gQ;p1ap#r0bytes  bytes   bytes    secs.    10^6bits/sec51Testing软件测试网%vu }ncb+f:pv
51Testing软件测试网l?K2xGHNg
87380  16384  16384    60.00      88.00
vWa!^-G|0从netperf的结果输出中，我们可以知道以下的一些信息： 51Testing软件测试网^^&`1jf\ k:^ R
1） 远端系统（即server）使用大小为87380字节的socket接收缓冲51Testing软件测试网*Ix^)z|n)F3g
2） 本地系统（即client）使用大小为16384字节的socket发送缓冲51Testing软件测试网ePI-d2u?l`5vO
3） 向远端系统发送的测试分组大小为16384字节
`e k|.r04） 测试经历的时间为60秒
A(h5H1x?f8a05） 吞吐量的测试结果为88Mbits/秒51Testing软件测试网E/AcbW(TSm
    在缺省情况下，netperf向发送的测试分组大小设置为本地系统所使用的socket发送缓冲大小。 51Testing软件测试网S
u9L3q:A
    TCP_STREAM方式下与测试相关的局部参数如下表所示： 51Testing软件测试网8E!a+nY'^"f

%y/k9@-aL/?;X0参数

说明51Testing软件测试网 `,] s+ueAg

*`6K3RxxU+IyH7~0-s size51Testing软件测试网c9W ENT(n0i}

设置本地系统的socket发送与接收缓冲大小51Testing软件测试网1E L}hU

-S size51Testing软件测试网w;g-Ya7??

Y\v5Z!x$d(F0设置远端系统的socket发送与接收缓冲大小51Testing软件测试网 D[K`ol7Q

-m size

设置本地系统发送测试分组的大小51Testing软件测试网
U1r)w(pQUp&FE j

V8F']-b#S.Sa0-M size

Iy V}_Nq0设置远端系统接收测试分组的大小

c Pt8u?I%bGY0-D51Testing软件测试网9BD-rcM

对本地与远端系统的socket设置TCP_NODELAY选项51Testing软件测试网4K1]h5D5Fu

测试请求/应答（request/response）网络流量的性能 

    另一类常见的网络流量类型是应用在client/server结构中的request/response模式。在每次交易（transaction）中，client向server发出小的查询分组，server接收到请求，经处理后返回大的结果数据。

1． TCP_RR 

    TCP_RR方式的测试对象是多次TCP request和response的交易过程，但是它们发生在同一个TCP连接中，这种模式常常出现在数据库应用中。数据库的client程序与server程序建立一个TCP连接以后，就在这个连接中传送数据库的多次交易过程。51Testing软件测试网4U7g
S-kX3F
./netperf -t TCP_RR -H 192.168.0.28
4[vhm2_:O&N0TCP REQUEST/RESPONSE TEST to 192.168.0.28
BE+_%O$R.Wz:P0Local /Remote
UA
Z%N`0Socket Size   Request  Resp.   Elapsed  Trans.
}&`8iW0H)d
W0Send   Recv   Size     Size    Time     Rate
:j*B;~v$As
A)E9IlI0bytes  Bytes  bytes    bytes   secs.    per sec
t,xh#@ghP051Testing软件测试网%a|x;Z-R-k_
16384  87380  1        1       10.00    9502.7351Testing软件测试网9_%y{z`$E] D7s:x
16384  8738051Testing软件测试网a+?6]Zl2e^F

    Netperf输出的结果也是由两行组成。第一行显示本地系统的情况，第二行显示的是远端系统的信息。平均的交易率（transactionrate）为9502.73次/秒。注意到这里每次交易中的request和response分组的大小都为1个字节，不具有很大的实际意义。用户可以通过测试相关的参数来改变request和response分组的大小，TCP_RR方式下的参数如下表所示：

(L7[}-vlx0参数51Testing软件测试网6sz,u n\
c9^w.iM

|zc h ^n"P]0说明

q,C.FiX:j3{@0-r req,resp

设置request和reponse分组的大小51Testing软件测试网4H
k
C'B L*oWrF

q Pg DuhJ|0-s size

pd7j,M;` ]b0设置本地系统的socket发送与接收缓冲大小

L!I%zeaa;Y
tv0-S size51Testing软件测试网7oq0I7C.T-c

#^Hm(?])T&L`9K7b(U0设置远端系统的socket发送与接收缓冲大小

8kzl)D#qA/`2H Z5f0-D

0~1[#l7q Y7UjH0对本地与远端系统的socket设置TCP_NODELAY选项51Testing软件测试网
i
l lV} A9c

通过使用-r参数，我们可以进行更有实际意义的测试：51Testing软件测试网a UA/Ah
./netperf -t TCP_RR -H 192.168.0.28 -- -r 32,102451Testing软件测试网"K/na4EZtk9i${
TCP REQUEST/RESPONSE TEST to 192.168.0.28
m9X)]X4l1@'r-B/EM0Local /Remote51Testing软件测试网!j"P0Mw(pMj0{v
Socket Size   Request  Resp.   Elapsed  Trans.51Testing软件测试网5g.[8U
pKi
Send   Recv   Size     Size    Time     Rate51Testing软件测试网~J?xJ0G;w/b"h
bytes  Bytes  bytes    bytes   secs.    per sec51Testing软件测试网6I {cCX;t?NN

uiuU5j|;Os'X016384  87380  32       1024    10.00    4945.9751Testing软件测试网K.IzHqm
16384  8738051Testing软件测试网K^+z#B }!K

    从结果中可以看出，由于request/reponse分组的大小增加了，导致了交易率明显的下降。注：相对于实际的系统，这里交易率的计算没有充分考虑到交易过程中的应用程序处理时延，因此结果往往会高于实际情况。

2． TCP_CRR

    与TCP_RR不同，TCP_CRR为每次交易建立一个新的TCP连接。最典型的应用就是HTTP，每次HTTP交易是在一条单独的TCP连接中进行的。因此，由于需要不停地建立新的TCP连接，并且在交易结束后拆除TCP连接，交易率一定会受到很大的影响。51Testing软件测试网b0O&SLTwA]-d2M
./netperf -t TCP_CRR -H 192.168.0.28
)E.kr[H9H)M}6dP0TCP Connect/Request/Response TEST to 192.168.0.28
{7]fS3pP0Local /Remote51Testing软件测试网@|t8|wa
Socket Size   Request  Resp.   Elapsed  Trans.
R.F3QG"j2Y4h(|M0Send   Recv   Size     Size    Time     Rate
SKK^.Mt"W
]R0bytes  Bytes  bytes    bytes   secs.    per sec
VA;t-w1U0XK%w9@051Testing软件测试网4kKq'D0Ls*co
131070 131070 1        1       9.99     2662.20
y]e@GjYt6oc016384  8738051Testing软件测试网3NH1K]?j6j)]

    即使是使用一个字节的request/response分组，交易率也明显的降低了，只有2662.20次/秒。TCP_CRR使用与TCP_RR相同的局部参数。

3． UDP_RR  
Ur#C$sYZ0

S|/|?|4TRo&f0   UDP_RR方式使用UDP分组进行request/response的交易过程。由于没有TCP连接所带来的负担，所以我们推测交易率一定会有相应的提升。
./netperf -t UDP_RR -H 192.168.0.28
;o2QYbZ/}7Sn!@0UDP REQUEST/RESPONSE TEST to 192.168.0.2851Testing软件测试网'b5A(z(a+W,w%RK0MP
Local /Remote51Testing软件测试网'l C2z*}5c8MM
Socket Size   Request  Resp.   Elapsed  Trans.
q%e-D?~'k0Send   Recv   Size     Size    Time     Rate51Testing软件测试网C3@ k#MC
bytes  Bytes  bytes    bytes   secs.    per sec51Testing软件测试网3~\+b
|!H
51Testing软件测试网z3v
m;f"~?
65535  65535  1        1       9.99     10141.16
%SHL%ZE4a065535  6553551Testing软件测试网|gQ9Z,po6_GU`
   结果证实了我们的推测，交易率为10141.16次/秒，高过TCP_RR的数值。不过，如果出现了相反的结果，即交易率反而降低了，也不需要担心，因为这说明了在网络中，路由器或其它的网络设备对UDP采用了与TCP不同的缓冲区空间和处理技术。

结束语
](H|h:SgHA7N0   除了netperf以外，还有很多其它的网络性能测试工具，如dbs, iperf, pathrate, nettest, netlogger,tcptrace,ntop等。这些工具有其各自的特色和不同的侧重点，我们可以根据具体的应用环境，有选择的使用它们，这样就可以使这些工具发挥出最大的功效。虽然都是开放源代码的软件，但是这些工具的功能与商业的网络测试工具同样强大，而且也得到了广泛的应用，熟悉这些工具对我们的实际工作一定会有很大的帮助。 51Testing软件测试网(P.bD,I_m?zm

参考资料51Testing软件测试网7~.U lhu
[

Network Performance Open Source Toolkit, Richard Blum, Wiley Publishing, Inc.
S,jy6z;XT)z0M0netperf website,http://www.netperf.org51Testing软件测试网*fW.`+P g\QR