云服务器 ECS：网络性能测试方法

网络PPS小于600万

1. 分别远程连接测试机和辅助测试机。

   具体操作，请参见通过密码或密钥认证登录Linux实例。

2. 分别在测试机和辅助测试机上执行以下命令，下载Netperf。

   wget https://benchmark-packages.oss-cn-qingdao.aliyuncs.com/netperf-2.7.0.tar.gz

3. 分别在测试机和辅助测试机上执行以下命令，安装Netperf和sar监控工具。

   1. 执行以下命令，解压Netperf包。

      sudo yum install -y gcc autoconf automake libtool sysstat
      tar -zxvf netperf-2.7.0.tar.gz

   2. 执行以下命令，查询gcc版本号。

      gcc -v 2>&1

   3. 若测试机和辅助测试机安装的gcc版本高于10版本，则您需要继续执行下述操作，以确保gcc可以正常编译。否则，请忽略此步骤。

      1. 执行以下命令，修改nettest_omni.c文件。

         cd netperf
         vim src/nettest_omni.c

      2. 按i键进入编辑模式，手动删除nettest_omni.c文件中的声明变量内容。

         声明变量内容如下所示：

         /* different options for the sockets        */
         
         int
           loc_nodelay,    /* don't/do use NODELAY  locally    */
           rem_nodelay,    /* don't/do use NODELAY remotely  */
           loc_sndavoid,    /* avoid send copies locally    */
           loc_rcvavoid,    /* avoid recv copies locally    */
           rem_sndavoid,    /* avoid send copies remotely    */
           rem_rcvavoid;   /* avoid recv_copies remotely    */

      3. 修改完成后按Esc键，输入:wq后按下回车键，保存并退出。

   4. 执行以下命令，安装Netperf和sar监控工具。

      cd netperf
      sudo ./configure
      sudo make && sudo make install

4. 在测试机上执行以下命令，启动64个netserver服务。

   #!/bin/bash
   for j in `seq 64`; do
       netserver -p $[16000+j] > server_$[16000+j].netperf > /dev/null 2>&1  &
   done

5. 在测试机上执行以下命令，查询测试机的私网IP地址。

   ifconfig || ip addr

   

6. 在辅助测试机上执行以下命令，向测试机输入流量。

   #!/bin/bash
   server_ip=<测试机私网IP地址>
   for j in `seq 64`; do
       port=$[16000+j]
       netperf -H ${server_ip} -l ${run_time:-300} -t UDP_STREAM  -p $port  -- -m 1 -D > /dev/null 2>&1 &
   done

   <测试机私网IP地址>需替换为上一步查询的实际测试机的私网IP地址，示例如下图所示。

   

7. 在测试机上执行以下命令，测试网络PPS。

   sar -n DEV 1

   在测试结果中查看rxpck/s列的数据值，rxpck/s表示该测试机每秒钟接收的数据包总数。如下图所示，示例中测试机每秒钟接收到的数据包平均数约为94万。

   

网络PPS大于600万小于2000万

1. 分别远程连接测试机和辅助测试机。

   具体操作，请参见通过密码或密钥认证登录Linux实例。

2. 分别在3台辅助测试机和1台测试机上执行以下命令，安装sockperf。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. 在测试机上执行以下命令，查询测试机的私网IP地址。

   ifconfig || ip addr

   

4. 分别在3台辅助测试机上执行以下命令，向测试机输入流量。

   server_ip="<测试机私网IP地址>"
   threads=64
   msg_size=14
   run_time=60
   
   basePort=6666
   for((i=0;i<$threads;++i));do
       nohup sockperf tp -i $server_ip --pps max -m ${msg_size} -t ${run_time} --port $[${basePort}+${i}] 2>&1 &
   done

   其中<测试机私网IP地址>是实际测试机的私网IP地址，run_time是输入流量的时间，请您根据实际情况修改。

5. 分别在3台辅助测试机和1台测试机上执行以下命令，测试网络流量。

   sar -n DEV 1

   在测试机上查看rxpck/s列的数据值，rxpck/s表示该测试机每秒钟接收到的数据包。如下图所示，示例中测试机每秒钟接收到的数据包数约为1200万。

网络PPS大于2000万

1. 分别远程连接测试机和辅助测试机。

   具体操作，请参见通过密码或密钥认证登录Linux实例。

2. 分别在3台辅助测试机和1台测试机上执行以下命令，安装sockperf。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. 在测试机上执行以下命令，绑定中断。

   在高PPS场景下，通过将中断绑定到特定的CPU核心，可以确保处理中断的CPU核心相对固定，减少上下文切换，提高处理效率。

   a=$(cat /proc/interrupts | grep virtio2-input | awk -F ':' '{print $1}')
   cpu=0
   for irq in $a; do
       echo $cpu >/proc/irq/$irq/smp_affinity_list
       let cpu+=2
   done

4. 在测试机上执行以下命令，查询测试机的私网IP地址。

   ifconfig || ip addr

   

5. 分别在3台辅助测试机上执行以下命令，向测试机输入流量。

   server_ip="<测试机私网IP地址>"
   threads=64
   msg_size=14
   run_time=60
   
   basePort=6666
   for((i=0;i<$threads;++i));do
       nohup sockperf tp -i $server_ip --pps max -m ${msg_size} -t ${run_time} --port $[${basePort}+${i}] 2>&1 &
   done

   其中<测试机私网IP地址>是实际测试机的私网IP地址，run_time是输入流量的时间，请您根据实际情况修改。

6. 分别在3台辅助测试机和1台测试机上执行以下命令，测试网络流量。

   sar -n DEV 1

   在测试机上查看rxpck/s列的数据值，rxpck/s表示该测试机每秒钟接收到的数据包。如下图所示，示例中测试机每秒钟接收到的数据包数约为2000万。

Linux实例

1. 分别远程连接测试机和辅助测试机。

   具体操作，请参见通过密码或密钥认证登录Linux实例。

2. 分别在测试机和辅助测试机上执行以下命令，下载Netperf。

   wget https://benchmark-packages.oss-cn-qingdao.aliyuncs.com/netperf-2.7.0.tar.gz

3. 分别在测试机和辅助测试机上执行以下命令，安装Netperf和sar监控工具。

   1. 执行以下命令，解压Netperf包。

      sudo yum install -y gcc autoconf automake libtool sysstat
      tar -zxvf netperf-2.7.0.tar.gz

   2. 执行以下命令，查询gcc版本号。

      gcc -v 2>&1

   3. 若测试机和辅助测试机安装的gcc版本高于10版本，则您需要继续执行下述操作，以确保gcc可以正常编译。否则，请忽略此步骤。

      1. 执行以下命令，修改nettest_omni.c文件。

         cd netperf
         vim src/nettest_omni.c

      2. 按i键进入编辑模式，手动删除nettest_omni.c文件中的声明变量内容。

         声明变量内容如下所示：

         /* different options for the sockets        */
         
         int
           loc_nodelay,    /* don't/do use NODELAY  locally    */
           rem_nodelay,    /* don't/do use NODELAY remotely  */
           loc_sndavoid,    /* avoid send copies locally    */
           loc_rcvavoid,    /* avoid recv copies locally    */
           rem_sndavoid,    /* avoid send copies remotely    */
           rem_rcvavoid;   /* avoid recv_copies remotely    */

      3. 修改完成后按Esc键，输入:wq后按下回车键，保存并退出。

   4. 执行以下命令，安装Netperf和sar监控工具。

      cd netperf
      sudo ./configure
      sudo make && sudo make install

4. 在测试机上执行以下命令，启动64个netserver服务。

   #!/bin/bash
   for j in `seq 64`; do
       netserver -p $[16000+j] > server_$[16000+j].netperf > /dev/null 2>&1  &
   done

5. 在测试机上执行以下命令，查询测试机的私网IP地址。

   ifconfig || ip addr

   

6. 在辅助测试机上执行以下命令，向测试机输入流量。

   #!/bin/bash
   server_ip=<测试机私网IP地址>
   for j in `seq 64`; do
       port=$[16000+j]
       netperf -H ${server_ip} -l ${run_time:-300} -t TCP_STREAM -p $port -- -D > /dev/null 2>&1 & 
   done

   <测试机私网IP地址>需替换为上一步查询的实际测试机的私网IP地址，示例如下图所示。

   

7. 在测试机上执行以下命令，测试网络带宽。

   sar -n DEV 1

   在测试结果中查看rxkB/s列的数据值，rxkB/s表示该测试机每秒钟接收的数据包的大小，单位为千字节（KB）。与带宽（kbps）转换关系为：带宽（kbps）= 千字节数（rxkB/s）* 8。

   示例如下图所示。

Windows实例

Linux实例

1. 分别远程连接测试机和辅助测试机。

   具体操作，请参见通过密码或密钥认证登录Linux实例。

2. 分别在测试机和辅助测试机上执行以下命令，安装sockperf。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. 在测试机上执行以下命令，查询测试机的私网IP地址。

   ifconfig || ip addr

   

4. 在测试机上执行以下命令，启动服务。

   sockperf sr --tcp --daemonize

5. 在辅助测试机上执行以下命令，向测试机输入流量。

   sockperf pp -i <测试机私网IP地址> --tcp -t 30 -m 14 --full-log=result.json

   <测试机私网IP地址>需替换为上一步查询的实际测试机的私网IP地址。

6. 在测试机中查看测试的网络时延。

   测试示例如下图所示：

   • 以avg-latency开头的结果数据表示平均时延，单位为us。

   • 以percentile 99.000开头的结果数据表示99分位时延，单位为μs。

   

Windows实例