Elastic Compute Service：網路效能測試方法

網路PPS小於600萬

1. 分別遠端連線測試機和輔助測試機。

   具體操作，請參見使用Workbench登入Linux執行個體。

2. 分別在測試機和輔助測試機上執行以下命令，下載Netperf。

   wget https://benchmark-packages.oss-cn-qingdao.aliyuncs.com/netperf-2.7.0.tar.gz

3. 分別在測試機和輔助測試機上執行以下命令，安裝Netperf和sar監控工具。

   1. 執行以下命令，解壓Netperf包。

      sudo yum install -y gcc autoconf automake libtool sysstat
      tar -zxvf netperf-2.7.0.tar.gz

   2. 執行以下命令，查詢gcc版本號碼。

      gcc -v 2>&1

   3. 若測試機和輔助測試機安裝的gcc版本高於10版本，則您需要繼續執行下述操作，以確保gcc可以正常編譯。否則，請忽略此步驟。

      1. 執行以下命令，修改nettest_omni.c檔案。

         cd netperf
         vim src/nettest_omni.c

      2. 按i鍵進入編輯模式，手動刪除nettest_omni.c檔案中的聲明變數內容。

         聲明變數內容如下所示：

         /* different options for the sockets        */
         
         int
           loc_nodelay,    /* don't/do use NODELAY  locally    */
           rem_nodelay,    /* don't/do use NODELAY remotely  */
           loc_sndavoid,    /* avoid send copies locally    */
           loc_rcvavoid,    /* avoid recv copies locally    */
           rem_sndavoid,    /* avoid send copies remotely    */
           rem_rcvavoid;   /* avoid recv_copies remotely    */

      3. 修改完成後按Esc鍵，輸入:wq後按下斷行符號鍵，儲存並退出。

   4. 執行以下命令，安裝Netperf和sar監控工具。

      cd netperf
      sudo ./configure
      sudo make && sudo make install

4. 在測試機上執行以下命令，啟動64個netserver服務。

   #!/bin/bash
   for j in `seq 64`; do
       netserver -p $[16000+j] > server_$[16000+j].netperf > /dev/null 2>&1  &
   done

5. 在測試機上執行以下命令，查詢測試機的私網IP地址。

   ifconfig || ip addr

   

6. 在輔助測試機上執行以下命令，向測試機輸入資料流量。

   #!/bin/bash
   server_ip=<測試機私網IP地址>
   for j in `seq 64`; do
       port=$[16000+j]
       netperf -H ${server_ip} -l ${run_time:-300} -t UDP_STREAM  -p $port  -- -m 1 -D > /dev/null 2>&1 &
   done

   <測試機私網IP地址>需替換為上一步查詢的實際測試機的私網IP地址，樣本如下圖所示。

   

7. 在測試機上執行以下命令，測試網路PPS。

   sar -n DEV 1

   在測試結果中查看rxpck/s列的資料值，rxpck/s表示該測試機每秒鐘接收的資料包總數。如下圖所示，樣本中測試機每秒鐘接收到的資料包平均數約為94萬。

   

網路PPS大於600萬小於2000萬

1. 分別遠端連線測試機和輔助測試機。

   具體操作，請參見使用Workbench登入Linux執行個體。

2. 分別在3台輔助測試機和1台測試機上執行以下命令，安裝sockperf。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. 在測試機上執行以下命令，查詢測試機的私網IP地址。

   ifconfig || ip addr

   

4. 分別在3台輔助測試機上執行以下命令，向測試機輸入資料流量。

   server_ip="<測試機私網IP地址>"
   threads=64
   msg_size=14
   run_time=60
   
   basePort=6666
   for((i=0;i<$threads;++i));do
       nohup sockperf tp -i $server_ip --pps max -m ${msg_size} -t ${run_time} --port $[${basePort}+${i}] 2>&1 &
   done

   其中<測試機私網IP地址>是實際測試機的私網IP地址，run_time是輸入資料流量的時間，請您根據實際情況修改。

5. 分別在3台輔助測試機和1台測試機上執行以下命令，測試網路流量。

   sar -n DEV 1

   在測試機上查看rxpck/s列的資料值，rxpck/s表示該測試機每秒鐘接收到的資料包。如下圖所示，樣本中測試機每秒鐘接收到的資料包數約為1200萬。

網路PPS大於2000萬

1. 分別遠端連線測試機和輔助測試機。

   具體操作，請參見使用Workbench登入Linux執行個體。

2. 分別在3台輔助測試機和1台測試機上執行以下命令，安裝sockperf。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. 在測試機上執行以下命令，綁定中斷。

   在高PPS情境下，通過將中斷綁定到特定的CPU核心，可以確保處理中斷的CPU核心相對固定，減少環境切換，提高處理效率。

   a=$(cat /proc/interrupts | grep virtio2-input | awk -F ':' '{print $1}')
   cpu=0
   for irq in $a; do
       echo $cpu >/proc/irq/$irq/smp_affinity_list
       let cpu+=2
   done

4. 在測試機上執行以下命令，查詢測試機的私網IP地址。

   ifconfig || ip addr

   

5. 分別在3台輔助測試機上執行以下命令，向測試機輸入資料流量。

   server_ip="<測試機私網IP地址>"
   threads=64
   msg_size=14
   run_time=60
   
   basePort=6666
   for((i=0;i<$threads;++i));do
       nohup sockperf tp -i $server_ip --pps max -m ${msg_size} -t ${run_time} --port $[${basePort}+${i}] 2>&1 &
   done

   其中<測試機私網IP地址>是實際測試機的私網IP地址，run_time是輸入資料流量的時間，請您根據實際情況修改。

6. 分別在3台輔助測試機和1台測試機上執行以下命令，測試網路流量。

   sar -n DEV 1

   在測試機上查看rxpck/s列的資料值，rxpck/s表示該測試機每秒鐘接收到的資料包。如下圖所示，樣本中測試機每秒鐘接收到的資料包數約為2000萬。

Linux執行個體

1. 分別遠端連線測試機和輔助測試機。

   具體操作，請參見使用Workbench登入Linux執行個體。

2. 分別在測試機和輔助測試機上執行以下命令，下載Netperf。

   wget https://benchmark-packages.oss-cn-qingdao.aliyuncs.com/netperf-2.7.0.tar.gz

3. 分別在測試機和輔助測試機上執行以下命令，安裝Netperf和sar監控工具。

   1. 執行以下命令，解壓Netperf包。

      sudo yum install -y gcc autoconf automake libtool sysstat
      tar -zxvf netperf-2.7.0.tar.gz

   2. 執行以下命令，查詢gcc版本號碼。

      gcc -v 2>&1

   3. 若測試機和輔助測試機安裝的gcc版本高於10版本，則您需要繼續執行下述操作，以確保gcc可以正常編譯。否則，請忽略此步驟。

      1. 執行以下命令，修改nettest_omni.c檔案。

         cd netperf
         vim src/nettest_omni.c

      2. 按i鍵進入編輯模式，手動刪除nettest_omni.c檔案中的聲明變數內容。

         聲明變數內容如下所示：

         /* different options for the sockets        */
         
         int
           loc_nodelay,    /* don't/do use NODELAY  locally    */
           rem_nodelay,    /* don't/do use NODELAY remotely  */
           loc_sndavoid,    /* avoid send copies locally    */
           loc_rcvavoid,    /* avoid recv copies locally    */
           rem_sndavoid,    /* avoid send copies remotely    */
           rem_rcvavoid;   /* avoid recv_copies remotely    */

      3. 修改完成後按Esc鍵，輸入:wq後按下斷行符號鍵，儲存並退出。

   4. 執行以下命令，安裝Netperf和sar監控工具。

      cd netperf
      sudo ./configure
      sudo make && sudo make install

4. 在測試機上執行以下命令，啟動64個netserver服務。

   #!/bin/bash
   for j in `seq 64`; do
       netserver -p $[16000+j] > server_$[16000+j].netperf 2>&1 &
   done

5. 在測試機上執行以下命令，查詢測試機的私網IP地址。

   ifconfig || ip addr

   

6. 在輔助測試機上執行以下命令，向測試機輸入資料流量。

   #!/bin/bash
   server_ip=<測試機私網IP地址>
   for j in `seq 64`; do
       port=$[16000+j]
       netperf -H ${server_ip} -l ${run_time:-300} -t TCP_STREAM -p $port -- -D > /dev/null 2>&1 & 
   done

   <測試機私網IP地址>需替換為上一步查詢的實際測試機的私網IP地址，樣本如下圖所示。

   

7. 在測試機上執行以下命令，測試網路頻寬。

   sar -n DEV 1

   在測試結果中查看rxkB/s列的資料值，rxkB/s表示該測試機每秒鐘接收的資料包的大小，單位為KB/s（KB/每秒）。1位元組等於8位元，若要計算對應的頻寬值，則可將rxkB/s列對應的數值乘以8，從而將其轉換為Kbps（千位元/每秒）。

   樣本如下圖所示。

Windows執行個體

Linux執行個體

1. 分別遠端連線測試機和輔助測試機。

   具體操作，請參見使用Workbench登入Linux執行個體。

2. 分別在測試機和輔助測試機上執行以下命令，安裝sockperf。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. 在測試機上執行以下命令，查詢測試機的私網IP地址。

   ifconfig || ip addr

   

4. 在測試機上執行以下命令，啟動服務。

   sockperf sr --tcp --daemonize

5. 在輔助測試機上執行以下命令，向測試機輸入資料流量。

   sockperf pp -i <測試機私網IP地址> --tcp -t 30 -m 14 --full-log=result.json

   <測試機私網IP地址>需替換為上一步查詢的實際測試機的私網IP地址。

6. 在測試機中查看測試的網路時延。

   測試樣本如下圖所示：

   • 以avg-latency開頭的結果資料表示平均時延，單位為us。

   • 以percentile 99.000開頭的結果資料表示99分位時延，單位為μs。

   

Windows執行個體