Elastic Compute Service:ネットワークパフォーマンステストの方法

パケット転送速度が 6,000,000 pps 未満の場合

1. テストマシンと 1 台以上の補助テストマシンに接続します。

   詳細については、「Workbench を使用した Linux インスタンスへの接続」をご参照ください。

2. テストマシンと補助テストマシンで次のコマンドを実行して、Netperf インストールパッケージをダウンロードします。

   wget https://benchmark-packages.oss-cn-qingdao.aliyuncs.com/netperf-2.7.0.tar.gz

3. テストマシンと補助テストマシンで次のコマンドを実行して、Netperf と sar をインストールします。

   1. 次のコマンドを実行して、Netperf インストールパッケージを解凍します。

      sudo yum install -y gcc autoconf automake libtool sysstat
      tar -zxvf netperf-2.7.0.tar.gz

   2. 次のコマンドを実行して、gcc のバージョン番号を照会します。

      gcc -v 2>&1

   3. テストマシンと補助テストマシンにインストールされている gcc のバージョンが 10 より後の場合は、次の操作を実行して gcc がコードを正しくコンパイルできるようにします。それ以外の場合は、このステップをスキップできます。

      1. 次のコマンドを実行して、nettest_omni.c ファイルを修正します。

         cd netperf
         vim src/nettest_omni.c

      2. i キーを押して編集モードに入り、nettest_omni.c ファイルから次の変数宣言を手動で削除します。

         変数は次のように宣言されています。

         /* different options for the sockets        */
         
         int
           loc_nodelay,    /* don't/do use NODELAY  locally    */
           rem_nodelay,    /* don't/do use NODELAY remotely  */
           loc_sndavoid,    /* avoid send copies locally    */
           loc_rcvavoid,    /* avoid recv copies locally    */
           rem_sndavoid,    /* avoid send copies remotely    */
           rem_rcvavoid;   /* avoid recv_copies remotely    */

      3. ファイルを修正した後、Esc キーを押し、:wq と入力してから Enter キーを押してファイルを保存し、終了します。

   4. 次のコマンドを実行して、Netperf と sar をインストールします。

      cd netperf
      sudo ./configure
      sudo make && sudo make install

4. テストマシンで次のコマンドを実行して、64 個の netserver サービスを開始します。

   #!/bin/bash
   for j in `seq 64`; do
       netserver -p $[16000+j] > server_$[16000+j].netperf > /dev/null 2>&1  &
   done

5. テストマシンで次のコマンドを実行して、テストマシンのプライベート IP アドレスを照会します。

   ifconfig || ip addr

   

6. 補助テストマシンで次のコマンドを実行して、テストマシンにトラフィックを送信します。

   #!/bin/bash
   server_ip=<Private IP address of the test machine>
   for j in `seq 64`; do
       port=$[16000+j]
       netperf -H ${server_ip} -l ${run_time:-300} -t UDP_STREAM  -p $port  -- -m 1 -D > /dev/null 2>&1 &
   done

   <Private IP address of the test machine> を、前の手順で取得したテストマシンのプライベート IP アドレスに置き換えます。次の図は例を示しています。

   

7. テストマシンで次のコマンドを実行して、テストマシンのパケット転送速度をテストします。

   sar -n DEV 1

   テスト結果で、rxpck/s 列の値を確認します。rxpck/s は、テストマシンが 1 秒あたりに受信するパケットの総数を示します。次の図の例では、テストマシンが 1 秒あたりに受信する平均パケット数は約 940,000 です。

   

パケット転送速度が 6,000,000 pps を超え、20,000,000 pps 未満の場合

1. テストマシンと 1 台以上の補助テストマシンに接続します。

   詳細については、「Workbench を使用した Linux インスタンスへの接続」をご参照ください。

2. 3 台の補助テストマシンと 1 台のテストマシンで次のコマンドを実行して、sockperf をインストールします。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. テストマシンで次のコマンドを実行して、テストマシンのプライベート IP アドレスを照会します。

   ifconfig || ip addr

   

4. 3 台の補助テストマシンのそれぞれで次のコマンドを実行して、テストマシンにトラフィックを送信します。

   server_ip="<private IP address of the test machine>"
   threads=64
   msg_size=14
   run_time=60
   
   basePort=6666
   for((i=0;i<$threads;++i));do
       nohup sockperf tp -i $server_ip --pps max -m ${msg_size} -t ${run_time} --port $[${basePort}+${i}] 2>&1 &
   done

   <private IP address of the test machine> をテストマシンのプライベート IP アドレスに置き換えます。run_time はトラフィックを送信する期間を指定します。必要に応じて値を変更できます。

5. 3 台の補助テストマシンと 1 台のテストマシンで次のコマンドを実行して、パケット転送速度をテストします。

   sar -n DEV 1

   テストマシンで、rxpck/s 列の値を確認します。rxpck/s は、テストマシンが 1 秒あたりに受信するパケット数を示します。次の図の例では、テストマシンが 1 秒あたりに受信するパケット数は約 1,200 万です。

パケット転送速度が 20,000,000 pps を超える場合

1. テストマシンと 1 台以上の補助テストマシンに接続します。

   詳細については、「Workbench を使用した Linux インスタンスへの接続」をご参照ください。

2. 3 台の補助テストマシンと 1 台のテストマシンで次のコマンドを実行して、sockperf をインストールします。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. テストマシンで次のコマンドを実行して、割り込みリクエスト (IRQ) をバインドします。

   1 秒あたりに大量のパケットが転送されるシナリオでは、IRQ を CPU コアにバインドして、IRQ が CPU コアによって処理されるようにすることができます。これにより、コンテキストスイッチが削減され、IRQ 処理効率が向上します。

   a=$(cat /proc/interrupts | grep virtio2-input | awk -F ':' '{print $1}')
   cpu=0
   for irq in $a; do
       echo $cpu >/proc/irq/$irq/smp_affinity_list
       let cpu+=2
   done

4. テストマシンで次のコマンドを実行して、テストマシンのプライベート IP アドレスを照会します。

   ifconfig || ip addr

   

5. 3 台の補助テストマシンのそれぞれで次のコマンドを実行して、テストマシンにトラフィックを送信します。

   server_ip="<private IP address of the test machine>"
   threads=64
   msg_size=14
   run_time=60
   
   basePort=6666
   for((i=0;i<$threads;++i));do
       nohup sockperf tp -i $server_ip --pps max -m ${msg_size} -t ${run_time} --port $[${basePort}+${i}] 2>&1 &
   done

   <private IP address of the test machine> をテストマシンのプライベート IP アドレスに置き換えます。run_time はトラフィックを送信する期間を指定します。必要に応じて値を変更できます。

6. 3 台の補助テストマシンと 1 台のテストマシンで次のコマンドを実行して、パケット転送速度をテストします。

   sar -n DEV 1

   テストマシンで、rxpck/s 列の値を確認します。rxpck/s は、テストマシンが 1 秒あたりに受信するパケット数を示します。次の図の例では、テストマシンが 1 秒あたりに受信するパケット数は約 2,000 万です。

Linux インスタンス

1. テストマシンと補助テストマシンに接続します。

   詳細については、「Workbench を使用した Linux インスタンスへの接続」をご参照ください。

2. テストマシンと補助テストマシンで次のコマンドを実行して、Netperf インストールパッケージをダウンロードします。

   wget https://benchmark-packages.oss-cn-qingdao.aliyuncs.com/netperf-2.7.0.tar.gz

3. テストマシンと補助テストマシンで次のコマンドを実行して、Netperf と sar をインストールします。

   1. 次のコマンドを実行して、Netperf インストールパッケージを解凍します。

      sudo yum install -y gcc autoconf automake libtool sysstat
      tar -zxvf netperf-2.7.0.tar.gz

   2. 次のコマンドを実行して、gcc のバージョン番号を照会します。

      gcc -v 2>&1

   3. テストマシンと補助テストマシンにインストールされている gcc のバージョンが 10 より後の場合は、次の操作を実行して gcc がコードを正しくコンパイルできるようにします。それ以外の場合は、このステップをスキップできます。

      1. 次のコマンドを実行して、nettest_omni.c ファイルを修正します。

         cd netperf
         vim src/nettest_omni.c

      2. i キーを押して編集モードに入り、nettest_omni.c ファイルから次の変数宣言を手動で削除します。

         変数宣言は次のとおりです。

         /* different options for the sockets        */
         
         int
           loc_nodelay,    /* don't/do use NODELAY  locally    */
           rem_nodelay,    /* don't/do use NODELAY remotely  */
           loc_sndavoid,    /* avoid send copies locally    */
           loc_rcvavoid,    /* avoid recv copies locally    */
           rem_sndavoid,    /* avoid send copies remotely    */
           rem_rcvavoid;   /* avoid recv_copies remotely    */

      3. ファイルを修正した後、Esc キーを押し、:wq と入力してから Enter キーを押してファイルを保存し、終了します。

   4. 次のコマンドを実行して、Netperf と sar をインストールします。

      cd netperf
      sudo ./configure
      sudo make && sudo make install

4. テストマシンで次のコマンドを実行して、64 個の netserver サービスを開始します。

   #!/bin/bash
   for j in `seq 64`; do
       netserver -p $[16000+j] > server_$[16000+j].netperf 2>&1 &
   done

5. テストマシンで次のコマンドを実行して、テストマシンのプライベート IP アドレスを照会します。

   ifconfig || ip addr

   

6. 補助テストマシンで次のコマンドを実行して、テストマシンにトラフィックを送信します。

   #!/bin/bash
   server_ip=<Private IP address of the test machine>
   for j in `seq 64`; do
       port=$[16000+j]
       netperf -H ${server_ip} -l ${run_time:-300} -t TCP_STREAM -p $port -- -D > /dev/null 2>&1 & 
   done

   <Private IP address of the test machine> を、前の手順で取得したテストマシンのプライベート IP アドレスに置き換えます。次の図は例を示しています。

   

7. テストマシンで次のコマンドを実行して、ネットワーク帯域幅をテストします。

   sar -n DEV 1

   次の図に示すように、テスト結果の rxkB/s 列の値を確認します。rxkB/s 列には、テストマシンが 1 秒あたりに受信したパケットのサイズが表示されます。単位：KB/s。1 バイトは 8 ビットに相当します。rxkB/s 列のパケットサイズに 8 を掛けると、Kbit/s 単位のネットワーク帯域幅の値が得られます。

   次の図は一例です。

Windows インスタンス

Linux インスタンス

1. テストマシンと補助テストマシンに接続します。

   詳細については、「Workbench を使用した Linux インスタンスへの接続」をご参照ください。

2. テストマシンと補助テストマシンで、次のコマンドを実行して sockperf をインストールします。

   sudo yum install -y autoconf automake libtool gcc-c++
   cd /opt
   sudo wget https://github.com/Mellanox/sockperf/archive/refs/tags/3.8.tar.gz
   sudo tar -zxf 3.8.tar.gz
   cd sockperf-3.8/
   sudo ./autogen.sh
   sudo ./configure
   sudo make -j `cat /proc/cpuinfo| grep process | wc -l`
   sudo make install

3. テストマシンで次のコマンドを実行して、テストマシンのプライベート IP アドレスを照会します。

   ifconfig || ip addr

   

4. テストマシンで次のコマンドを実行して、サービスを開始します。

   sockperf sr --tcp --daemonize

5. 補助テストマシンで次のコマンドを実行して、テストマシンにトラフィックを送信します。

   sockperf pp -i <Private IP address of the test machine> --tcp -t 30 -m 14 --full-log=result.json

   <private IP address of the test machine> を、前の手順で取得したテストマシンのプライベート IP アドレスに置き換えます。

6. テストマシンでテストされたネットワーク遅延を確認します。

   次の図はテストの例です。

   • avg-latency で始まる値は、マイクロ秒 (μs) 単位の平均遅延を示します。

   • percentile 99.000 で始まる値は、μs 単位の 99 パーセンタイルの遅延を示します。

   

Windows インスタンス