Elastic Compute Service:Configure the usage mode of persistent memory

1. fio ツールはデータ損失を引き起こす可能性があります。ローカルディスクのパフォーマンスをテストする前に、テストするローカルディスクにデータが含まれていないことを確認してください。

2. データを含むローカルディスクをテストする必要がある場合は、ディスクのパフォーマンスをテストする前にディスクデータをバックアップしてください。詳細については、「ローカルディスクのデータをバックアップする」をご参照ください。

3. ECS インスタンスに接続します。

   詳細については、「Workbench を使用して SSH 経由で Linux インスタンスに接続する」をご参照ください。

4. 次のコマンドを実行して、fio ツールをインストールします。

   sudo yum install -y ndctl daxctl ipmctl libpmem librpmem libpmemblk libpmemlog libpmemobj libpmempool pmempool fio

5. コマンドを実行して、ローカルディスクのパフォーマンスをテストします。

   • サンプルコマンドについては、このトピックのIOPS をテストする、スループットをテストする、およびレイテンシをテストするセクションをご参照ください。

     重要

     テストを連続して実行する場合は、各テストの後に sudo rm /mnt/sdb/* -rf コマンドを実行して、ローカルディスク上の前のテストの残留結果を削除し、次のテストのためにクリーンな環境を準備します。

   • 次の表は、ローカル NVMe (Non-Volatile Memory Express) SSD、企業向け SSD (ESSD)、および永続メモリベースのローカルディスクのパフォーマンス比較を示しています。

     説明

     次の表のパフォーマンスデータは参考値です。テスト結果のデータが優先されます。

     メトリック	128 GiB 永続メモリ	1,788 GiB NVMe SSD	800 GiB ESSD (パフォーマンスレベル 1 (PL1))
     読み取り帯域幅	8 GB/s ～ 10 GB/s	2 GB/s ～ 3 GB/s	0.2 GB/s ～ 0.3 GB/s
     読み取り/書き込み帯域幅	8 GB/s ～ 10 GB/s	1 GB/s ～ 2 GB/s	0.2 GB/s ～ 0.3 GB/s
     書き込み帯域幅	2 GB/s ～ 3 GB/s	1 GB/s ～ 2 GB/s	0.2 GB/s ～ 0.3 GB/s
     読み取り IOPS	1,000,000	500,000	20,000 ～ 30,000
     読み取り/書き込み IOPS	1,000,000	300,000	20,000 ～ 30,000
     書き込み IOPS	1,000,000	300,000	20,000 ～ 30,000
     読み取りレイテンシ	300 ナノ秒～ 400 ナノ秒	100,000 ナノ秒	250,000 ナノ秒
     書き込みレイテンシ	300 ナノ秒～ 400 ナノ秒	20,000 ナノ秒	150,000 ナノ秒

IOPS をテストする

• ローカルディスクのシーケンシャル読み取り IOPS をテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=8 --iodepth=1 --rw=read --bs=4k --size=8GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのシーケンシャル書き込み IOPS をテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=8 --iodepth=1 --rw=write --bs=4k --size=1GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのランダム読み取り IOPS をテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=8 --iodepth=1 --rw=randread --bs=4k --size=8GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのランダム書き込み IOPS をテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=8 --iodepth=1 --rw=randwrite --bs=4k --size=1GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

スループットをテストする

• ローカルディスクのシーケンシャル読み取りスループットをテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=96 --iodepth=1 --rw=read --bs=64k --size=1GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのシーケンシャル書き込みスループットをテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=1 --numjobs=8 --iodepth=1 --rw=write --bs=64k --size=1GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのランダム読み取りスループットをテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=96 --iodepth=1 --rw=randread --bs=64k --size=1GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのランダム書き込みスループットをテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=8 --numjobs=96 --iodepth=1 --rw=randwrite --bs=64k --size=1GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

レイテンシをテストする

• ローカルディスクのシーケンシャル読み取りレイテンシをテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=1 --numjobs=1 --iodepth=1 --rw=read --bs=4k --size=8GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

• ローカルディスクのシーケンシャル書き込みレイテンシをテストする

  sudo fio --name=test --directory=/mnt/sdb --ioengine=libpmem --direct=1 --thread=1 --numjobs=1 --iodepth=1 --rw=write --bs=4k --size=8GB --norandommap=1 --randrepeat=0 --invalidate=1 --iodepth_batch=1 --sync=1 --scramble_buffers=0 --numa_cpu_nodes=0 --numa_mem_policy=bind:0 --cpus_allowed_policy=split

問題の説明

永続メモリをローカルディスクとして使用できる ecs.re7p または ecs.i4p インスタンスで、LLPL を使用してメモリプールを割り当てられませんでした。Failed to create heap. Cannot read unsafe shutdown count** というエラーメッセージが返されます。

原因

デフォルトでは、LLPL ソースコードでunsafe shutdown detection が有効になっています。ただし、仮想化された不揮発性メモリ (NVM) はunsafe shutdown detection をサポートしていません。詳細については、「llpl」をご参照ください。

解決策

LLPL ソースコードで unsafe shutdown detection を無効にするには、次の手順を実行します。

1. LLPL ソースコードの src/main/cpp/com_intel_pmem_llpl_AnyHeap.cpp ファイルに次のコードを追加します。

   int sds_write_value=0;
   pmemobj_ctl_set(NULL,"sds.at_create",&sds_write_value)

   次の図は、上記のコードがファイルに追加されていることを示しています。

   

2. インスタンスにログオンします。

   詳細については、「Workbench を使用して SSH 経由で Linux インスタンスに接続する」をご参照ください。

3. 次のコマンドを実行して、LLPL を使用してテストケースを実行します。

   mvn clean && mvn test -Dtest.heap.path=/mnt/sdb

   "Failed to create heap. Cannot read unsafe shutdown count**" というエラーメッセージが返されない場合は、メモリプールの割り当てに進むことができます。