AnalyticDB:Lake Cache

前提条件

AnalyticDB for MySQL Enterprise Edition、Basic Edition、または Data Lakehouse Edition クラスタが作成されていること。

概要

課金ルール

Lake Cache 機能を有効にすると、従量課金制に基づいて、使用したキャッシュスペースに対して課金されます。詳細については、「Enterprise Edition および Basic Edition の料金」および「Data Lakehouse Edition の料金」をご参照ください。

使用上の注意

• Lake Cache 機能は、次のリージョンでのみサポートされています。中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、シンガポール、米国 (バージニア)、および インドネシア (ジャカルタ)。

  重要

  他の地域で Lake Cache 機能を使用する場合は、チケットを送信してください。

• キャッシュハードウェアで障害が発生した場合、データクエリは中断されませんが、速度が低下します。キャッシュされたデータが OSS からプリフェッチされると、クエリ速度は復元されます。

• Lake Cache 機能で使用されるキャッシュスペースが上限に達すると、Lake Cache 機能はキャッシュスペース内のアクセス頻度の低いオブジェクトをアクセス頻度の高いオブジェクトに置き換えます。キャッシュスペースに保存されているオブジェクトを置き換えたくない場合は、Lake Cache 機能のキャッシュサイズを増やすことができます。

Lake Cache 機能を有効にする

1. AnalyticDB for MySQL コンソール にログインします。コンソールの左上隅で、リージョンを選択します。左側のナビゲーションウィンドウで、クラスターリスト をクリックします。Enterprise Edition、Basic Edition、または Data Lakehouse Edition タブで、管理するクラスタを見つけ、クラスタ ID をクリックします。

2. クラスター情報 ページの 構成情報 セクションで、[Lake Cache] の横にある [構成] をクリックします。

3. Lake Cache ダイアログボックスで、[Lake Cache] をオンにして、キャッシュサイズを指定します。

   キャッシュサイズの指定時にエラーが発生した場合は、チケットを送信してください。

4. [OK] をクリックします。

   説明

   Lake Cache を有効にした後、上記の手順を実行することで、指定したキャッシュサイズを確認できます。

Lake Cache 機能を使用する

Lake Cache 機能を有効にした後、Spark ジョブの spark.adb.lakecache.enabled パラメーターを指定して、OSS データの読み取りを高速化できます。OSS サンプルコード：

-- これは LakeCache の使用例です。内容を変更して Spark プログラムを実行してください。
SET spark.adb.lakecache.enabled=true;

-- SQL 文をここに記述します
SHOW databases;

{
  "comments": [
    "-- これは LakeCache の使用例です。内容を変更して Spark プログラムを実行してください。" // 翻訳済み
  ],
  "args": ["oss://testBucketName/data/readme.txt"],
  "name": "spark-oss-test",
  "file": "oss://testBucketName/data/example.py",
  "conf": {
    "spark.adb.lakecache.enabled": "true"
  }
}

Lake Cache 機能に関する監視情報を表示する

Lake Cache 機能を有効にした後、CloudMonitor コンソールで、送信された Spark アプリケーションが Lake Cache 機能を使用しているかどうかを確認できます。また、キャッシュスペースから読み取られるデータ量など、Lake Cache 機能に関する監視情報を表示することもできます。次の手順を実行します。

1. CloudMonitor コンソール にログインします。

2. 左側のナビゲーションウィンドウで、[クラウド リソース監視] > [クラウド サービス監視] を選択します。

3. [AnalyticDB For MySQL] カードにポインターを移動し、[AnalyticDB For MySQL 3.0 - Data Lakehouse Edition] をクリックします。

4. 監視する AnalyticDB for MySQL クラスタを見つけ、[アクション] 列の [監視チャート] をクリックします。

5. [LakeCache メトリック] タブをクリックして、Lake Cache メトリックの詳細を表示します。

   次の表に、Lake Cache メトリックを示します。

   メトリック	説明
   LakeCache キャッシュヒット率（%）	キャッシュヒット率。式：キャッシュにヒットした読み取りリクエスト数 / 読み取りリクエストの総数。
   LakeCache キャッシュ使用量（B）	使用済みキャッシュスペース。単位：バイト。
   LakeCache の履歴累積読み取りデータの総量（B）	キャッシュスペースから読み取られたデータの総量。単位：バイト。