ゲートウェイクラスターは、負荷分散とセキュリティ隔離を提供し、クラスターに直接ログインすることなく E-MapReduce クラスターにジョブを送信できます。
前提条件
E-MapReduce で Hadoop クラスターまたは Kafka クラスターを作成済みである必要があります。詳細については、「クラスターの作成」をご参照ください。
2022 年 12 月 19 日 17:00(UTC + 08:00)より前に Hadoop クラスターまたは Kafka クラスターを作成した Alibaba Cloud アカウントのみ、引き続きこれらのクラスターを作成できます。
制限事項
この方法は Hadoop クラスターおよび Kafka クラスターにのみ適用されます。DataLake、OLAP、DataFlow、およびカスタムクラスター向けのゲートウェイデプロイメントについては、「ゲートウェイデプロイモードと選択ガイド」をご参照ください。
操作手順
-
EMR コンソールにログインします。
-
EMR on ECS ページで、対象のクラスター名をクリックします。
-
基本情報 ページの右上隅で、All Operations > Create Gateway の順に選択します。
-
Create Gateway ページで、以下のパラメーターを設定します。
モジュール
パラメーター
説明
関連付け設定
Region
ゲートウェイクラスターの物理的な配置場所です。
Resource Group
ゲートウェイクラスターのリソースグループです。
新しいリソースグループを作成するには、Create Resource Group. をクリックします。詳細については、「リソースグループの作成」をご参照ください。
Associated Cluster
ゲートウェイクラスターに関連付ける計算クラスターです。リストは選択したリージョンでフィルターされます。クラスターは以下の要件を満たしている必要があります。
-
クラスターのステータスが「実行中」であること。
-
Hadoop クラスターまたは Kafka クラスターのみを関連付け可能であること。
説明関連付けクラスターを選択すると、ゲートウェイクラスターの VPC は自動的に関連付けクラスターの VPC になります。新旧両方のコンソールで作成されたクラスターを関連付けられます。
基本設定
Billing Method
-
Subscription:前払い方式の課金方法です。リソース利用前に料金を支払います。
-
Pay-as-you-go:後払い方式の課金方法で、1 時間単位で課金されます。短期的なテストや動的ワークロードに適しています。
可用性ゾーン
ゲートウェイクラスターのゾーンを選択します。このゾーンは関連付けクラスターのゾーンと同じである必要があります。
vSwitch
指定された VPC およびゾーン内の vSwitch を選択します。
Default Security Group
関連付けクラスターのセキュリティグループを使用します。
Assign Public Network IP
ゲートウェイクラスターに EIP を割り当てるかどうかを選択します。
Node Group
-
Instance Type:ゲートウェイノードの ECS インスタンスタイプを選択します。利用可能なタイプは選択したリージョンでフィルターされます。詳細については、「インスタンスファミリー」をご参照ください。
-
System Disk:ゲートウェイノードのシステムディスクタイプです。Ultra Disk、ESSD、標準 SSD がサポートされています。利用可能なディスクタイプはインスタンスタイプおよびリージョンによって異なります。デフォルトでは、クラスターをリリースするとシステムディスクは削除されます。
必要に応じてシステムディスクサイズを調整してください。有効値:60 GiB ~ 500 GiB。
-
Data Disk:ゲートウェイノードのデータディスクタイプです。Ultra Disk、ESSD、標準 SSD がサポートされています。利用可能なディスクタイプはインスタンスタイプおよびリージョンによって異なります。デフォルトでは、クラスターをリリースするとデータディスクは削除されます。
必要に応じてデータディスクサイズを調整してください。有効値:40 GiB ~ 32,768 GiB。
-
Instances:ゲートウェイノードの数です。デフォルト値:1。必要に応じて値を調整できます。
クラスター名
ゲートウェイクラスターの名前です。名前は 1 ~ 64 文字で、漢字、英字、数字、ハイフン (-)、アンダースコア (_) を使用できます。
Identity Credentials
ゲートウェイクラスター内のすべてのノードにログインするために使用する認証情報です。
-
Password:ゲートウェイクラスターへのログイン用パスワードを入力します。
-
8 ~ 30 文字である必要があります。
-
大文字および小文字を含む必要があります。
-
数字および特殊文字を含む必要があります。サポートされる特殊文字:
!@#$%^&*
-
-
Key Pair:ゲートウェイクラスターへのログイン用キーペアを選択します。キーペアをお持ちでない場合は、Create Key Pair をクリックして ECS コンソールに移動し、キーペアを作成してください。
秘密鍵ファイル(.pem ファイル)は安全に保管してください。ゲートウェイクラスター作成後、システムが自動的に公開鍵をクラスターの ECS インスタンスにバインドします。SSH を使用してゲートウェイクラスターにログインする際は、秘密鍵を指定する必要があります。
詳細設定
ECS Application Role
クラスター上のアプリケーションが他の Alibaba Cloud サービスを呼び出すことを許可する RAM ロールです。デフォルト値:AliyunECSInstanceForEMRRole。
Bootstrap Actions
オプションです。クラスター起動前にカスタムスクリプトを実行できます。詳細については、「ブートストラップアクションを使用したスクリプトの実行」および「スクリプトの手動実行」をご参照ください。
Tags
オプションです。クラスター作成時または作成後にタグを追加できます。詳細については、「タグの管理」をご参照ください。
データディスクの暗号化
オプションです。この機能はクラスター作成時のみ有効化できます。詳細については、「データディスク暗号化の有効化」をご参照ください。
-
-
パラメーターを設定したら、作成と支払い をクリックします。
ゲートウェイクラスターが作成されると、Status が 作成中 から 実行中 に変化します。