E-MapReduce:DataLake クラスターの作成と使用

ステップ 1：クラスターを作成する

1. クラスター作成ページに移動します。

   1. EMR コンソール にログインします。左側のナビゲーションウィンドウで、[EMR On ECS] をクリックします。

   2. 上部のナビゲーションバーで、ビジネス要件に基づいてリージョンとリソースグループを選択します。

      • クラスターの作成後、クラスターのリージョンを変更することはできません。

      • デフォルトでは、アカウントのすべてのリソースグループが表示されます。

   3. EMR on ECS ページで、[クラスターの作成] をクリックします。

2. 表示されるページで、パラメーターを構成します。次の表にパラメーターを示します。

   ステップ	パラメーター	例	説明
   [ソフトウェア構成]	[リージョン]	中国 (杭州)	クラスターの ECS インスタンスが存在する地理的な場所です。 重要 クラスターの作成後、リージョンを変更することはできません。ビジネス要件に基づいてリージョンを選択してください。
   	[ビジネスシナリオ]	Data Lake	クラスターのビジネスシナリオ。ビジネス要件に基づいてビジネスシナリオを選択します。Alibaba Cloud EMR は、コンポーネント、サービス、およびリソースを自動的に構成して、クラスター構成を簡素化し、特定のビジネスシナリオの要件を満たすクラスター環境を提供します。
   	[プロダクトバージョン]	EMR-5.18.1	EMR のバージョン。最新バージョンを選択してください。
   	[高サービス可用性]	オフ	EMR クラスターの高可用性（HA）を有効にするかどうかを指定します。[高サービス可用性] スイッチをオンにすると、EMR はマスターノードを異なる基盤となるハードウェアデバイスに分散させて、障害のリスクを軽減します。デフォルトでは、スイッチはオフになっています。
   	[オプションサービス]	Hadoop-Common、OSS-HDFS、YARN、Hive、Spark3、Tez、Knox、および OpenLDAP	クラスターのオプションサービス。ビジネス要件に基づいてサービスを選択できます。選択したサービスに関連するプロセスは自動的に開始されます。 説明 サービスの Web UI にアクセスするには、Knox と OpenLDAP も選択する必要があります。
   	サービス運用ログの収集を許可する	オン	すべてのサービスのログ収集を有効にするかどうかを指定します。デフォルトでは、このスイッチはオンになっており、クラスターのサービス運用ログが収集されます。ログはクラスターの診断にのみ使用されます。 クラスターの作成後、[基本情報] タブで [サービス運用ログの収集ステータス] パラメーターを変更できます。 重要 このスイッチをオフにすると、EMR クラスターのヘルスチェックとサービス関連のテクニカルサポートが制限されます。ログ収集を無効にする方法と、ログ収集の無効化による影響については、「サービス運用ログの収集を停止するにはどうすればよいですか？」をご参照ください。
   	Metadata	組み込み MySQL	メタデータに組み込み MySQL を選択すると、メタデータは MySQL に保存されます。 重要 組み込み MySQL はテスト環境に適しています。本番環境では組み込み MySQL を使用しないことをお勧めします。本番環境でメタデータサービスを使用する予定の場合は、ビジネス要件に基づいてセルフマネージド RDS または DLF 統合メタデータを選択することをお勧めします。
   	クラスターストレージのルートパス	oss://******.cn-hangzhou.oss-dls.aliyuncs.com	クラスターデータのルートストレージディレクトリ。このパラメーターは、OSS-HDFS サービスを選択した場合にのみ必須です。 説明 OSS-HDFS サービスを使用する前に、クラスターを作成するリージョンで OSS-HDFS サービスが利用可能であることを確認してください。リージョンで OSS-HDFS サービスが利用できない場合は、リージョンを変更するか、OSS-HDFS の代わりに HDFS を使用できます。OSS-HDFS が利用可能なリージョンについては、「OSS-HDFS を有効にし、アクセス権限を付与する」をご参照ください。 新しいデータレイクシナリオ、Dataflow クラスター、DataServing クラスター、または EMR V5.12.1、EMR V3.46.1 以降のマイナーバージョンのカスタムクラスターで DataLake クラスターを作成するときに、OSS-HDFS サービスを選択できます。
   [ハードウェア構成]	[課金方法]	従量課金	クラスターの課金方法。テストを実行する場合は、[従量課金] 課金方法を使用することをお勧めします。テストが完了したら、クラスターをリリースし、本番環境で [サブスクリプション] クラスターを作成できます。
   	[ゾーン]	ゾーン I	クラスターが存在するゾーン。クラスターの作成後、ゾーンを変更することはできません。ビジネス要件に基づいてゾーンを選択してください。
   	[VPC]	vpc_Hangzhou/vpc-bp1f4epmkvncimpgs****	クラスターがデプロイされる仮想プライベートクラウド（VPC）。現在のリージョンで VPC を選択します。利用可能な VPC がない場合は、[VPC の作成] をクリックして VPC を作成します。VPC が作成されたら、[更新] アイコンをクリックして、作成された VPC を選択します。
   	[vSwitch]	vsw_i/vsw-bp1e2f5fhaplp0g6p****	クラスターの vSwitch。指定したゾーンで vSwitch を選択します。ゾーンに利用可能な vSwitch がない場合は、vSwitch を作成します。
   	[デフォルトセキュリティグループ]	sg_seurity/sg-bp1ddw7sm2risw****	重要 ECS コンソールで作成された高度なセキュリティグループを使用することはできません。 クラスターを追加するセキュリティグループ。EMR でセキュリティグループを作成している場合は、ビジネス要件に基づいてセキュリティグループを選択できます。セキュリティグループを作成することもできます。
   	[ノードグループ]	マスターノードグループの [パブリックネットワーク IP の割り当て] スイッチをオンにし、その他のパラメーターのデフォルト設定を使用します	クラスター内のインスタンス。ビジネス要件に基づいて、マスターノード、コアノード、およびタスクノードを構成します。詳細については、「ハードウェア仕様とネットワーク構成を選択する」をご参照ください。
   [基本構成]	[クラスター名]	Emr-DataLake	クラスターの名前。名前は 1 ～ 64 文字で、文字、数字、ハイフン（-）、およびアンダースコア（_）のみを含めることができます。
   	[ID 資格情報]	パスワード	クラスターのマスターノードにリモートアクセスするために使用する ID 資格情報。 説明 パスワードを入力せずに認証を実行する場合は、このパラメーターに [キーペア] を選択できます。詳細については、「SSH キーペアの管理」をご参照ください。
   	[パスワード] と [パスワードの確認]	カスタムパスワード	クラスターにアクセスするために使用するパスワード。後続の操作のためにこのパスワードを記録してください。

3. [次へ: 確認] をクリックします。画面の指示に従って作成を完了します。

   クラスターが [実行中] 状態の場合、クラスターは正常に作成されています。クラスターパラメーターの詳細については、「クラスターの作成」をご参照ください。