すべてのプロダクト
Search
ドキュメントセンター

:ゲートウェイノード

最終更新日:Jan 11, 2025

ゲートウェイノードは、Alibaba Cloud E-MapReduce(EMR)において重要な役割を果たします。ゲートウェイノードは、既存の EMR クラスタに関連付けることができ、独立したジョブ送信ポイントとして機能します。このトピックでは、ゲートウェイクラスタとゲートウェイノードグループについて説明し、既存の EMR クラスタに基づいてゲートウェイクラスタとゲートウェイノードグループを作成する方法に関するリファレンスを提供します。

ゲートウェイクラスタまたはゲートウェイノードグループは、同じ構成を持つ複数のゲートウェイノードで構成される独立したクラスタまたはノードグループです。Hadoop Distributed File System(HDFS)、YARN、Hive、Spark 2、Spark 3、JindoSDK、Flink、Sqoop、Impala、Presto、Hudi、Iceberg、Tez、Delta Lake などのクライアントがクラスタにデプロイされます。ゲートウェイクラスタまたはゲートウェイノードグループが作成されていない場合、Hadoop クラスタなどの EMR クラスタのジョブは、クラスタのマスターノードまたはコアノードで送信されます。これは、このクラスタのリソースを消費します。ゲートウェイクラスタを作成した後、ゲートウェイクラスタを使用して、このゲートウェイクラスタに関連付けられたクラスタのジョブを送信できます。このようにして、ジョブは関連付けられたクラスタのリソースを占有せず、関連付けられたクラスタのコアノード、特にマスターノードの安定性が向上します。

各ゲートウェイクラスタまたはゲートウェイノードグループは、独立した構成環境を持つことができます。たとえば、複数の部門で共有される 1 つの EMR クラスタに対して、それぞれのビジネス要件を満たすために複数のゲートウェイクラスタまたはゲートウェイノードグループを作成できます。クラスタのタイプとバージョンに基づいて、ゲートウェイクラスタまたはゲートウェイノードグループを作成できます。ゲートウェイクラスタとゲートウェイノードグループの作成方法の詳細については、以下のリファレンスをご参照ください。

クラスタタイプ

リファレンス

Hadoop

ゲートウェイクラスタの作成

DataLake および Dataflow

EMR V5.10.1 以降のマイナーバージョン

ゲートウェイノードグループを作成できます。詳細については、「ノードグループの管理」をご参照ください。

EMR V5.10.1 より前のマイナーバージョン

EMR-CLI を使用したゲートウェイのデプロイ

OLAP