E-MapReduce:Spark Thrift Server の LDAP 認証を有効にする

ステップ 1：ネットワークの準備

開始する前に、EMR Serverless Spark とお使いの Virtual Private Cloud (VPC) との間のネットワーク接続を確保するために、ネットワークを設定します。これにより、Spark Thrift Server は認証のために LDAP サービスに接続できるようになります。手順については、「EMR Serverless Spark と他の VPC との間のネットワーク接続」をご参照ください。

ステップ 2：Spark Thrift Server 起動パラメーターの設定

LDAP 認証を有効にするには、まず対象の Spark Thrift Server セッションを停止します。 Normal Network Connection ドロップダウンリストで、作成した接続を選択します。 Spark Configuration セクションで、次のパラメーターを追加します。 完了後、セッションを再起動して変更を適用します。

spark.hive.server2.authentication              LDAP
spark.hive.server2.authentication.ldap.url     ldap://<ldap_url>:<ldap_port>
spark.hive.server2.authentication.ldap.baseDN  <ldap_base_dn>

パラメーターは以下のとおりです。プレースホルダーを特定の値に置き換えてください。

• <ldap_url> および <ldap_port>：LDAP サーバーの URL とポート。Alibaba Cloud EMR on ECS クラスター上の OpenLDAP サービスに接続する場合、<ldap_url> をマスターノードの内部 IP アドレスに、<ldap_port> を 10389 に設定できます。

  説明

  お使いの LDAP サービスが高可用性 (HA) 用に設定されている場合は、複数の LDAP サーバーアドレスをスペースで区切ります。例：ldap://<ldap_url_1>:<ldap_port> ldap://<ldap_url_2>:<ldap_port>

• <ldap_base_dn>：LDAP サービス認証のベース DN を指定します。Alibaba Cloud EMR on ECS クラスターの OpenLDAP サービスに接続している場合は、ou=people,o=emr に設定できます。

ステップ 3：Spark Thrift Server への接続

一般的な接続方法を 2 つ紹介します。接続する前に、次のプレースホルダーをお客様の情報に置き換えてください。

• <endpoint>: Overview タブから取得する Endpoint (Public) または Endpoint (Internal) です。

  内部エンドポイントを使用すると、Spark Thrift Server へのアクセスが同じ VPC 内のリソースに制限されます。

• <token>: Tokens タブのトークンです。

• <port>：ポート番号。ポート番号は、パブリックエンドポイント経由のアクセスの場合は 443、内部の同一リージョンエンドポイント経由のアクセスの場合は 80 です。

• <username> および <password>: LDAP サービスのユーザー名とパスワードです。Alibaba Cloud EMR on ECS クラスター上の OpenLDAP サービスに接続する場合、EMR on ECS コンソールの Users ページで追加したユーザー名とパスワードを使用します。

beeline -u 'jdbc:hive2://<endpoint>:<port>/;transportMode=http;httpPath=cliservice/token/<token>' -n <username> -p <password>

jdbc:hive2://<endpoint>:<port>/;transportMode=http;httpPath=cliservice/token/<token>;user=<username>;password=<password>