E-MapReduce:Spark Thrift Server の LDAP 認証を設定および有効化する

ステップ 1: ネットワークの準備

指定された Spark Thrift Server が LDAP サーバーに接続できるように、Serverless Spark とお使いの VPC 間のネットワーク接続を設定する必要があります。詳細については、「EMR Serverless Spark と他の VPC 間のネットワーク接続」をご参照ください。

ステップ 2: Spark Thrift Server の起動パラメーターを設定する

Spark Thrift Server の LDAP 認証を有効にする前に、Spark Thrift Server を停止する必要があります。作成した接続名を [ネットワーク接続] ドロップダウンリストから選択し、[Spark 設定] に次の設定項目を追加します。設定項目を追加した後、Spark Thrift Server を再起動して設定を有効にする必要があります。

spark.hive.server2.authentication              LDAP
spark.hive.server2.authentication.ldap.url     ldap://<ldap_url>:<ldap_port>
spark.hive.server2.authentication.ldap.baseDN  <ldap_base_dn>

ビジネス要件に基づいて、次のパラメーターを設定します。

• <ldap_url> および <ldap_port>: LDAP サーバーの URL とポート。Alibaba Cloud EMR on ECS クラスターの OpenLDAP サービスに接続する場合、<ldap_url> にはマスターノードの内部 IP アドレスを、<ldap_port> には 10389 を指定できます。

  説明

  LDAP が高可用性 (HA) サービスである場合は、複数の LDAP エンドポイントをスペースで区切ります。例: ldap://<ldap_url_1>:<ldap_port> ldap://<ldap_url_2>:<ldap_port>。

• <ldap_base_dn>: LDAP 認証に使用されるベース DN。Alibaba Cloud EMR on ECS クラスターの OpenLDAP サービスに接続する場合、ou=people,o=emr を指定できます。

ステップ 3: LDAP 認証が有効になっている Spark Thrift Server に接続する

このセクションでは、LDAP 認証が有効になっている Spark Thrift Server に接続するための 2 つのメソッドについて説明します。Spark Thrift Server に接続する際は、ビジネス要件に基づいて次の情報を置き換えてください。

• <endpoint>: [概要] タブで取得する [エンドポイント (パブリック)] または [エンドポイント (内部)] の情報。

  内部の同一リージョンエンドポイントを使用する場合、Spark Thrift Server には同じ VPC 内のリソースからのみアクセスできます。

• <token>: [トークン管理] タブのトークン情報。

• <username> および <password>: LDAP サーバーへのログインに使用するユーザー名とパスワード。Alibaba Cloud EMR on ECS クラスターの OpenLDAP サービスに接続する場合は、EMR on ECS の [ユーザー管理] ページで追加したユーザー名とパスワードを指定します。

beeline -u 'jdbc:hive2://<endpoint>:<port>/;transportMode=http;httpPath=cliservice/token/<token>' -n <username> -p <password>

jdbc:hive2://<endpoint>:<port>/;transportMode=http;httpPath=cliservice/token/<token>;user=<username>;password=<password>