Ganosを使用すると、Alibaba Cloud Object Storage Service (OSS) バケット、自己管理型Multi-Cloud Object Storage (MinIO) バケット、およびHadoop Distributed File System (HDFS) ファイルに保存されているラスターデータを作成、インポート、およびエクスポートできます。 このトピックでは、バケットおよびファイル内のラスタデータのパスについて説明します。
OSSバケット内のラスタデータのパス
OSSバケット内のラスターデータのパスは、次の形式です。
oss://<access_id >:< secrect_key>@[<Endpoint>]/bucket_name/path_to/file[:<subset>]以下にパラメーターを説明します。
ラスタデータがNetCDFにあり、サブセットが含まれている場合は、:<subset> パラメーターを指定できます。
access_idおよびsecrect_keyでは、Object Storage Service (OSS) バケットへのアクセスに使用されるAccessKeyペアのAccessKey idおよびAccessKey secretを指定します。 詳細については、「AccessKeyペアの取得」をご参照ください。
Endpointは、OSSバケットのエンドポイントを指定します。 データアクセシビリティを確保するために、RDSインスタンスとOSSバケットが同じリージョンにあり、内部OSSエンドポイントを使用して接続されていることを確認してください。 詳細は、「OSSエンドポイント」をご参照ください。
bucket_nameは、OSSバケットの名前を指定します。/path_to/fileは、OSSバケット内のファイルのディレクトリを指定します。
MinIOバケット内のラスタデータのパス
MinIOバケット内のラスタデータのパスは、次の形式です。 MinIOバケットの詳細については、「マルチクラウドオブジェクトストレージ」をご参照ください。
mio://<id >:< key >@< host>[:<port>]/path_to/file[:<subset>]ラスタデータがNetCDFにあり、サブセットが含まれている場合は、:<subset> パラメーターを指定できます。
portパラメーターを指定しない場合、HTTPSポートが使用されます。 高パフォーマンスでデータをインポートするには、RDSインスタンスと自己管理型MinIOバケットが同じリージョンにあり、内部ネットワークを介して通信できることを確認します。
HDFSファイル内のラスタデータのパス
HDFSファイル内のラスタデータのパスは、次の形式です。
HDFS://<user_name >@< host >:< port>/path_to/file[:<subset>]ラスタデータがNetCDFにあり、サブセットが含まれている場合は、:<subset> パラメーターを指定できます。
user_nameパラメーターを指定しない場合、デフォルト値hadoopが使用されます。
hostパラメーターとportパラメーターは、HDFS構成ファイル内のリモートプロシージャコール (RPC) のエンドポイントとポートを指定します。
高パフォーマンスでデータをインポートするには、RDSインスタンスとHDFSクラスターが同じVPCに存在し、内部ネットワークを介して通信することを確認します。