DataWorks:MaxCompute テーブルの作成と使用

DataStudio への移動

DataWorks コンソールにログインします。上部のナビゲーションバーで、目的のリージョンを選択します。左側のナビゲーションウィンドウで、データ開発・運用 > データ開発 を選択します。表示されたページで、ドロップダウンリストから目的のワークスペースを選択し、[データ開発へ] をクリックします。

MaxCompute テーブルの作成

テーブルの作成方法

DataWorks の [テーブル管理] ディレクトリでテーブルを作成するか、特定のビジネスプロセス用にテーブルを作成できます。

• テーブル管理からテーブルを作成

  DataStudio の左側のナビゲーションウィンドウで、テーブル管理 を選択し、 アイコンをクリックしてテーブルを作成します。[テーブル管理] モジュールが左側のナビゲーションウィンドウに表示されていない場合は、追加できます。詳細については、「インターフェイスのカスタマイズ」をご参照ください。

• 特定のビジネスプロセスからテーブルを作成

  DataWorks はビジネスプロセスを使用してコードを整理および管理します。ビジネスプロセスに関連するテーブルを作成できます。ビジネスプロセスをまだ作成していない場合は、まず作成する必要があります。詳細については、「ビジネスプロセス」をご参照ください。ビジネスプロセスが存在する場合は、ビジネスプロセスを右クリックし、[テーブルの作成] > [MaxCompute] > [テーブル] を選択します。

  重要

  ボタンが見つからない場合は、MaxCompute 計算リソースがワークスペースにバインドされているかどうかを確認してください。

テーブルの基本情報の設定

テーブルを作成すると、テーブル編集ページが表示されます。このページでは、DataWorks で DDL モードまたは 可視化 モードでテーブル情報を設定できます。

• DDL モードでのテーブルの設定

  テーブル編集ページの アイコンをクリックし、標準の MaxCompute テーブル作成文を使用して MaxCompute テーブルスキーマを生成します。DDL を使用してテーブルスキーマを生成すると、DataWorks はテーブル編集ページの設定を自動的に入力します。タスクのコーディングに慣れている場合は、この方法を使用してください。

  重要

  • テーブル名は、テーブル編集ページに移動する前に定義されます。DDL 作成コマンドでテーブル名を変更することはできません。変更すると、エラーが報告されます。

  • DDL モードでは、コマンドを使用したテーブルの物理プロパティの定義のみがサポートされます。DDL モードでテーブルが作成され、インターフェイスに設定が入力された後、テーブル編集ページでテーブルのビジネスプロパティを編集できます。

• 可視化インターフェイスを使用したテーブルの設定

  テーブル編集ページの指示に従って、テーブルプロパティを設定します。便利な可視化操作を行いたい場合は、この方法を使用してください。次の例は、可視化インターフェイスを使用してテーブル情報を設定する方法を示しています。

  1. [基本] プロパティを設定します。 主な設定項目を次の表に示します。

     設定項目	説明
     中国語名	テーブルの表示名。
     件名	DataWorks のサブジェクトはフォルダに相当します。テーブルの第 1 レベルと第 2 レベルのフォルダを定義します。ビジネス目的に基づいてテーブルを分類し、同じタイプのテーブルを同じフォルダにアタッチできます。 説明 第 1 レベルと第 2 レベルのサブジェクトは、DataWorks でのテーブル管理用のフォルダとして表示され、テーブルをより適切に管理するのに役立ちます。[テーブル管理] ページでサブジェクトによって現在のテーブルをすばやく見つけることができます。利用可能なサブジェクトがない場合は、作成できます。詳細については、「テーブルサブジェクトの定義」をご参照ください。

  2. [物理モデル] を設計します。 設定項目を次の表に示します。

     設定項目	説明
     レイヤー	テーブルが属する物理データウェアハウスレイヤー。レイヤーは、データウェアハウスレイヤーを定義および管理するために使用されます。データウェアハウスレイヤーは、通常、オペレーショナルデータストア (ODS)、ディメンション (DIM)、データウェアハウス詳細 (DWD)、データウェアハウスサマリー (DWS)、およびアプリケーションデータサービス (ADS) に分けられます。ビジネス目的に基づいて、テーブルを適切なレイヤーにアタッチできます。 説明 レイヤーをカスタマイズすることもできます。詳細については、「レイヤー管理」をご参照ください。
     物理カテゴリ	テーブルの物理カテゴリを定義します。これにより、ビジネス利用の観点からテーブルをより詳細に分類できます。カテゴリには通常、基本ビジネスレイヤー、高度なビジネスレイヤーなどがあります。 説明 物理カテゴリをカスタマイズすることもできます。詳細については、「カテゴリ管理」をご参照ください。
     ライフサイクル	テーブルのライフサイクルを定義します。 MaxCompute テーブルのライフサイクルの詳細については、「ライフサイクル」をご参照ください。 MaxCompute テーブルのライフサイクルアクションの詳細については、「ライフサイクルアクション」をご参照ください。
     パーティションタイプ	テーブルがパーティションテーブルか非パーティションテーブルかを定義します。パーティション化された MaxCompute テーブルとパーティション化されていない MaxCompute テーブルの詳細については、「パーティション」をご参照ください。
     テーブルタイプ	テーブルが内部テーブルか外部テーブルかを定義します。内部テーブルのデータをクエリすると、実際のデータがインポートされるため、クエリが高速になります。外部テーブルのデータをクエリする場合、データをインポートせずにクエリできるため、メモリを節約できます。内部および外部 MaxCompute テーブルの詳細については、「テーブル」をご参照ください。

  3. [テーブルスキーマ] を設計します。 主な設定項目を次の表に示します。

     設定	説明
     フィールドタイプ	フィールドのデータ型を定義します。ドロップダウンリストからは、MaxCompute がサポートするデータ型のみを選択できます。MaxCompute のデータ型の詳細については、「データ型のエディション」をご参照ください。
     フィールドセキュリティレベル	フィールドのセキュリティレベルを定義します。この設定項目は、MaxCompute プロジェクトでラベルベースのアクセス制御が有効になっている場合にのみ表示されます。MaxCompute フィールドのセキュリティレベルの詳細については、「ラベルベースのアクセス制御」をご参照ください。
     プライマリキー	テーブルのビジネスプライマリキーを定義します。MaxCompute テーブルはプライマリキーをサポートしていないため、ここでのプライマリキーはビジネスディメンションからの管理にのみ使用されます。

MaxCompute テーブルのコミットと公開

テーブルスキーマを定義した後、開発環境と本番環境にコミットする必要があります。

MaxCompute テーブルへのデータの書き込みとエクスポート

以下のセクションで説明するように、MaxCompute データをインポートおよびエクスポートできます。

MaxCompute テーブルへのデータの書き込み

データ統合タスクとMaxCompute ノードタスクを使用して、MaxCompute テーブルにデータを書き込むことができます。DataWorks は、ローカルデータを MaxCompute テーブルにインポートするためのデータアップロード機能も提供しています。

MaxCompute テーブルからのデータのエクスポート

DataStudio でデータをクエリした後、クエリ結果ページの [ダウンロード] をクリックして、テーブルデータをローカルコンピュータにダウンロードできます。デフォルトでは、一度に最大 10,000 件のデータレコードをダウンロードできます。テナント管理者とテナントセキュリティ管理者は、セキュリティセンターの[データクエリおよび分析制御] ページに移動して、一度にダウンロードできるデータレコードの最大数を設定できます。

MaxCompute テーブル内のデータのクエリ

SQL 文を実行することで、ODPS SQL ノードまたはアドホッククエリ機能を使用して MaxCompute テーブル内のデータをクエリできます。

事前設定された権限

基本モードのワークスペースは、詳細なアクセス制御や開発環境と本番環境間のデータ分離をサポートしていません。このトピックでは、標準モードのワークスペースを例として使用します。

データアクセス動作

MaxCompute はプロジェクト間のテーブルクエリをサポートしています。したがって、DataStudio インターフェイスでプロジェクト名を指定することにより、DataWorks ワークスペース内の本番データをプロジェクト間でクエリできます。次の表に、プロジェクト間でテーブルにアクセスする方法と、さまざまなインターフェイスで実行に使用されるアカウントを示します。

select col1 from projectname_dev.tablename;

select col1 from projectname.tablename;

select col1 from tablename;

MaxCompute データ資産の表示

以下のセクションで説明するように、MaxCompute データ資産を表示できます。

テナント配下の本番テーブルの表示

DataWorks コンソールの DataStudio ページの[テナントテーブル] ペインで、現在のリージョンにある Alibaba Cloud アカウントの本番環境のすべてのテーブルを表示できます。

メタデータの表示

データマップに移動して、MaxCompute テーブルの詳細とメタデータを表示できます。

テーブルリネージの表示

データマップのテーブル詳細ページで、テーブルの上流と下流のリネージを表示できます。

MaxCompute テーブルの一括管理

以下のセクションで説明するように、MaxCompute テーブルを一括で管理できます。

MaxCompute テーブルの一括削除

テーブルオーナーの一括変更

データマップの[マイデータ] ページに移動して、所有する複数のテーブルのオーナーを同時に変更できます。

テーブルライフサイクルの一括変更

データマップの[マイデータ] ページに移動して、テーブルのライフサイクルを一括で変更できます。