MaxCompute:SQL文を使用した外部プロジェクトの管理

外部プロジェクトでテーブルを参照する場合は、SQL文でexternal_project_name.table_name形式でテーブルを指定する必要があります。 外部プロジェクトにテーブルを作成することはできません。

• テーブルにデータを挿入します。

  • パーティション分割されていないテーブルにデータを挿入します。

    -- Go to the MaxCompute project to which the external project is mapped rather than the external project. 
    use doc_test_prod;
    
    -- Insert data into a non-partitioned table. 
    insert into table ext_mcdlf_ddl.ddl_test values(1,"ddl_test_1");

  • パーティションテーブルにデータを挿入します。

    -- Go to the MaxCompute project to which the external project is mapped. 
    use doc_test_prod;
    
    -- Insert data into a partitioned table. 
    insert overwrite table ext_mcdlf_ddl.range_ptstring_ptint partition (pt1 = 'ds1', pt2=2) values (4, 'val4'), (5, 'val5');

• 外部プロジェクトのテーブルに関する情報を表示します。

  -- Go to the MaxCompute project to which the external project is mapped. 
  use doc_test_prod;
  
  -- View the tables in the external project. 
  show tables in doc_test_prod;
  
  -- View the schema of the ext_mcdlf_ddl.ddl_test table. 
  desc extended ext_mcdlf_ddl.ddl_test;

• 外部プロジェクトのテーブルデータを照会します。

  -- Go to the MaxCompute project to which the external project is mapped. 
  use doc_test_prod;
  
  -- Query the data in the non-partitioned table named ext_mcdlf_ddl.ddl_test. 
  select * from ext_mcdlf_ddl.ddl_test limit 10;
  
  -- Query the data in the partitioned table named ext_mcdlf_ddl.range_ptstring_ptint. 
  select * from ext_mcdlf_ddl.range_ptstring_ptint where pt1='ds1';

次のステートメントを実行して、外部HadoopデータソースからHiveテーブルのデータを照会します。

-- Go to the MaxCompute project to which the external project is mapped. You cannot run jobs in an external project. 
use <main_project_name>;

-- Set odps.sql.hive.compatible to true. If you want to access Alibaba Cloud E-MapReduce (EMR) tables, you must configure this property. If you want to access MaxCompute tables, you do not need to configure this property. 
set odps.sql.hive.compatible=true;

-- Optional. Specify the username that is used to access the Hadoop data source. 
set odps.external.hadoop.user=<hadoop_name>;

-- Read data from a Hive table. 
select * from <my_hive_table> limit 10;

外部データソースのテーブルと同じスキーマを持つテーブルを作成する場合は、create table...likeコマンドを実行して、外部データソースのテーブルのスキーマをレプリケートできます。 サンプル文:

-- Create a table.
create table from_exe_tbl like external_project.testtbl;
-- The from_exe_tbl table that you created has the same schema as the external_project.testtbl table. 
The two tables have the same attributes, such as column names, column comments, and table comments, aside from the lifecycle. However, the data in the external_project.testtbl table is not replicated to the from_exe_tbl table. 
-- Query the table data.
SELECT * from from_exe_tbl;
-- View the table schema.
desc from_exe_tbl;