DataWorks：Kasus sederhana: Analisis kelompok pembeli rumah

Langkah 1: Buat tabel MaxCompute

Sebelum Anda mengunggah data uji, gunakan fitur katalog data DataWorks untuk membuat tabel bernama bank_data di proyek MaxCompute untuk menyimpan data uji yang akan diunggah.

1. Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi kiri Konsol DataWorks, pilih Data Development and O&M > Data Development. Di halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down Pilih Ruang Kerja dan klik Pergi ke Data Studio.

2. Di panel navigasi kiri halaman Data Studio, klik ikon untuk pergi ke panel Katalog Data.

3. (Opsional) Jika proyek MaxCompute Anda belum ditambahkan ke DataWorks sebagai katalog data, klik ikon di sebelah MaxCompute untuk pergi ke tab DataWorks Sumber Data. Di tab DataWorks Sumber Data, tambahkan proyek MaxCompute yang sudah ditambahkan sebagai sumber daya komputasi atau sumber data ke ruang kerja sebagai katalog data MaxCompute.

4. Di panel DATA CATALOG, klik MaxCompute. Di bagian MaxCompute, buat tabel MaxCompute di folder Tabel di bawah proyek MaxCompute yang ditambahkan sebagai katalog data.

   Catatan

   • Jika fitur skema diaktifkan untuk proyek MaxCompute, Anda harus membuka skema di proyek MaxCompute sebelum dapat membuat tabel MaxCompute di folder Tabel dalam proyek tersebut.

   • Dalam tutorial ini, ruang kerja dalam mode standar digunakan dan debugging hanya diperlukan di lingkungan pengembangan. Oleh karena itu, Anda perlu membuat tabel bank_data di proyek MaxCompute, khususnya di lingkungan pengembangan. Jika menggunakan ruang kerja dalam mode dasar, tabel bank_data harus dibuat di proyek MaxCompute, tetapi hanya di lingkungan produksi.

5. Klik ikon di sebelah Tabel untuk membuka tab pembuatan tabel.

   Pada bagian DDL di tab pembuatan tabel, masukkan kode SQL berikut. Sistem akan secara otomatis menghasilkan semua informasi terkait tabel.

   CREATE TABLE IF NOT EXISTS bank_data
   (
    age             BIGINT COMMENT 'Usia',
    job             STRING COMMENT 'Jenis pekerjaan',
    marital         STRING COMMENT 'Status perkawinan',
    education       STRING COMMENT 'Tingkat pendidikan',
    default         STRING COMMENT 'Apakah memiliki kartu kredit',
    housing         STRING COMMENT 'Hipotek',
    loan            STRING COMMENT 'Pinjaman',
    contact         STRING COMMENT 'Informasi kontak',
    month           STRING COMMENT 'Bulan',
    day_of_week     STRING COMMENT 'Hari dalam seminggu',
    duration        STRING COMMENT 'Durasi',
    campaign        BIGINT COMMENT 'Jumlah kontak selama kampanye',
    pdays           DOUBLE COMMENT 'Waktu yang berlalu sejak kontak terakhir',
    previous        DOUBLE COMMENT 'Jumlah kontak dengan pelanggan',
    poutcome        STRING COMMENT 'Hasil dari kampanye pemasaran sebelumnya',
    emp_var_rate    DOUBLE COMMENT 'Tingkat perubahan pekerjaan',
    cons_price_idx  DOUBLE COMMENT 'Indeks harga konsumen',
    cons_conf_idx   DOUBLE COMMENT 'Indeks kepercayaan konsumen',
    euribor3m       DOUBLE COMMENT 'Tingkat deposito euro',
    nr_employed     DOUBLE COMMENT 'Jumlah karyawan',
    y               BIGINT COMMENT 'Apakah memiliki deposito waktu'
   );

6. Di bilah alat atas tab konfigurasi, klik Deploy untuk membuat tabel bank_data di proyek MaxCompute pada lingkungan pengembangan.

7. Setelah tabel bank_data dibuat, klik nama tabel di bagian MaxCompute untuk melihat detail informasi tabel.

Langkah 2: Unggah data ke tabel bank_data

Unduh file banking.csv ke mesin lokal Anda, lalu unggah data dalam file tersebut ke tabel bank_data yang telah dibuat di proyek MaxCompute. Untuk informasi lebih lanjut, lihat Batasan.

1. Di sudut kiri atas Konsol DataWorks, klik ikon dan pilih All Products > Data Integration > Upload and Download.

2. Di bagian Catatan Unggah Terbaru halaman Unggah dan Unduh, klik Unggah Data. Di halaman Unggah Data, konfigurasikan parameter sesuai dengan tabel berikut.

   Bagian		Deskripsi
   Sumber Data		Pilih File Lokal.
   Specify Data to Be Uploaded	Select File	Unggah file banking.csv yang telah diunduh ke mesin lokal Anda.
   Configure Destination Table	Compute Engine	Pilih MaxCompute.
   	MaxComputeProject Name	Pilih proyek MaxCompute tempat tabel bank_data berada.
   	Select Destination Table	Pilih bank_data.
   Preview Data of Uploaded File		Klik Pemetaan Berdasarkan Urutan untuk menyelesaikan pemetaan antara data di file dengan bidang di tabel bank_data.

   Catatan

   • Anda dapat mengunggah file dengan ekstensi .csv, .xls, .xlsx, dan .json dari mesin lokal Anda.

   • Jika Anda mengunggah file dengan ekstensi .xls atau .xlsx, lembar pertama file akan diunggah secara default.

   • Untuk file dengan ekstensi .csv, ukuran file tidak boleh melebihi 5 GB. Untuk jenis file lainnya, ukuran file tidak boleh melebihi 100 MB.

3. Klik Unggah Data untuk mengunggah data dalam file CSV ke tabel bank_data.

4. Periksa apakah data telah ditulis ke tabel bank_data.

   Setelah data diunggah, gunakan fitur Kueri dan Analisis SQL untuk memeriksa apakah data telah ditulis ke tabel bank_data.

   1. Klik ikon di sudut kiri atas. Di halaman pop-up, klik All Products > Data Analysis > SQL Query.

   2. Di bawah File Saya, klik > New File. Masukkan nama kustom pada File Name dan klik OK.

   3. Di halaman Kueri SQL, konfigurasikan pernyataan SQL berikut.

      SELECT * FROM bank_data limit 10;

   4. Di sudut kanan atas tab konfigurasi file kueri SQL, pilih ruang kerja tempat tabel bank_data berada serta sumber data MaxCompute yang diinginkan, lalu klik OK.

      Catatan

      Dalam tutorial ini, ruang kerja dalam mode standar digunakan, dan tabel bank_data hanya dibuat di lingkungan pengembangan. Oleh karena itu, Anda harus memilih sumber data MaxCompute di lingkungan pengembangan. Jika menggunakan ruang kerja dalam mode dasar, Anda dapat memilih sumber data MaxCompute di lingkungan produksi.

   5. Di bilah alat atas tab konfigurasi, klik ikon Jalankan. Di kotak dialog Estimasi Biaya, klik Jalankan. Setelah pernyataan SQL dieksekusi, sepuluh data pertama di tabel bank_data akan ditampilkan di bagian bawah tab konfigurasi. Ini menunjukkan bahwa data di file berhasil diunggah dari mesin lokal Anda ke tabel bank_data.

      

Langkah 3: Proses data

Pada langkah ini, gunakan node SQL MaxCompute untuk menyaring data yang diunggah ke tabel bank_data. Tujuannya adalah untuk mendapatkan data tentang distribusi tingkat pendidikan di antara orang lajang yang memiliki hipotek. Data yang telah diproses kemudian ditulis ke tabel result_table.

Langkah 4: Debug dan jalankan alur kerja

Setelah alur kerja dikonfigurasi, buka halaman konfigurasi alur kerja dw_basic_case. Klik tombol untuk men-debug dan menjalankan seluruh alur kerja. Jika alur kerja gagal dijalankan, Anda dapat menyelesaikan masalah berdasarkan (log) debug.

Langkah 5: Kueri dan tampilkan data

Setelah data diunggah ke sumber daya komputasi MaxCompute dan diproses di Data Studio, Anda dapat menanyakan result_table di Kueri dan Analisis SQL untuk melakukan analisis data.

1. Klik ikon di sudut kiri atas. Di halaman pop-up, klik All Products > Data Analysis > SQL Query.

2. Di bawah File Saya, klik > New File. Masukkan nama kustom di kolom File Name dan klik OK.

3. Di halaman Kueri SQL, konfigurasikan SQL berikut:

   SELECT * FROM result_table;

4. Di sudut kanan atas tab konfigurasi file kueri SQL, pilih ruang kerja tempat tabel result_table berada dan sumber data MaxCompute yang diinginkan, lalu klik OK.

   Catatan

   Dalam tutorial ini, ruang kerja dalam mode standar digunakan, dan tabel result_table hanya dibuat di lingkungan pengembangan, tidak diterapkan ke lingkungan produksi. Oleh karena itu, Anda harus memilih sumber data MaxCompute di lingkungan pengembangan. Jika menggunakan ruang kerja dalam mode dasar, Anda dapat memilih sumber data MaxCompute di lingkungan produksi.

5. Di bilah alat atas tab konfigurasi, klik ikon Jalankan. Di kotak dialog Estimasi Biaya, klik Jalankan.

6. Di hasil kueri, klik untuk melihat hasil sebagai grafik. Anda dapat mengklik di sudut kanan atas grafik untuk menyesuaikan gaya grafik.

7. Anda juga dapat mengklik Save di sudut kanan atas grafik untuk menyimpannya sebagai kartu. Kemudian, di panel navigasi kiri, Anda dapat mengklik Card () untuk melihat kartu yang disimpan.