All Products
Search
Document Center

Simple Log Service:Buat pekerjaan transformasi data

Last Updated:Jun 17, 2026

Transformasi data membaca data dari Logstore sumber, memprosesnya, lalu menuliskan hasilnya ke satu atau beberapa Logstore tujuan. Anda kemudian dapat melakukan kueri dan menganalisis data yang telah ditransformasi. Topik ini menjelaskan cara membuat pekerjaan transformasi data di Konsol Simple Log Service.

Prasyarat

Prosedur

  1. Masuk ke Konsol Simple Log Service.

  2. Buka halaman transformasi data.

    1. Pada bagian Projects, klik proyek yang diinginkan.

    2. Pada tab Log Storage > Logstores, klik logstore yang diinginkan.

    3. Pada halaman kueri dan analisis, klik Data Transformation.

  3. Di pojok kanan atas, pilih rentang waktu untuk data tersebut.

    Pastikan log muncul pada tab Raw Logs setelah Anda memilih rentang waktu.

  4. Di editor, masukkan pernyataan transformasi data.

    Untuk informasi lebih lanjut mengenai sintaksis pernyataan, lihat Sintaksis transformasi data.

  5. Pratinjau data.

    1. Klik Quick.

      Simple Log Service mendukung mode pratinjau Quick dan Advanced. Untuk informasi selengkapnya, lihat Pratinjau dan debug data.

    2. Klik Preview Data.

      Lihat hasil pratinjau.

      • Jika transformasi data gagal karena pernyataan salah atau kesalahan izin, ikuti petunjuk pada halaman tersebut untuk menyelesaikan masalah.

      • Jika hasilnya benar, lanjutkan ke langkah 6.

  6. Buat pekerjaan transformasi data.

    1. Klik Save as Transformation Job (Old Version).

    2. Pada panel Create Data Transformation Job, konfigurasikan parameter berikut lalu klik OK.

      Parameter

      Deskripsi

      Job name

      Nama pekerjaan transformasi data.

      Display name

      Nama tampilan pekerjaan transformasi data.

      Job description

      Deskripsi pekerjaan transformasi data.

      Authorization method

      Metode yang digunakan untuk memberikan otorisasi kepada pekerjaan transformasi data agar dapat membaca data dari Logstore sumber.

      • Default Role: Pekerjaan mengasumsikan role sistem AliyunLogETLRole untuk membaca data dari logstore sumber.

      • Custom Role: Pekerjaan mengasumsikan role kustom untuk membaca data dari logstore sumber.

        Anda harus terlebih dahulu memberikan izin kepada role kustom tersebut untuk membaca data dari logstore sumber. Kemudian, masukkan ARN role kustom tersebut pada bidang Role ARN. Untuk informasi selengkapnya, lihat Gunakan role kustom untuk mengakses data.

      Storage destination

      Destination name

      Nama destinasi penyimpanan. Destinasi penyimpanan mencakup konfigurasi seperti proyek dan Logstore.

      Anda dapat membuat beberapa destinasi penyimpanan untuk menyimpan hasil transformasi di Logstore yang berbeda. Perhatikan hal berikut:

      • Anda dapat menggunakan parameter name dalam fungsi e_output() atau e_coutput() pada pernyataan transformasi Anda untuk menentukan Destination name. Untuk informasi selengkapnya, lihat e_output.

      • Jika pernyataan transformasi tidak mencakup fungsi e_output(), pekerjaan akan menuliskan hasil ke Logstore tujuan pertama yang dikonfigurasi secara default.

        Jika Anda hanya memiliki satu Logstore tujuan, fungsi e_output() biasanya tidak diperlukan.

      • Jika Anda menentukan parameter name, project, dan logstore dalam fungsi e_output() atau e_coutput(), pengaturan tersebut akan menggantikan konfigurasi Destination project dan Destination logstore di UI.

      Destination region

      Wilayah tempat proyek tujuan berada.

      Transformasi data cross-region menggunakan HTTPS untuk memastikan privasi data.

      Transformasi data cross-region mentransmisikan data melalui internet publik, yang dapat menyebabkan latensi pekerjaan akibat ketidakstabilan jaringan. Pilih kotak centang DCDN Acceleration untuk mempercepat transmisi cross-region. Sebelum menggunakan fitur ini, pastikan akselerasi telah diaktifkan untuk proyek yang sesuai. Untuk informasi selengkapnya, lihat Percepat pengumpulan log.

      Catatan

      Transformasi data cross-region ditagih berdasarkan traffic internet outbound (setelah kompresi). Untuk informasi selengkapnya, lihat Pay-by-feature.

      Destination project

      Proyek tempat data hasil transformasi disimpan.

      Destination logstore

      Logstore tempat hasil transformasi disimpan.

      Peringatan

      Jangan mengatur Logstore tujuan sama dengan Logstore sumber. Kesalahan konfigurasi ini menyebabkan loop data tak terbatas dan menimbulkan biaya tambahan untuk penyimpanan dan traffic. Anda bertanggung jawab atas semua biaya yang timbul akibat kesalahan ini.

      Authorization method

      Metode yang digunakan untuk memberikan otorisasi kepada pekerjaan transformasi data agar dapat menulis data ke Logstore tujuan.

      • Default Role: Pekerjaan mengasumsikan role sistem AliyunLogETLRole untuk menulis hasil transformasi ke Logstore tujuan.

      • Custom Role: Pekerjaan mengasumsikan role kustom untuk menulis hasil transformasi ke Logstore tujuan.

        Anda harus terlebih dahulu memberikan izin kepada role kustom tersebut untuk menulis data ke Logstore tujuan. Kemudian, masukkan ARN role kustom tersebut pada bidang Role ARN. Untuk informasi selengkapnya, lihat Gunakan role kustom untuk mengakses data.

      Processing scope

      Time range

      Rentang waktu untuk pekerjaan transformasi data.

      Catatan

      Rentang waktu ini didasarkan pada waktu saat log diterima oleh layanan.

      • All: Memproses semua log mulai dari titik waktu paling awal yang tersedia di logstore hingga pekerjaan dihentikan secara manual.

      • From Specific Time: Memproses log mulai dari waktu tertentu hingga pekerjaan dihentikan secara manual.

      • Specific Time Range: Memproses log dalam rentang waktu tertentu. Pekerjaan akan berhenti secara otomatis pada akhir rentang tersebut.

      Advanced options

      Advanced parameter configuration

      Untuk informasi sensitif seperti kata sandi koneksi database yang digunakan dalam pernyataan pemrosesan, Anda dapat menyimpan informasi tersebut sebagai pasangan kunci-nilai dalam secret dan mereferensikannya dalam pernyataan pemrosesan dengan menggunakan res_local("key").

      Klik + untuk menambahkan beberapa pasangan kunci-nilai. Misalnya, config.vpc.vpc_id.test1:vpc-uf6mskb0b****n9yj dapat merepresentasikan ID VPC tempat instans RDS berada.

Langkah selanjutnya

Setelah pekerjaan transformasi data dibuat, Anda dapat:

  • Di halaman Data Transformation Overview, melihat detail pekerjaan, mengubah pekerjaan, atau menghentikan pekerjaan. Untuk informasi selengkapnya, lihat Kelola pekerjaan transformasi data.

  • Menjalankan kueri dan menganalisis data di Logstore tujuan. Untuk informasi selengkapnya, lihat Memulai kueri dan analisis.