Simple Log Service：Membuat tugas transformasi data

Prosedur

1. Masuk ke konsol Layanan Log Sederhana.

2. Buka halaman transformasi data.

   1. Pada bagian Proyek, klik proyek yang ingin dikelola.

   2. Pada tab Log Storage > Logstores, klik logstore yang ingin dikelola.

   3. Di halaman query dan analisis, klik Data Transformation.

3. Di pojok kanan atas halaman yang muncul, tentukan rentang waktu data yang ingin dikelola.

   Setelah menentukan rentang waktu, verifikasi bahwa log muncul di tab Raw Logs.

4. Di editor kode, masukkan pernyataan transformasi data.

   Untuk informasi lebih lanjut tentang sintaks pernyataan, lihat Pengenalan Bahasa.

5. Pratinjau data.

   1. Pilih Quick.

      Anda dapat memilih Cepat atau Lanjutan. Untuk informasi lebih lanjut, lihat Mode Pratinjau.

   2. Klik Preview Data.

      Lihat hasilnya.

      • Jika data gagal ditransformasi karena pernyataan yang ditentukan tidak valid atau izin yang diberikan tidak valid, ikuti petunjuk di layar untuk menyelesaikan kegagalan.

      • Jika data yang telah ditransformasi dikembalikan sesuai harapan, lanjutkan ke Langkah 6.

6. Buat tugas transformasi data.

   1. Klik Save as Transformation Job(Old Version).

   2. Di panel Create Data Transformation Job, konfigurasikan parameter dan klik OK. Tabel berikut menjelaskan parameter tersebut.

      Parameter	Deskripsi
      Nama Tugas	Nama tugas transformasi data.
      Nama Tampilan	Nama tampilan tugas transformasi data.
      Deskripsi Tugas	Deskripsi tugas transformasi data.
      Metode Otorisasi	Metode yang digunakan untuk memberi otorisasi tugas transformasi data membaca data dari penyimpanan log sumber. Peran Default: Tugas transformasi data mengasumsikan peran sistem AliyunLogETLRole untuk membaca data dari penyimpanan log sumber. Peran Kustom: Tugas transformasi data mengasumsikan peran kustom untuk membaca data dari penyimpanan log sumber. Anda harus memberikan peran kustom izin untuk membaca dari penyimpanan log sumber. Kemudian, Anda harus memasukkan Nama Sumber Daya Alibaba Cloud (ARN) dari peran kustom di bidang Role ARN. Untuk informasi lebih lanjut, lihat Akses data menggunakan peran kustom.
      Tujuan Penyimpanan
      Nama Tujuan	Nama tujuan penyimpanan. Di bagian Tujuan Penyimpanan, Anda harus mengonfigurasi parameter termasuk Proyek Tujuan dan Penyimpanan Target. Anda dapat membuat beberapa tujuan penyimpanan untuk menyimpan data yang telah ditransformasi di penyimpanan log tujuan yang berbeda. Anda dapat menggunakan parameter nama fungsi e_output atau e_coutput dalam pernyataan transformasi untuk menentukan nama tujuan penyimpanan. Untuk informasi lebih lanjut, lihat e_output dan e_coutput. Jika Anda tidak menyertakan fungsi e_output dalam pernyataan transformasi, pekerjaan akan menulis data yang telah ditransformasi ke penyimpanan log di tujuan penyimpanan yang bernomor 1 secara default. Jika Anda hanya ingin mengonfigurasi satu penyimpanan log tujuan, Anda tidak perlu menyertakan fungsi e_output dalam pernyataan transformasi. Jika Anda menyertakan fungsi e_output atau e_coutput dan mengonfigurasi parameter nama, proyek, dan logstore untuk fungsi tersebut, pekerjaan akan berjalan berdasarkan pengaturan parameter dalam fungsi meskipun Anda mengonfigurasi parameter Proyek Tujuan dan Penyimpanan Target di langkah ini.
      Wilayah Tujuan	Wilayah proyek tempat penyimpanan log tujuan berada. Jika Anda ingin melakukan transformasi data lintas wilayah, kami sarankan Anda menggunakan HTTPS untuk transmisi data. Ini memastikan privasi data log. Untuk transformasi data lintas wilayah, data ditransmisikan melalui Internet. Jika koneksi Internet tidak stabil, latensi transformasi data mungkin ada. Anda dapat memilih DCDN Acceleration untuk mempercepat transmisi data lintas wilayah. Sebelum Anda dapat memilih DCDN Acceleration, pastikan fitur percepatan global diaktifkan untuk proyek tujuan. Untuk informasi lebih lanjut, lihat Percepatan pengumpulan log. Catatan Saat data ditransmisikan melalui Internet lintas wilayah, Anda akan dikenakan biaya untuk lalu lintas yang dihasilkan. Volume lalu lintas dihitung berdasarkan ukuran data setelah kompresi. Untuk informasi lebih lanjut, lihat Item tagihan pay-by-feature.
      Proyek Tujuan	Nama proyek tempat penyimpanan log tujuan berada.
      Penyimpanan Target	Nama penyimpanan log tujuan, yang menyimpan data yang telah ditransformasi.
      Metode Otorisasi	Metode yang digunakan untuk memberi otorisasi tugas transformasi data menulis data yang telah ditransformasi ke penyimpanan log tujuan. Peran Default: Tugas transformasi data mengasumsikan peran sistem AliyunLogETLRole untuk menulis data yang telah ditransformasi ke penyimpanan log tujuan. Peran Kustom: Tugas transformasi data mengasumsikan peran kustom untuk menulis data yang telah ditransformasi ke penyimpanan log tujuan. Anda harus memberikan peran kustom izin untuk menulis ke penyimpanan log tujuan. Kemudian, Anda harus memasukkan ARN peran kustom di bidang Role ARN. Untuk informasi lebih lanjut, lihat Akses data menggunakan peran kustom.
      Rentang Waktu untuk Transformasi Data
      Rentang Waktu	Rentang waktu data yang ditransformasi. Catatan Rentang waktu bervariasi berdasarkan waktu ketika log diterima. All: Pekerjaan mentransformasi data di penyimpanan log sumber dari log pertama hingga pekerjaan dihentikan secara manual. From Specific Time: Pekerjaan mentransformasi data di penyimpanan log sumber dari log yang diterima pada waktu mulai yang ditentukan hingga pekerjaan dihentikan secara manual. Within Specific Period: Pekerjaan mentransformasi data di penyimpanan log sumber dari log yang diterima pada waktu mulai yang ditentukan hingga log yang diterima pada waktu akhir yang ditentukan.
      Opsi Lanjutan
      Pengaturan Parameter Lanjutan	Anda mungkin perlu menentukan kata sandi seperti kata sandi basis data dalam pernyataan transformasi. Layanan Log Sederhana memungkinkan Anda menambahkan pasangan kunci-nilai untuk menyimpan kata sandi. Anda dapat menentukan res_local("key") dalam pernyataan Anda untuk merujuk kata sandi. Anda dapat mengklik ikon + untuk menambahkan lebih banyak pasangan kunci-nilai. Misalnya, Anda dapat menambahkan config.vpc.vpc_id.test1:vpc-uf6mskb0b****n9yj untuk menunjukkan ID virtual private cloud (VPC) tempat instance ApsaraDB RDS berada.