AnalyticDB:Sinkronisasi data menggunakan integrasi tanpa hambatan (Zero-ETL)

Buat peran terkait layanan untuk AnalyticDB for MySQL

1. Navigasi ke daftar Roles di Konsol Resource Access Management (RAM).

2. Periksa apakah ada peran terkait layanan bernama AliyunServiceRoleForAnalyticDBForMySQL di daftar peran. Jika belum ada, buat peran tersebut.

3. Di panel navigasi kiri, klik Create Role.

4. Di kotak dialog Create Role, pilih Alibaba Cloud Service, lalu klik Next.

5. Atur Role Type ke Service-Linked Role, lalu pilih AnalyticDB for MySQL.

6. Klik OK. Kembali ke daftar peran dan verifikasi bahwa peran terkait layanan telah dibuat.

Memberikan izin pengelolaan kepada Pengguna RAM

Pengguna Resource Access Management (RAM) memerlukan dua izin berikut untuk membuat dan mengelola pipa Zero-ETL.

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:*",
                "acs:rds:*:*:*",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": [
                "acs:dts:*:*:*"
            ]
        }
    ]
}

{
    "Version": "1",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "dts:*",
            "Resource": [
                "acs:adb:*:*:dbcluster/am-2zeod8ax4b9a****",
                "acs:rds:*:*:dbinstance/rm-2ze6fs8ouh43****",
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "dts:DescribeRegions",
                "dts:DescribeConfigRelations",
                "dts:DescribeSrcLinkConfig",
                "dts:DescribeDestLinkConfig",
                "dts:DescribeLinkConfig"
            ],
            "Resource": "acs:dts:*:*:*"
        }
    ]
}

Prosedur

1. Login ke Konsol AnalyticDB for MySQL. Di pojok kiri atas konsol, pilih wilayah. Di panel navigasi kiri, klik Clusters. Temukan kluster yang ingin Anda kelola dan klik ID kluster tersebut.

2. Navigasi ke halaman integrasi tanpa hambatan (Zero-ETL). Jalur navigasi berbeda tergantung edisi produk.

   • Untuk kluster Enterprise Edition, Basic Edition, atau Data Lakehouse Edition: Di panel navigasi kiri, pilih Data Ingestion > Database Data Synchronization.

   • Untuk kluster Data Warehouse Edition: Di panel navigasi kiri, pilih Data Transmission Service > Zero-ETL.

3. Klik Create Zero-ETL Task. Di halaman Create Zero-ETL Task, konfigurasikan informasi database sumber dan tujuan.

   • Konfigurasikan informasi database sumber:

     Source Database Information	Description
     Task Name	Nama tugas Zero-ETL.
     Database Type	Pilih RDS for MySQL.
     Access Method	Hanya Alibaba Cloud Instance yang didukung.
     Instance Region	Wilayah tempat instans RDS for MySQL berada.
     RDS Instance ID	ID instans RDS for MySQL.
     Database Account	Akun database instans RDS for MySQL.
     Database Password	Password akun database instans RDS for MySQL.
     Encryption	Metode koneksi ke instans RDS for MySQL. Opsi termasuk Unencrypted Connection dan SSL Secure Connection. Catatan Jika Anda mengatur parameter ini ke SSL-encrypted, Anda harus mengaktifkan enkripsi SSL untuk instans RDS for MySQL terlebih dahulu. Untuk informasi selengkapnya, lihat Gunakan sertifikat cloud untuk mengaktifkan enkripsi SSL dengan cepat.

   • Konfigurasikan informasi database tujuan:

     Destination Database Information	Description
     Database Type	Saat ini, hanya AnalyticDB for MySQL 3.0 yang didukung sebagai database tujuan.
     Access Method	Hanya Alibaba Cloud Instance yang didukung.
     Instance Region	Wilayah tempat kluster AnalyticDB for MySQL berada.
     Instance ID	ID kluster AnalyticDB for MySQL.
     Database Account	Akun database kluster AnalyticDB for MySQL.
     Database Password	Password akun database kluster AnalyticDB for MySQL.

4. Setelah mengonfigurasi parameter di atas, klik Test Connectivity and Proceed. Di halaman konfigurasi Zero-ETL, konfigurasikan parameter berikut:

   Configuration Item	Description
   DDL and DML Operations to Be Synchronized	Pilih operasi DML dan DDL yang akan disinkronkan. Secara default, semua operasi dipilih.
   Source Objects dan Selected Objects	Objek sumber dan objek yang akan disinkronkan di database.
   Advanced Settings (Optional)	Atur waktu percobaan ulang saat database sumber atau tujuan tidak dapat dihubungi atau terjadi masalah lain pada database sumber atau tujuan.

5. Setelah mengonfigurasi parameter di atas, klik Next: Configure Database and Table Fields, lalu konfigurasikan informasi berikut:

   Database, Table, and Field Configuration	Description
   Database Name	Pilih database yang sudah ada.
   Table Name	Pilih tabel data yang sudah ada.
   Primary Key Column	Bidang yang berfungsi sebagai primary key di tabel data yang dipilih.
   Distribution Key	Bidang yang berfungsi sebagai distribution key di tabel data yang dipilih.
   Type	Jenis tabel data. Opsi termasuk Partitioned Table dan Replicated Table.
   Definition Status	Setelah konfigurasi database, tabel, dan bidang didefinisikan, status berubah dari Undefined menjadi Defined.

6. Setelah mengonfigurasi semua parameter di atas, klik Next: Save Task Settings and Precheck.

7. Setelah pemeriksaan awal berhasil, klik Start untuk menjalankan tugas Zero-ETL.

   Di halaman Seamless Data Integration, Anda dapat melihat informasi tentang tugas Zero-ETL, seperti ID/Name, Source/Destination, dan Status.

1. Login ke Konsol Cloud Monitor.

2. Lihat informasi pemantauan.

   1. Di panel navigasi kiri, pilih Resource Monitoring > Cloud Service Monitoring.

   2. Arahkan kursor ke kartu AnalyticDB for MySQL lalu klik AnalyticDB for mysql 3.0 - ZeroETL Latency.

   3. Klik ID kluster untuk melihat informasi pemantauan tugas Zero-ETL di kluster tersebut.

3. Buat aturan alert.

   1. Di panel navigasi kiri, klik Alerts > Alert Rules.

   2. Klik Create Alert Rule. Di panel Create Alert Rule, konfigurasikan aturan alert untuk tugas Zero-ETL. Untuk informasi selengkapnya, lihat Buat aturan alert.

      Catatan

      Atur Product ke AnalyticDB for MySQL 3.0 - ZeroETL Latency.

4. Buat kebijakan langganan.

   1. Di panel navigasi kiri, klik Event Hub > Event Subscriptions.

   2. Klik Create Subscription Policy. Di halaman Create Subscription Policy, konfigurasikan kebijakan langganan untuk tugas Zero-ETL. Untuk informasi selengkapnya, lihat Buat langganan event.

      Catatan

      • Product: Pilih AnalyticDB for MySQL 3.0.

      • Event Type: Pilih Abnormal atau Restore.

      • Event Name: Pilih ZeroETL Task Abnormal atau ZeroETL Task Recovered.