All Products
Search
Document Center

Data Transmission Service:Migrasi data dari klaster PolarDB for MySQL ke klaster ApsaraDB for ClickHouse

Last Updated:Nov 21, 2025

Layanan Transmisi Data (DTS) mendukung migrasi data dari klaster PolarDB for MySQL ke klaster ApsaraDB for ClickHouse, memungkinkan Anda melakukan streaming dan menganalisis data bisnis secara terpusat.

Prasyarat

Anda harus membuat klaster ApsaraDB for ClickHouse tujuan yang menjalankan versi 20.8 atau lebih baru. Untuk informasi selengkapnya, lihat Buat klaster.

Catatan

Ruang penyimpanan klaster ApsaraDB for ClickHouse harus lebih besar daripada ruang penyimpanan yang digunakan oleh klaster sumber PolarDB for MySQL.

Catatan penggunaan

Jenis

Deskripsi

Batasan pada database sumber

  • Server yang menghosting database sumber harus memiliki bandwidth keluar yang mencukupi. Jika tidak, kecepatan migrasi data akan terpengaruh.

  • Jika Anda melakukan migrasi data tingkat tabel dan perlu melakukan operasi pengeditan seperti pemetaan nama objek, satu tugas migrasi data dapat memigrasikan maksimal 1.000 tabel. Jika jumlah tabel melebihi batas ini, kesalahan permintaan akan dilaporkan setelah Anda mengirimkan tugas tersebut. Dalam kasus ini, pisahkan tabel yang akan dimigrasikan dan konfigurasikan beberapa tugas untuk memigrasikannya secara batch. Atau, konfigurasikan satu tugas untuk memigrasikan seluruh database.

  • Jika Anda melakukan migrasi inkremental:

    • Anda harus mengaktifkan binary logging dan mengatur parameter loose_polar_log_bin ke on. Jika tidak, Pemeriksaan Awal akan melaporkan kesalahan dan tugas migrasi data tidak dapat dimulai. Untuk informasi selengkapnya tentang cara mengaktifkan binary logging dan mengubah parameter, lihat Aktifkan binary logging dan Ubah parameter.

      Catatan

      Mengaktifkan binary logging untuk klaster PolarDB for MySQL akan mengonsumsi ruang penyimpanan dan menimbulkan biaya penyimpanan.

    • Log biner klaster PolarDB for MySQL harus dipertahankan minimal selama 3 hari. Kami merekomendasikan periode retensi selama 7 hari. Jika tidak, DTS mungkin gagal mendapatkan log biner, yang dapat menyebabkan kegagalan tugas. Dalam kasus ekstrem, hal ini dapat menyebabkan ketidakkonsistenan data atau kehilangan data. Masalah yang disebabkan oleh periode retensi log biner yang lebih pendek dari persyaratan DTS tidak dicakup oleh Perjanjian Tingkat Layanan (SLA) DTS.

      Catatan

      Untuk informasi selengkapnya tentang cara mengatur periode retensi log biner klaster PolarDB for MySQL, lihat Ubah periode retensi.

Batasan lainnya

  • Anda tidak dapat memigrasikan data dari node read-only instans sumber PolarDB for MySQL.

  • DTS tidak mendukung migrasi tabel eksternal OSS dari instans sumber PolarDB for MySQL.

  • Migrasi objek INDEX, PARTITION, VIEW, PROCEDURE, FUNCTION, TRIGGER, dan FOREIGN KEY (FK) tidak didukung.

  • DTS tidak mendukung skenario alih bencana primer/cadangan untuk instans database selama migrasi data penuh. Dalam skenario tersebut, segera konfigurasi ulang tugas migrasi.

  • Jika operasi DDL Online yang menggunakan tabel sementara, seperti penggabungan beberapa tabel, dilakukan pada database sumber, kehilangan data dapat terjadi di database tujuan atau instans migrasi dapat gagal.

  • Saat Anda melakukan perubahan DDL Online pada sumber menggunakan DMS atau alat gh-ost, DTS hanya memigrasikan pernyataan DDL asli ke tujuan. Dalam skenario ini, DTS tidak perlu memigrasikan sejumlah besar data tabel sementara, tetapi dapat menyebabkan tabel terkunci di tujuan.

    Catatan

    Migrasi perubahan DDL Online yang dilakukan menggunakan alat seperti pt-online-schema-change pada sumber tidak didukung. Jika perubahan semacam itu ada di sumber, hal ini dapat menyebabkan kehilangan data di tujuan atau kegagalan instans migrasi.

  • Jika pernyataan DDL klaster sumber PolarDB for MySQL tidak mengikuti sintaks standar MySQL, tugas migrasi dapat gagal atau data dapat hilang.

  • Operasi RENAME TABLE tidak dapat dimigrasikan.

  • Data bertipe waktu di ApsaraDB for ClickHouse memiliki rentang tertentu. Jika data waktu di PolarDB for MySQL berada di luar rentang ini, waktu yang dimigrasikan ke ApsaraDB for ClickHouse akan salah. Untuk informasi selengkapnya tentang rentang tersebut, lihat Informasi waktu.

  • Anda tidak dapat memilih bidang yang dapat bernilai null untuk Partition Key. Jika tidak, tugas migrasi akan gagal.

    Catatan

    Kunci partisi hanya mendukung bidang dengan tipe BIGINT, INT, TIMESTAMP, DATETIME, dan DATE.

  • Jumlah database yang akan dimigrasikan tidak boleh melebihi batas ApsaraDB for ClickHouse, yaitu 256.

  • Nama database, tabel, dan kolom yang akan dimigrasikan harus mematuhi Konvensi penamaan ApsaraDB for ClickHouse. Untuk informasi selengkapnya tentang konvensi tersebut, lihat Konvensi penamaan objek.

  • Selama migrasi skema, DTS menambahkan bidang _sign, _is_deleted, dan _version ke tabel tujuan. Jika Anda tidak memilih Schema Migration saat mengonfigurasi Migration Types, Anda harus membuat tabel secara manual di tujuan untuk menerima data dan menambahkan bidang tambahan tersebut ke tabel. Untuk informasi selengkapnya tentang persyaratan pembuatan tabel dan informasi bidang, lihat Tabel dan bidang.

  • Sebelum memigrasikan data, evaluasi kinerja database sumber dan tujuan. Kami merekomendasikan agar Anda melakukan migrasi data di luar jam sibuk. Jika tidak, sinkronisasi data penuh awal akan mengonsumsi sumber daya baca dan tulis database sumber dan tujuan, yang dapat meningkatkan beban database.

  • Jika Anda memigrasikan satu atau beberapa tabel, bukan seluruh database, jangan gunakan alat seperti pt-online-schema-change untuk melakukan perubahan DDL Online pada objek migrasi di database sumber. Jika tidak, migrasi akan gagal.

    Anda dapat menggunakan Data Management (DMS) untuk melakukan perubahan DDL Online. Untuk informasi selengkapnya, lihat Ubah skema tanpa mengunci tabel.

  • Selama migrasi DTS, jangan menulis data dari sumber selain DTS ke database tujuan. Jika tidak, ketidakkonsistenan data antara database sumber dan tujuan akan terjadi.

  • Jika suatu instans gagal, tim dukungan DTS akan mencoba memulihkan instans tersebut dalam waktu 8 jam. Selama proses pemulihan, operasi seperti memulai ulang instans atau menyesuaikan parameternya mungkin dilakukan.

    Catatan

    Saat parameter disesuaikan, hanya parameter instans DTS yang diubah. Parameter di database tidak diubah. Parameter yang mungkin diubah termasuk tetapi tidak terbatas pada yang dijelaskan dalam Ubah parameter instans.

Penagihan

Jenis migrasi

Biaya Penyiapan Tautan

Biaya transfer data

Migrasi skema dan migrasi data penuh

Gratis.

Contoh ini gratis.

Migrasi data inkremental

Dikenai biaya. Untuk informasi selengkapnya, lihat Ikhtisar penagihan.

Operasi SQL yang dapat dimigrasikan secara inkremental

Jenis operasi

Pernyataan operasi SQL

DML

INSERT, UPDATE, DELETE

DDL

  • CREATE TABLE, TRUNCATE TABLE, DROP TABLE

  • ADD COLUMN, MODIFY COLUMN, DROP COLUMN

Pemetaan tipe data

Pemetaan satu-ke-satu tidak mungkin dilakukan karena PolarDB for MySQL dan ApsaraDB for ClickHouse mendukung tipe data yang berbeda. Selama sinkronisasi skema awal, DTS memetakan tipe data berdasarkan tipe yang didukung oleh database tujuan. Untuk informasi selengkapnya, lihat Pemetaan tipe data antar database heterogen.

Izin yang diperlukan untuk akun database

Database

Izin yang diperlukan

Cara membuat dan memberikan izin

Klaster sumber PolarDB for MySQL

Izin baca pada objek migrasi.

Buat dan kelola akun database dan Kelola kata sandi akun database.

Klaster tujuan ApsaraDB for ClickHouse

  • Untuk versi 22.8 atau yang lebih baru, Anda memerlukan izin baca dan tulis pada database tujuan. Akun istimewa memenuhi persyaratan ini.

  • Versi 21.8: Read, Write, and Set Permissions dan Enable DDL.

Manajemen akun untuk klaster Edisi Kompatibel Komunitas

Prosedur

  1. Gunakan salah satu metode berikut untuk membuka halaman Migrasi Data dan pilih wilayah tempat instans migrasi data berada.

    Konsol DTS

    1. Masuk ke Konsol DTS.

    2. Di panel navigasi sebelah kiri, klik Data Migration.

    3. Di pojok kiri atas halaman, pilih wilayah tempat instans migrasi data berada.

    Konsol DMS

    Catatan

    Operasi aktual dapat berbeda tergantung pada mode dan tata letak konsol DMS. Untuk informasi selengkapnya, lihat Mode sederhana dan Sesuaikan tata letak dan gaya konsol DMS.

    1. Masuk ke Konsol DMS.

    2. Di bilah navigasi atas, arahkan kursor ke Data + AI > DTS (DTS) > Data Migration.

    3. Dari daftar drop-down di sebelah kanan Data Migration Tasks, pilih wilayah tempat instans sinkronisasi data berada.

  2. Klik Create Task untuk membuka halaman konfigurasi tugas.

  3. Konfigurasikan database sumber dan tujuan. Tabel berikut menjelaskan parameter-parameternya.

    Kategori

    Konfigurasi

    Deskripsi

    Tidak ada

    Task Name

    Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami merekomendasikan agar Anda menentukan nama deskriptif yang memudahkan identifikasi tugas. Anda tidak perlu menentukan nama tugas yang unik.

    Source Database

    Select Existing Connection

    • Jika Anda menggunakan instans database yang telah didaftarkan ke DTS, pilih instans tersebut dari daftar drop-down. DTS secara otomatis mengisi parameter database berikut untuk instans tersebut. Untuk informasi selengkapnya, lihat Kelola koneksi database.

      Catatan

      Di konsol DMS, Anda dapat memilih instans database dari daftar drop-down Select a DMS database instance.

    • Jika Anda gagal mendaftarkan instans ke DTS, atau tidak perlu menggunakan instans yang telah didaftarkan ke DTS, Anda harus mengonfigurasi informasi database berikut.

    Database Type

    Pilih PolarDB for MySQL.

    Access Method

    Pilih Alibaba Cloud Instance.

    Instance Region

    Pilih wilayah tempat klaster sumber PolarDB for MySQL berada.

    Replicate Data Across Alibaba Cloud Accounts

    Contoh ini menunjukkan migrasi dalam akun Alibaba Cloud yang sama. Pilih No.

    PolarDB Cluster ID

    Pilih ID klaster sumber PolarDB for MySQL.

    Database Account

    Masukkan akun database untuk klaster sumber PolarDB for MySQL. Untuk informasi selengkapnya tentang izin yang diperlukan, lihat Izin yang diperlukan untuk akun database.

    Database Password

    Kata sandi yang digunakan untuk mengakses database.

    Encryption

    Pilih metode sesuai kebutuhan. Untuk informasi selengkapnya tentang fitur enkripsi Secure Sockets Layer (SSL), lihat Atur enkripsi SSL.

    Destination Database

    Select Existing Connection

    • Jika Anda menggunakan instans database yang telah didaftarkan ke DTS, pilih instans tersebut dari daftar drop-down. DTS secara otomatis mengisi parameter database berikut untuk instans tersebut. Untuk informasi selengkapnya, lihat Kelola koneksi database.

      Catatan

      Di konsol DMS, Anda dapat memilih instans database dari daftar drop-down Select a DMS database instance.

    • Jika Anda gagal mendaftarkan instans ke DTS, atau tidak perlu menggunakan instans yang telah didaftarkan ke DTS, Anda harus mengonfigurasi informasi database berikut.

    Database Type

    Pilih ClickHouse.

    Access Method

    Pilih Alibaba Cloud Instance.

    Instance Region

    Pilih wilayah tempat klaster tujuan ApsaraDB for ClickHouse berada.

    Replicate Data Across Alibaba Cloud Accounts

    Contoh ini menunjukkan migrasi dalam akun Alibaba Cloud yang sama. Pilih No.

    Cluster Type

    Pilih jenis klaster ApsaraDB for ClickHouse sesuai kebutuhan.

    Cluster ID

    Pilih ID klaster tujuan ApsaraDB for ClickHouse.

    Database Account

    Masukkan akun database untuk klaster tujuan ApsaraDB for ClickHouse. Untuk informasi selengkapnya tentang izin yang diperlukan, lihat Izin yang diperlukan untuk akun database.

    Database Password

    Kata sandi yang digunakan untuk mengakses database.

  4. Di bagian bawah halaman, klik Test Connectivity and Proceed.

    Catatan

    Pastikan blok CIDR server DTS dapat ditambahkan secara otomatis atau manual ke pengaturan keamanan database sumber dan tujuan untuk mengizinkan akses dari server DTS. Untuk informasi selengkapnya, lihat Tambahkan alamat IP server DTS ke daftar putih.

  5. Konfigurasikan objek yang akan dimigrasikan.

    1. Pada halaman Configure Objects, konfigurasikan objek yang ingin Anda migrasikan.

      Konfigurasi

      Deskripsi

      Migration Types

      • Untuk melakukan hanya migrasi data penuh, pilih Schema Migration dan Full Data Migration.

      • Untuk memastikan kelangsungan layanan selama migrasi data, pilih Schema Migration, Full Data Migration, dan Incremental Data Migration.

      Catatan
      • Jika Anda tidak memilih Schema Migration, pastikan database dan tabel telah dibuat di database tujuan untuk menerima data dan fitur pemetaan nama objek diaktifkan di Selected Objects.

      • Jika Anda tidak memilih Incremental Data Migration, kami merekomendasikan agar Anda tidak menulis data ke database sumber selama migrasi data. Hal ini memastikan konsistensi data antara database sumber dan tujuan.

      Processing Mode of Conflicting Tables

      • Precheck and Report Errors: memeriksa apakah database tujuan berisi tabel yang menggunakan nama yang sama dengan tabel di database sumber. Jika database sumber dan tujuan tidak berisi tabel dengan nama tabel yang identik, pemeriksaan awal berhasil. Jika tidak, kesalahan akan dikembalikan selama pemeriksaan awal dan tugas migrasi data tidak dapat dimulai.

        Catatan

        Jika database sumber dan tujuan berisi tabel dengan nama yang identik dan tabel di database tujuan tidak dapat dihapus atau diganti namanya, Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel yang dimigrasikan ke database tujuan. Untuk informasi selengkapnya, lihat Petakan nama objek.

      • Ignore Errors and Proceed: melewati pemeriksaan awal untuk nama tabel yang identik di database sumber dan tujuan.

        Peringatan

        Jika Anda memilih Ignore Errors and Proceed, ketidakkonsistenan data dapat terjadi dan bisnis Anda mungkin menghadapi risiko potensial berikut:

        • Jika skema database sumber dan tujuan sama, dan catatan data memiliki kunci utama yang sama dengan catatan data yang ada di database tujuan, skenario berikut dapat terjadi:

          • Selama migrasi data penuh, DTS tidak memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan dipertahankan.

          • Selama migrasi data inkremental, DTS memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan ditimpa.

        • Jika skema database sumber dan tujuan berbeda, hanya kolom tertentu yang dimigrasikan atau tugas migrasi data gagal. Harap berhati-hati.

      Capitalization of Object Names in Destination Instance

      Huruf besar/kecil nama database, tabel, dan kolom di instans tujuan. Secara default, DTS default policy dipilih. Anda dapat memilih opsi lain untuk memastikan huruf besar/kecil nama objek konsisten dengan database sumber atau tujuan. Untuk informasi selengkapnya, lihat Tentukan huruf besar/kecil nama objek di instans tujuan.

      Source Objects

      Pilih satu atau beberapa objek dari bagian Source Objects. Klik ikon 向右小箭头 untuk menambahkan objek ke bagian Selected Objects.

      Catatan

      Anda dapat memilih objek untuk dimigrasikan pada tingkat database atau tabel.

      Selected Objects

      • Untuk mengganti nama objek yang ingin Anda migrasikan ke instans tujuan, klik kanan objek di bagian Selected Objects. Untuk informasi selengkapnya, lihat Petakan nama satu objek.

      • Untuk mengganti nama beberapa objek sekaligus, klik Batch Edit di pojok kanan atas bagian Selected Objects. Untuk informasi selengkapnya, lihat Petakan beberapa nama objek sekaligus.

      Catatan
      • Untuk mengatur kondisi filter data, klik kanan tabel yang akan dimigrasikan di kotak Selected Objects dan atur kondisinya di kotak dialog yang terbuka. Untuk informasi selengkapnya, lihat Atur kondisi filter.

      • Jika Anda menggunakan fitur pemetaan nama objek, objek lain yang bergantung pada objek yang diganti namanya mungkin gagal dimigrasikan.

    2. Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan.

      Konfigurasi

      Deskripsi

      Dedicated Cluster for Task Scheduling

      Secara default, DTS menjadwalkan tugas migrasi data ke klaster bersama jika Anda tidak menentukan klaster khusus. Jika Anda ingin meningkatkan stabilitas tugas migrasi data, beli klaster khusus. Untuk informasi selengkapnya, lihat Apa itu klaster khusus DTS.

      Time zone of destination database

      Anda dapat memilih zona waktu untuk data DateTime yang ditulis ke klaster ApsaraDB for ClickHouse.

      Retry Time for Failed Connections

      Rentang waktu coba ulang untuk koneksi yang gagal. Jika database sumber atau tujuan gagal terhubung setelah tugas migrasi data dimulai, DTS segera mencoba menghubungkan kembali dalam rentang waktu coba ulang. Nilai yang valid: 10 hingga 1.440. Satuan: menit. Nilai default: 720. Kami merekomendasikan agar Anda mengatur parameter ini ke nilai lebih dari 30. Jika DTS berhasil terhubung kembali ke database sumber dan tujuan dalam rentang waktu coba ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.

      Catatan
      • Jika Anda menentukan rentang waktu coba ulang yang berbeda untuk beberapa tugas migrasi data yang berbagi database sumber atau tujuan yang sama, nilai yang ditentukan belakangan akan menggantikan nilai sebelumnya.

      • Saat DTS mencoba menghubungkan kembali, Anda dikenai biaya untuk instans DTS. Kami merekomendasikan agar Anda menentukan rentang waktu coba ulang berdasarkan kebutuhan bisnis Anda. Anda juga dapat melepaskan instans DTS sesegera mungkin setelah database sumber dan instans tujuan dilepas.

      Retry Time for Other Issues

      Rentang waktu coba ulang untuk masalah lainnya. Misalnya, jika operasi DDL atau DML gagal dilakukan setelah tugas migrasi data dimulai, DTS segera mencoba mengulang operasi tersebut dalam rentang waktu coba ulang. Nilai yang valid: 1 hingga 1.440. Satuan: menit. Nilai default: 10. Kami merekomendasikan agar Anda mengatur parameter ini ke nilai lebih dari 10. Jika operasi yang gagal berhasil dilakukan dalam rentang waktu coba ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.

      Penting

      Nilai parameter Retry Time for Other Issues harus lebih kecil daripada nilai parameter Retry Time for Failed Connections.

      Enable Throttling for Full Data Migration

      Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data penuh. Selama migrasi data penuh, DTS menggunakan sumber daya baca dan tulis database sumber dan tujuan. Hal ini dapat meningkatkan beban server database. Anda dapat mengaktifkan pembatasan untuk migrasi data penuh berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s). Hal ini mengurangi beban server database tujuan.

      Catatan

      Anda dapat mengonfigurasi parameter ini hanya jika Anda memilih Full Data Migration untuk parameter Migration Types.

      Enable Throttling for Incremental Data Migration

      Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data inkremental. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter RPS of Incremental Data Migration dan Data migration speed for incremental migration (MB/s). Hal ini mengurangi beban server database tujuan.

      Catatan

      Anda dapat mengonfigurasi parameter ini hanya jika Anda memilih Incremental Data Migration untuk parameter Migration Types.

      Whether to delete SQL operations on heartbeat tables of forward and reverse tasks

      Menentukan apakah akan menulis operasi SQL pada tabel heartbeat ke database sumber saat instans DTS berjalan. Nilai yang valid:

      • Yes: tidak menulis operasi SQL pada tabel heartbeat. Dalam hal ini, latensi instans DTS mungkin ditampilkan.

      • No: menulis operasi SQL pada tabel heartbeat. Dalam hal ini, fitur seperti pencadangan fisik dan kloning database sumber mungkin terpengaruh.

      Environment Tag

      Anda dapat memilih tag lingkungan untuk mengidentifikasi instans sesuai kebutuhan. Contoh ini tidak memerlukan pemilihan.

      Configure ETL

      Menentukan apakah akan mengaktifkan fitur ekstrak, transformasi, muat (ETL). Untuk informasi selengkapnya, lihat Apa itu ETL? Nilai yang valid:

      Monitoring and Alerting

      Menentukan apakah akan mengonfigurasi peringatan untuk tugas migrasi data. Jika tugas gagal atau latensi migrasi melebihi ambang batas yang ditentukan, kontak peringatan akan menerima notifikasi. Nilai yang valid:

      • No: tidak mengonfigurasi peringatan.

      • Yes: mengonfigurasi peringatan. Dalam hal ini, Anda juga harus mengonfigurasi ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi selengkapnya, lihat bagian Konfigurasi pemantauan dan peringatan saat membuat tugas DTS dalam topik Konfigurasi pemantauan dan peringatan.

    3. Klik Next: Configure Database and Table Fields untuk mengonfigurasi Type, Primary Key Column, Sort Key, Distribution Key, dan Partition Key untuk tabel tujuan di ClickHouse.

      • DTS menyediakan konfigurasi default. Untuk mengubah konfigurasi ini, Anda dapat mengatur Definition Status ke All.

      • Primary Key Column dan Sort Key dapat berupa kunci komposit. Anda dapat memilih beberapa bidang dari daftar drop-down yang sesuai untuk Primary Key Column atau Sort Key. Anda harus memilih satu atau beberapa kolom dari Primary Key Column untuk berfungsi sebagai Partition Key. Anda hanya dapat memilih satu bidang untuk Distribution Key. Untuk informasi selengkapnya tentang kunci utama, kunci pengurutan, dan kunci partisi, lihat BUAT TABEL.

        Catatan
        • Anda dapat meninggalkan Partition Key tidak dikonfigurasi, tetapi Anda tidak dapat memilih bidang yang dapat bernilai null untuknya karena hal ini akan menyebabkan tugas migrasi gagal.

        • Kunci partisi hanya mendukung tipe data BIGINT, INT, TIMESTAMP, DATETIME, dan DATE. Untuk informasi selengkapnya tentang logika perhitungannya, lihat Logika perhitungan untuk kunci partisi.

  6. Simpan pengaturan tugas dan jalankan pemeriksaan awal.

    • Untuk melihat parameter yang perlu ditentukan saat Anda memanggil operasi API terkait untuk mengonfigurasi tugas DTS, arahkan kursor ke Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters.

    • Jika Anda tidak perlu melihat atau telah melihat parameter tersebut, klik Next: Save Task Settings and Precheck di bagian bawah halaman.

    Catatan
    • Sebelum Anda dapat memulai tugas migrasi data, DTS melakukan pemeriksaan awal. Anda hanya dapat memulai tugas migrasi data setelah tugas tersebut lulus pemeriksaan awal.

    • Jika tugas gagal lulus pemeriksaan awal, klik View Details di sebelah setiap item yang gagal. Setelah Anda menganalisis penyebabnya berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan pemeriksaan awal lagi.

    • Jika peringatan dipicu untuk suatu item selama pemeriksaan awal:

      • Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan pemeriksaan awal lagi.

      • Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog Lihat Detail, klik Ignore. Di pesan yang muncul, klik OK. Kemudian, klik Precheck Again untuk menjalankan pemeriksaan awal lagi. Jika Anda mengabaikan item peringatan, ketidakkonsistenan data dapat terjadi, dan bisnis Anda mungkin menghadapi risiko potensial.

  7. Beli instans.

    1. Tunggu hingga Success Rate menjadi 100%. Kemudian, klik Next: Purchase Instance.

    2. Di halaman Purchase Instance, konfigurasikan parameter Kelas Instans untuk instans migrasi data. Tabel berikut menjelaskan parameter-parameternya.

      Bagian

      Parameter

      Deskripsi

      New Instance Class

      Resource Group

      Kelompok sumber daya tempat instans migrasi data berada. Nilai default: default resource group. Untuk informasi selengkapnya, lihat Apa itu Manajemen Sumber Daya?

      Instance Class

      DTS menyediakan kelas instans yang bervariasi dalam kecepatan migrasi. Anda dapat memilih kelas instans berdasarkan skenario bisnis Anda. Untuk informasi selengkapnya, lihat Kelas instans untuk instans migrasi data.

    3. Baca dan setujui Data Transmission Service (Pay-as-you-go) Service Terms dengan memilih kotak centang.

    4. Klik Buy and Start. Di pesan yang muncul, klik OK.

      Anda dapat melihat progres tugas di halaman Data Migration.

      Catatan
      • Jika tugas migrasi data tidak dapat digunakan untuk memigrasikan data inkremental, tugas tersebut akan berhenti secara otomatis. Completed ditampilkan di bagian Status .

      • Jika tugas migrasi data dapat digunakan untuk memigrasikan data inkremental, tugas tersebut tidak akan berhenti secara otomatis. Tugas migrasi data inkremental tidak pernah berhenti atau selesai. Running ditampilkan di bagian Status.

Lampiran

Informasi waktu

Tipe data

Nilai minimum

Nilai maksimum

Date

1970-01-01 00:00:00

2149-06-06 00:00:00

Date32

1925-01-01 00:00:00

2283-11-11 00:00:00

DateTime

1970-01-01 08:00:00

2106-02-07 14:28:15

DateTime64

1925-01-01 08:00:00

2283-11-12 07:59:59

Tabel dan bidang

Informasi tabel

Jika Anda tidak menggunakan fitur pemetaan nama objek, tabel yang Anda buat harus memenuhi persyaratan berikut.

Penting

Jika tabel tujuan mencakup ENGINE, maka harus berupa ENGINE = ReplicatedReplacingMergeTree(_version, _is_deleted). Jika tidak, ketidakkonsistenan data dapat terjadi.

  • Instans ClickHouse Edisi Komunitas: Anda perlu membuat satu tabel lokal dan satu tabel terdistribusi. Nama tabel terdistribusi harus sama dengan nama tabel sumber. Nama tabel lokal harus berupa <nama_tabel_terdistribusi>_local.

  • Instans ClickHouse Edisi Perusahaan: Anda perlu membuat tabel dengan nama yang sama dengan tabel sumber.

Informasi bidang

Catatan

Di instans ClickHouse, Anda dapat menjalankan pernyataan select * from nama_tabel final where _sign>0; untuk mengkueri data. Kondisi where menyaring data yang dihapus, dan kata kunci final setelah nama tabel menyaring data dengan kunci pengurutan yang sama.

Versi

Nama

Tipe data

Nilai default

Deskripsi

Edisi Komunitas sebelum 23.8

_sign

Int8

1

Jenis operasi DML.

  • INSERT: Catatan adalah 1.

  • UPDATE: Catatan adalah 1.

  • DELETE: Catatan adalah -1.

_version

UInt64

1

Timestamp saat data ditulis ke ClickHouse.

Edisi Perusahaan dan Edisi Komunitas 23.8 dan yang lebih baru

_sign

Int8

1

Jenis operasi DML.

  • INSERT: Catatan adalah 1.

  • UPDATE: Catatan adalah 1.

  • DELETE: Catatan adalah -1.

_is_deleted

UInt8

0

Menunjukkan apakah catatan dihapus:

  • Insert: Catatan adalah 0.

  • Delete: Catatan adalah 1.

  • Update: Catatan adalah 0.

_version

UInt64

1

Timestamp saat data ditulis ke ClickHouse.

Logika perhitungan untuk kunci partisi

Tipe bidang sumber

Logika perhitungan kunci partisi

BIGINT

intDiv(" + tablePartKey + ", 18014398509481984)

INT

intDiv(" + tablePartKey + ", 4194304)

TIMESTAMP

toYYYYMM(" + tablePartKey + ")

DATETIME

DATE