ApsaraDB for ClickHouse:Edisi kompatibel komunitas

Nomor versi

Deskripsi

Dokumen terkait

25.3.2.1-1.3.2

• Penyesuaian parameter

  • Mengaktifkan parameter ttl_only_drop_parts.

  • Menonaktifkan parameter use_uncompressed_cache.

• Lainnya

  Ditingkatkan ke community 25.3 LTS v25.3.11.20-lts.

Tidak ada

Versi

Deskripsi

Dokumen terkait

25.3-1.3.1

• Penyesuaian Parameter

  Parameter ttl_only_drop_parts, query_profiler_cpu_time_period_ns, dan query_profiler_real_time_period_ns menggunakan nilai kernel default.

• Perbaikan Bug

  • Memperbaiki logika merge TTL untuk hot and cold data tiering, sehingga TTL tetap berfungsi dengan benar pada cold storage meskipun merge dinonaktifkan.

  • BackPort TTLMerge dipengaruhi oleh ukuran max_bytes_to_merge_at_max_space_in_pool.

• Lainnya

  Disinkronkan dengan rilis community 25.3 LTS, v25.3.8.23-lts.

Tidak ada

Versi

Deskripsi

Dokumen terkait

25.3-1.3.0

• Perbaikan bug

  Memperbaiki logika merge TTL untuk tiering hot/cold. TTL kini tetap efektif pada cold storage meskipun merge dinonaktifkan.

• Lainnya

  Menggabungkan versi community 25.3 LTS terbaru, v25.3.7.194-lts.

Tidak ada

Versi

Deskripsi

Dokumentasi terkait

25.3-1.1.2

Modifikasi parameter

• max_expanded_ast_elements diatur ke nilai default kernel.

• max_insert_block_size diatur ke nilai default kernel.

• Mengatur merge_with_ttl_timeout menjadi 3600 detik.

Tidak ada

23.8-1.4.3

Modifikasi parameter

• max_expanded_ast_elements diatur ke nilai default kernel.

• max_insert_block_size diatur ke nilai default kernel.

• Mengatur merge_with_ttl_timeout menjadi 3600 detik.

Fitur baru

Anda dapat menggunakan parameter konfigurasi min_free_disk_ratio_to_perform_insert dan min_free_disk_bytes_to_perform_insert untuk melemparkan exception ketika ruang disk kosong tidak mencukupi untuk operasi penulisan.

Perbaikan bug

Memperbaiki crash instans yang disebabkan oleh error "Nullptr dereference in FindOriginalNodeForOutputName".

Nullptr dereference in FindOriginalNodeForOutputName

Versi

Deskripsi

Dokumen terkait

25.3-1.1.1

Peningkatan

Menambahkan dukungan untuk mengonfigurasi parameter terkait Kafka SASL.

Kafka

25.3-1.1.0

Rilis ini memperkenalkan Community Edition 25.3.

• Fitur baru

  • Memperkenalkan tipe data JSON baru yang siap produksi dan sepenuhnya terintegrasi dengan akselerasi kueri.

    • Menyediakan format penyimpanan yang lebih ringkas dibandingkan file terkompresi di disk.

    • Berkinerja hingga ribuan kali lebih cepat dibandingkan solusi penyimpanan JSON tradisional seperti MongoDB.

    • Satu-satunya solusi penyimpanan JSON yang mendukung sepenuhnya jalur JSON dinamis tanpa memerlukan casting tipe.

  • Menambahkan fungsi estimateCompressionRatio untuk mengevaluasi dampak potensial algoritma kompresi berbeda terhadap rasio kompresi data.

  • Menambahkan dukungan untuk Bloom filter untuk tipe data Parquet.

  • Menambahkan dukungan untuk format WithProgress untuk HTTP event streams.

  • Memperkenalkan indeks MinMax tingkat tabel, yang menyimpan nilai minimum dan maksimum dari ekspresi indeks untuk setiap blok.

  • Mendukung operasi non-equi join secara default.

  • Memperkenalkan tipe data BFloat16, yang ideal untuk merepresentasikan penyematan vektor dalam aplikasi AI dan pencarian vektor.

• Optimasi

  • Memperkenalkan cache kondisi kueri untuk mempercepat kueri berulang. Fitur ini mengoptimalkan klausa WHERE selektif yang tidak mendapat manfaat dari indeks primer, skenario umum dalam penggunaan dasbor dan observabilitas.

  • parallel hash join lebih cepat.

  • Inferensi kondisi transitif mendukung inferensi transitif pada rantai perbandingan. Misalnya, untuk klausa WHERE a < b AND b < c AND c < 5, pengoptimal secara otomatis menyimpulkan dan menggunakan kondisi tambahan (a < 5 AND b < 5) untuk meningkatkan efisiensi pemfilteran.

  • Reordering JOIN otomatis. Pengaturan baru query_plan_join_swap_table mengoptimalkan pemilihan tabel build untuk operasi JOIN.

  • Optimasi untuk ekspresi JOIN, diaktifkan oleh pengaturan baru optimize_extract_common_expressions, mengurangi jumlah tabel hash dan memungkinkan penurunan predikat yang lebih baik.

  • Kloning tabel. Gunakan klausa CLONE AS untuk membuat salinan. Ini tidak memerlukan ruang penyimpanan tambahan, dan modifikasi tidak saling memengaruhi.

  • Memperkenalkan mode APPEND untuk materialized view yang dapat diperbarui. Dalam mode ini, baris baru ditambahkan ke tabel alih-alih mengganti seluruh tampilan.

• Peningkatan kinerja

  Peningkatan kinerja sekitar 11% dibandingkan versi 23.8.

• Untuk daftar lengkap fitur baru, lihat 2025 Changelog.

• Tes perbandingan versi resmi Clickbench

Nomor versi

Deskripsi

Referensi

None

Kluster Edisi Community-compatible mendukung SSD Perusahaan (ESSDs) pada Performance Level 0 (PL0).

Harga penyimpanan Edisi Community-compatible

Versi

Deskripsi

Referensi

23.8

fitur baru

Kini Anda dapat memigrasikan data dari kluster ClickHouse yang dikelola sendiri ke kluster edisi kompatibel komunitas ApsaraDB for ClickHouse di Konsol.

Migrate data from a self-managed ClickHouse cluster to a community-compatible cluster

Version

Description

Related documents

N/A

ApsaraDB for ClickHouse kini mendukung wilayah Saudi Arabia (Riyadh).

None

Version number

Description

References

22.8-1.19.0

• Mesin tabel Kafka kini mendukung parameter kafka_auto_offset_reset. Parameter ini memungkinkan Anda menetapkan strategi sinkronisasi Offset ke earliest atau latest saat membuat tabel.

• Mesin tabel MergeTree kini mendukung mutasi tertunda dan melemparkan exception untuk mutasi berlebihan. Penggunaannya sama seperti pada versi 23.8.

• Kunci pengurutan tabel sistem text_log diubah menjadi event_time_microseconds.

• Sync from Kafka

• Add settings to delay or throw in case of too many mutations

23.8-1.4.1

• Mesin tabel Kafka kini mendukung parameter kafka_auto_offset_reset. Parameter ini memungkinkan Anda menetapkan strategi sinkronisasi Offset ke earliest atau latest saat membuat tabel.

• Kunci pengurutan tabel sistem text_log diubah menjadi event_time_microseconds.

Sync from Kafka

Version

Description

Related documentation

23.8-1.3.2

Memperbaiki masalah di mana tabel ReplicatedMergeTree menjadi read-only setelah restart yang tidak terduga.

None

23.8-1.3.1

• Diperbarui ke rilis komunitas v23.8.16.40.

• Mengaktifkan text_log secara default. Sekarang mencatat log pada level Warning, Error, dan Fatal, yang dapat dikueri dari system.text_log.

• Menonaktifkan query_thread_log secara default untuk mengurangi penggunaan disk space.

• Memperbaiki masalah di mana shutdown yang tidak terduga menghalangi distribusi data untuk tabel terdistribusi.

Comparing changes

Version number

Description

References

22.8-1.18.0

• Memperbaiki masalah Kafka engine crash.

• Memperbaiki blokade distribusi data pada tabel terdistribusi yang disebabkan oleh shutdown yang tidak terduga.

None

Version

Deskripsi

Referensi

23.8

• Fitur baru

  • Mendukung aliran data dari S3 menggunakan mesin tabel S3Queue.

  • Mendukung impor langsung file terkompresi dalam format ZIP, TAR, dan 7z ke ApsaraDB for ClickHouse.

  • Mendukung TRUNCATE DATABASE.

  • Mendukung penambahan dan pengurangan vektor secara langsung.

  • Mendukung penggabungan tupel.

  • Pesan error kini menyarankan koreksi untuk nama database dan tabel.

• Optimasi performa

  Performa kueri untuk file Parquet, ORC, TSV, CSV, dan JSON meningkat rata-rata sebesar 40%, dengan beberapa kueri berjalan hingga 4–5 kali lebih cepat.

• ClickHouse Release 23.8

• S3Queue Table Engine

• 2023 Changelog

• TRUNCATE DATABASE

• ClickHouse: Release 23.8 Webinar

Version

Deskripsi

Referensi

22.8

• Peningkatan

  • Menambahkan dukungan untuk Tunnel eksklusif dan kompresi data saat mengimpor data dari tabel eksternal MaxCompute.

  • Mengaktifkan text_log secara default untuk mencatat log dengan tingkat log Warning, Error, atau Fatal. Anda dapat melakukan kueri terhadap log tersebut di system.text_log.

  • Menonaktifkan query_thread_log secara default untuk mencegah penggunaan disk space berlebihan.

• Perbaikan masalah

  • Memperbaiki masalah konversi tipe data dan perbandingan nilai antara bidang DateTime64 dan Datetime atau Date.

  • Memperbaiki error "Invalid number of rows in Chunk".

Import from MaxCompute

21.8

• Fitur baru

  Memperkenalkan mekanisme fallback session lifetime untuk koneksi ClickHouse ke ZooKeeper guna menyeimbangkan beban di seluruh node ZooKeeper.

• Perbaikan masalah

  Memperbaiki masalah OOM yang disebabkan oleh index_granularity=0.

None

Fitur

Deskripsi

Referensi

New Region

ApsaraDB for ClickHouse kluster kini tersedia di wilayah Malaysia (Kuala Lumpur).

• Create a cluster

• Community-compatible Edition compute node pricing

• Community-compatible Edition storage space pricing

• Community-compatible Edition backup storage pricing

Community-compatible Edition 22.8

Perbaikan bug

Memperbaiki bug yang menyebabkan fungsi Date mengembalikan hasil yang salah.

None

Specification changes

Spesifikasi C4 dan S4 tidak lagi tersedia.

None

Fitur

Deskripsi

Referensi

Nonaktifkan data backup

Anda dapat menonaktifkan data backup untuk kluster ApsaraDB for ClickHouse .

Data backup

Fitur

Deskripsi

Referensi

Scheduled restart of clusters

Fitur baru

ApsaraDB for ClickHouse kini memungkinkan Anda menjadwalkan restart kluster.

Restart an ApsaraDB for ClickHouse cluster

Tag management

Fitur baru

Anda kini dapat mengelola kluster ApsaraDB for ClickHouse Anda dengan tag.

Manage tags

ZooKeeper configuration

Fitur baru

Kluster ApsaraDB for ClickHouse mencakup konfigurasi ZooKeeper default berupa 4 core dan memori 8 GB tanpa biaya tambahan.

None

Fitur

Deskripsi

Referensi

Pemantauan dan Peringatan

Fitur baru

Lihat data pemantauan di Konsol ApsaraDB for ClickHouse

Peningkatan versi mesin utama

Fitur baru

Anda kini dapat melakukan upgrade versi mesin utama kluster ApsaraDB for ClickHouse Edisi Community-Compatible melalui migration data.

Upgrade via data migration

Feature

Description

References

Release and attach CLB instances

New feature

Anda kini dapat melepas (release) dan menyambungkan (attach) instans Classic Load Balancer (CLB) untuk kluster ApsaraDB for ClickHouse Edisi Community-compatible yang dibuat setelah 1 Desember 2021.

Manage CLB instances

Account management

New feature

Anda kini dapat mengonfigurasi akun database untuk kluster Edisi Community-compatible menggunakan Pernyataan SQL.

• Manage database accounts of an ApsaraDB for ClickHouse cluster

• CREATE USER

• GRANT

Fitur

Deskripsi

Referensi

Community-compatible Edition V22.8

• Fitur baru

  • Memperluas rentang waktu yang didukung untuk Date32 dan DateTime64. Rentang baru adalah 1900-01-01 hingga 2299-12-31.

  • Menambahkan dukungan untuk penghapusan ringan (lightweight delete).

  • Menambahkan dukungan untuk SQL user-defined functions dan executable user-defined functions.

  • Menambahkan dukungan untuk preprocessing tingkat partisi guna mengatasi masalah pre-aggregation.

• Penyempurnaan kinerja

  • Menggandakan kinerja operasi INSERT.

  • Melipatgandakan kinerja kueri IN yang berisi daftar panjang.

• Date32

• Datetime64

• DELETE statement

• SQL user-defined functions

• Executable user-defined functions

• Projections

Fitur

Deskripsi

Referensi

konfigurasi parameter

fitur baru

Untuk kluster ApsaraDB for ClickHouse yang dibuat setelah 1 Desember 2021, Anda kini dapat memodifikasi parameter dalam mode XML dan melihat riwayat perubahan.

Configure config.xml parameters

Fitur

Deskripsi

Referensi

Upgrade minor engine version

Fitur baru

Anda kini dapat melakukan upgrade versi mesin minor untuk kluster ApsaraDB for ClickHouse yang dibeli setelah 1 Desember 2021. Peningkatan versi minor menyediakan peningkatan performa, fitur baru, dan perbaikan bug.

Upgrade versi minor

Set a maintenance window

Fitur baru

Anda kini dapat mengatur maintenance window untuk satu atau beberapa kluster ApsaraDB for ClickHouse. Layanan akan melakukan upgrade kluster dalam Jendela pemeliharaan yang ditentukan guna memastikan stabilitasnya.

Set a maintenance window

Fitur

Deskripsi

Referensi

Pemantauan dan Peringatan

• Fitur baru

  Metrik baru meliputi:

  • Number of inactive data parts

  • Number of TCP connections

  • Number of init queries run

  • Number of HTTP connections

  • Number of MaterializeMySQL tasks

  • Number of failed insert queries

  • Number of Kafka external tables

  • Number of failed select queries

  • Number of MaterializeMySQL synchronization failures

  • Number of consumption errors for Kafka external tables

• Penyempurnaan

  Meningkatkan ketersediaan kluster dan pemantauan pengecualian untuk stabilitas operasional yang lebih baik.

Lihat data pemantauan di Konsol ApsaraDB for ClickHouse

Fitur

Deskripsi

Referensi

Backup and recovery

Fitur baru

ApsaraDB for ClickHouse kluster yang menjalankan versi 20.3, 20.8, dan 21.8 kini mendukung backup and recovery.

• Data backup

• Data recovery

Feature

Description

References

HTTPS

Fitur baru

Menambahkan dukungan untuk HTTPS guna mengenkripsi data selama transmisi.

• Enable HTTPS

• Connect over HTTPS

MaterializeMySQL engine upgrade

• Fitur baru

  Engine MaterializeMySQL kini mendukung dirty data dalam tipe data ENUM.

• Peningkatan

  • Proses sinkronisasi data penuh yang telah dioptimalkan kini berjalan tanpa kunci tabel, sehingga meminimalkan dampak terhadap bisnis Anda.

  • Proses sinkronisasi DDL telah dioptimalkan. Sistem kini mencatat pengecualian dari proses ini ke dalam tabel sistem.

None

TCP keep-alive enabled by default

Fitur baru

TCP keep-alive diaktifkan secara default untuk memastikan keandalan koneksi.

None

Feature

Description

References

Peningkatan engine MaterializedMySQL

Fitur baru

Engine MaterializedMySQL kini mendukung tipe Decimal.

None

Fitur

Deskripsi

Referensi

Community-compatible Edition V21.8

• Fitur baru

  • Mendukung lebih banyak standar SQL dan JSON.

  • Menambahkan mesin tabel MaterializedPostgreSQL dan mesin database, yang memungkinkan replikasi sinkron database dan tabel.

  • Menambahkan fungsi leftPad(), rightPad(), leftPadUTF8(), dan rightPadUTF8().

  • Menambahkan fungsi bin dan unbin.

  • Menambahkan dukungan untuk kata kunci FIRST dalam pernyataan ADD INDEX untuk menambahkan indeks ke awal daftar indeks.

  • Menambahkan dukungan untuk tipe data Map, UInt128, Int128, UInt256, dan Int256 dalam fungsi MapAdd dan MapSubTract.

  • Mendukung ekspresi DISTINCT ON (columns).

• Optimisasi

  Mengurangi latensi kueri singkat saat membaca data dari beberapa kolom dalam sebuah tabel.

None

Feature

Description

References

Binary log preservation

Anda kini dapat mengaktifkan fitur binary log preservation untuk engine MaterializeMySQL dengan mengatur parameter konfigurasi enable_binlog_reserved. Fitur ini meningkatkan stabilitas engine MaterializeMySQL dengan mencegah kegagalan sinkronisasi data yang disebabkan oleh pembersihan log biner.

MaterializeMySQL engine

Fitur

Deskripsi

Referensi

Cluster restart

ApsaraDB for ClickHouse kini memungkinkan Anda melakukan restart kluster. Anda dapat melakukan restart kluster jika kluster tersebut tidak tersedia atau untuk mengatasi suatu masalah.

Restart an ApsaraDB for ClickHouse cluster

Monitoring page optimization

Kami telah mengoptimalkan halaman Pemantauan untuk meningkatkan performa dan kegunaan.

None

Support for ApsaraDB RDS for MySQL analytic instance

ApsaraDB for ClickHouse kini mendukung instansi analitik ApsaraDB RDS for MySQL. Anda dapat menyinkronkan data dari instansi analitik ke ApsaraDB for ClickHouse untuk analisis data terpusat.

Create an ApsaraDB for ClickHouse instance

Feature

Description

References

Data migration between ApsaraDB for ClickHouse clusters

Fitur ini memungkinkan Anda melakukan migrasi data antar instans dengan versi engine yang sama atau dari versi yang lebih lama ke versi yang lebih baru.

Migrate data between ApsaraDB for ClickHouse community-compatible edition clusters

Fitur

Deskripsi

Referensi

Multiple scale-out methods

Skalabilitas horizontal kini mendukung metode skala keluar (scale-out) simple baru. Anda dapat memilih dari metode berikut:

• migration-based scale-out

• simple scale-out

Scale-in and scale-out

MaterializeMySQL engine upgrade

• Meningkatkan dukungan untuk tipe data JSON, TIME, dan YEAR.

• Memperbaiki bug terkait kata kunci key dan pembuatan tabel inkremental.

• Menambahkan dukungan untuk parameter konfigurasi berikut:

  • skip_error_count

  • alter include_tables

MaterializeMySQL

Performance optimization for horizontal scaling

Optimasi pada tool clickhouse-copier meningkatkan efisiensi skalabilitas horizontal.

Scale a cluster

Feature

Description

References

Backup and recovery

Mencegah kehilangan data yang tidak disengaja dan meningkatkan keamanan data.

Data backup

Fitur

Deskripsi

Referensi

Tiered storage of hot and cold data

Secara otomatis memigrasikan data antara tier hot dan cold, mengurangi biaya penyimpanan lebih dari 80% tanpa mengorbankan performa.

Tiered storage of hot and cold data

Support for PL2 and PL3 ESSDs

Anda kini dapat menggunakan ESSD PL2 dan PL3 untuk meningkatkan Throughput I/O secara signifikan.

None

Disk encryption

Mengenkripsi seluruh data disk Anda pada level penyimpanan blok untuk melindungi data Anda. Bahkan jika backup dikompromikan, data yang terenkripsi tetap tidak dapat diakses.

Enable disk encryption

Feature

Description

References

Ketersediaan di wilayah baru

ApsaraDB for ClickHouse kini tersedia di wilayah China (Hohhot) dan China (Hong Kong).

None

Optimasi pengiriman log

Anda dapat mengirimkan data log dari Log Service ke ApsaraDB for ClickHouse untuk analisis log waktu nyata.

Sinkronkan data dari Log Service dengan ApsaraDB for ClickHouse

Fitur

Deskripsi

Referensi

New regions

ApsaraDB for ClickHouse kini tersedia di wilayah China (Zhangjiakou), China (Chengdu), dan Jepang (Tokyo).

None

Account and permission management

Anda kini dapat membuat akun, mengubah kata sandi, serta memodifikasi izin pada database dan data dictionary untuk pengguna baru maupun yang sudah ada di Konsol ApsaraDB for ClickHouse.

Manage database accounts of an ApsaraDB for ClickHouse cluster

Global parameter modification

Anda kini dapat memodifikasi parameter global di Konsol ApsaraDB for ClickHouse. Perubahan akan berlaku setelah kluster direstart.

Configure config.xml parameters

Fitur

Deskripsi

Referensi

Scale-out dengan distribusi data yang seimbang

Memastikan distribusi data yang merata saat Anda menambahkan node kluster, sehingga membantu mencegah kesenjangan data.

None

Query management

Anda kini dapat mengidentifikasi kueri SQL yang lambat dan menghentikan kueri yang sedang berjalan.

Query management

Spesifikasi baru 4-core, 16 GB

Spesifikasi baru 4-core, 16 GB kini tersedia, meningkatkan kapasitas pemrosesan single-node.

Billable items

Data dictionary

Anda kini dapat mengonfigurasi kamus data di Konsol. Jika data bisnis Anda berisi konstanta atau terbagi menjadi tabel fakta dan tabel dimensi, gunakan kamus data untuk menggantikan tabel dimensi. Mengkueri kamus secara langsung untuk data dimensi meningkatkan efisiensi kueri.

Dictionary management

Resource queues

Mencegah instans crash ketika satu kueri besar mengonsumsi resource berlebihan—masalah umum pada ClickHouse open source.

ClickHouse resource queues

Fitur

Deskripsi

Referensi

Integrasi dengan Quick BI

Quick BI kini mendukung ApsaraDB for ClickHouse sebagai sumber data untuk membangun sistem BI.

Quick BI

Fitur

Deskripsi

Referensi

Version 20.3

Meluncurkan engine version 20.3.10.75 untuk memperbaiki multiple bug engine dan meningkatkan stabilitas.

None

Real-time data migration and synchronization from MySQL databases

Mendukung migration data dan real-time synchronization dari database MySQL untuk memungkinkan analisis interaktif secara real-time terhadap data bisnis Anda.

Impor data dari ApsaraDB RDS for MySQL atau PolarDB for MySQL.

Online log delivery and analysis

Anda kini dapat membuat delivery task di Konsol ApsaraDB for ClickHouse untuk mengirimkan log perilaku pengguna dari Simple Log Service ke ApsaraDB for ClickHouse guna melakukan multi-dimensional analysis online terhadap data log Anda.

Sinkronkan data dari Simple Log Service

Fitur

Deskripsi

Referensi

Integrasi dengan Data Management Service (DMS)

ApsaraDB for ClickHouse terintegrasi dengan Data Management Service (DMS). Anda dapat menggunakan DMS untuk mengelola database dan tabel, menjalankan kueri data, serta mengatur dan menjadwalkan Tugas SQL.

None

Fitur

Deskripsi

Referensi

Tipe instans baru

Tipe instans C4, C24, C64, dan C104 kini tersedia, bergabung dengan tipe instans C8 yang sudah ada sebelumnya dan mendukung Port HTTP.

Item yang Dikenai Biaya