ApsaraDB for ClickHouse:Edição compatível com a comunidade

Versão

Descrição

Referências

26.3.2.1-1.3.0

Integração da versão 26,3 LTS v26.3.17.4-lts da comunidade.

—

Versão

Descrição

Referências

26.3.2.1-1.2.0

A edição compatível com a comunidade do Alibaba Cloud ClickHouse lança a nova versão de suporte de longo prazo (LTS) 26,3. Esta versão principal traz melhorias no ecossistema de data lake com suporte nativo ao Apache Paimon, índice invertido em disponibilidade geral para busca full-text, CTE materializado, reordenação de JOIN, Map fragmentado, mesclagem vertical TTL, codec ALP e compatibilidade com 31 dialetos SQL.

Release notes for community-compatible edition 26.3

25.3.2.1-1.6.0

Correção de bug: resolvido o erro de validação de caminho IcebergLocal relatado em uma issue da comunidade.

N/A

25.3.2.1-1.5.0

Otimização de kernel: atualização do ODPS SDK.

N/A

25.3.2.1-1.4.2

Correção de bug: corrigido o erro de gravação causado por configurações diferentes de zero nos parâmetros min_free_disk_ratio_to_perform_insert e min_free_disk_bytes_to_perform_insert para discos de armazenamento de objetos.

N/A

23.8.5.16-1.5.1

Otimização de kernel: atualização do ODPS SDK.

N/A

Versão

Descrição

Documentos relacionados

25.3.2.1-1.4.1

Kernel: mesclagem da versão mais recente da comunidade 25,3 LTS, v25.3.14.14-lts, incluindo 49 correções de bugs.

Nenhum

Versão

Descrição

Documentos relacionados

25.3.2.1-1.3.2

• Ajustes de parâmetros

  • Ativação de ttl_only_drop_parts.

  • Desativação de use_uncompressed_cache.

• Outros

  Integração da versão v25.3.11.20-lts da comunidade.

Nenhum

Versão

Descrição

Documentos relacionados

25.3-1.3.1

• Ajuste de parâmetro

  Os parâmetros ttl_only_drop_parts, query_profiler_cpu_time_period_ns e query_profiler_real_time_period_ns agora utilizam os valores padrão do kernel.

• Correções de bugs

  • Corrigida a lógica de mesclagem TTL para camadas de dados quentes e frios, garantindo que o TTL permaneça efetivo no armazenamento frio mesmo quando as operações de mesclagem estão desativadas.

  • O TTLMerge não é mais afetado pelo parâmetro max_bytes_to_merge_at_max_space_in_pool.

• Outras atualizações

  Atualização para a versão 25,3 LTS da comunidade v25.3.8.23-lts.

Nenhum

Versão

Descrição

Documentos relacionados

25.3-1.3.0

• Correção de bug

  Corrigida a lógica de mesclagem TTL para camadas quente/fria, assegurando a eficácia do TTL no armazenamento frio com a mesclagem desativada.

• Outros

  Atualização para a versão 25,3 LTS da comunidade v25.3.7.194-lts.

Nenhum

Versão

Descrição

Documentação relacionada

25.3-1.1.2

Alterações de parâmetros

• Redefinição de max_expanded_ast_elements para seu valor padrão do kernel.

• Redefinição de max_insert_block_size para seu valor padrão do kernel.

• Definição de merge_with_ttl_timeout como 3600s.

Nenhum

23.8-1.4.3

Alterações de parâmetros

• Redefinição de max_expanded_ast_elements para seu valor padrão do kernel.

• Redefinição de max_insert_block_size para seu valor padrão do kernel.

• Definição de merge_with_ttl_timeout como 3600s.

Novo recurso

Adicionado suporte aos parâmetros de configuração min_free_disk_ratio_to_perform_insert e min_free_disk_bytes_to_perform_insert, que geram uma exceção em operações de gravação caso o espaço livre em disco seja insuficiente.

Correção de bug

Corrigida uma falha na instância causada pelo erro "Nullptr dereference in FindOriginalNodeForOutputName".

Nullptr dereference in FindOriginalNodeForOutputName

Versão

Descrição

Documentação relacionada

25.3-1.1.1

Melhoria

Adicionado suporte aos parâmetros de configuração SASL do Kafka.

Kafka

25.3-1.1.0

Lançamento da edição compatível com a comunidade 25,3.

• Novos recursos

  • Um novo tipo de dados JSON pronto para produção, totalmente integrado à aceleração de consultas.

    • Mais compacto que arquivos comprimidos em disco.

    • Ordens de magnitude mais rápido que soluções tradicionais de armazenamento JSON, como MongoDB.

    • Único armazenamento JSON com suporte total a caminhos JSON dinâmicos sem conversão de tipos.

  • A nova função estimateCompressionRatio permite estimar a taxa de compressão de dados para avaliar o impacto potencial de diferentes algoritmos de compressão.

  • Suporte a filtros bloom para o tipo de dados Parquet.

  • Suporte ao formato WithProgress para fluxos de eventos HTTP.

  • Introdução de um índice MinMax no nível da tabela que armazena os valores mínimo e máximo das expressões de índice para cada bloco.

  • JOINs não equitativos agora são suportados por padrão.

  • Tipo de dados BFloat16 para representar embeddings vetoriais, benéfico para aplicações de IA e busca vetorial.

• Otimizações

  • O novo cache de condições de consulta acelera consultas executadas repetidamente, otimizando cláusulas WHERE seletivas que não se beneficiam do índice primário em cenários de painel ou observabilidade.

  • parallel hash join mais rápido.

  • A inferência transitiva de condições agora permite inferência transitiva em cadeias de comparação. Por exemplo, dada a expressão WHERE a < b AND b < c AND c < 5, o otimizador infere e utiliza automaticamente as condições adicionais (a < 5 AND b < 5) para aumentar a eficiência da filtragem.

  • A nova configuração query_plan_join_swap_table permite a reordenação automática de JOINs para otimizar a seleção da tabela de construção para JOINs.

  • A otimização de expressões JOIN, habilitada pela nova configuração optimize_extract_common_expressions, reduz o número de tabelas hash e melhora o pushdown de predicados.

  • Agora é possível clonar uma tabela usando a cláusula CLONE AS. Essa operação não consome espaço de armazenamento adicional, e as modificações no clone e na original são independentes.

  • As visualizações materializadas atualizáveis agora suportam um modo APPEND, que adiciona novas linhas ao final da tabela em vez de substituir a visualização.

• Melhorias de desempenho

  Desempenho aprimorado em aproximadamente 11% em comparação à versão 23,8.

• Para mais detalhes, consulte o Changelog de 2025.

• Teste comparativo oficial de versões clickbench

Número da versão

Descrição

Documentação

Nenhum

Os clusters da Edição Compatível com a Comunidade do ApsaraDB for ClickHouse agora suportam discos cloud ESSD PL0.

Community-compatible Edition storage pricing

Versão

Descrição

Referências

23.8

Novos recursos

Agora é possível usar o console para migrar dados de um cluster ClickHouse autogerenciado para um cluster da edição compatível com a comunidade do ApsaraDB for ClickHouse.

Migrate from a self-managed ClickHouse cluster to ApsaraDB for ClickHouse community-compatible edition

Número da versão

Descrição

Referências

Nenhum

O ApsaraDB for ClickHouse agora está disponível na região Saudi Arabia (Riyadh).

Nenhum

Número da versão

Descrição

Documentação relacionada

22.8-1.19.0

• O mecanismo de tabela Kafka agora suporta o parâmetro kafka_auto_offset_reset. Ao criar uma tabela, defina este parâmetro como 'earliest' ou 'latest' para especificar o offset inicial da sincronização de dados.

• O mecanismo de tabela MergeTree agora permite atrasar mutações ou gerar uma exceção para mutações excessivas. O uso é o mesmo da versão 23,8.

• A chave de ordenação da tabela de sistema 'text_log' agora é event_time_microseconds.

• Synchronize data from Kafka

• Delay mutation

23.8-1.4.1

• O mecanismo de tabela Kafka agora suporta o parâmetro kafka_auto_offset_reset. Ao criar uma tabela, defina este parâmetro como 'earliest' ou 'latest' para especificar o offset inicial da sincronização de dados.

• A chave de ordenação da tabela de sistema 'text_log' agora é event_time_microseconds.

Synchronize data from Kafka

Número da versão

Descrição

Referências

23.8-1.3.2

Corrigido um problema em que uma tabela ReplicatedMergeTree tornava-se somente leitura após uma reinicialização anormal.

Nenhum

23.8-1.3.1

• Atualização para a versão oficial da comunidade v23.8.16.40.

• Ativação do text_log por padrão para registrar logs Warning, Error ou Fatal. Esses logs podem ser consultados em system.text_log.

• Desativação do query_thread_log por padrão devido ao consumo excessivo de espaço em disco.

• Correção de um problema em que um desligamento inesperado bloqueava a distribuição de dados para uma tabela distribuída.

Comparando alterações

Número da versão

Descrição

Referências

22.8-1.18.0

• Correção de uma falha no Kafka engine.

• Correção de um problema em que um desligamento inesperado poderia bloquear a distribuição de dados para tabelas distribuídas.

Nenhum

Versão

Descrição

Documentação relacionada

23.8

• Novos recursos

  • Transmissão de dados do Amazon S3 usando o mecanismo de tabela S3Queue.

  • Importação direta de arquivos compactados nos formatos zip, tar e 7zip.

  • Uso da instrução TRUNCATE DATABASE.

  • Adição e subtração direta de vetores.

  • Concatenação de tuplas.

  • As mensagens de erro agora incluem sugestões de correção para nomes de bancos de dados e tabelas.

• Otimizações de desempenho

  Melhoria média de 40% no desempenho de consultas para arquivos Parquet, ORC, TSV, CSV e JSON, com algumas consultas rodando de 4 a 5 vezes mais rápido.

• ClickHouse 23.8

• S3Queue

• Importação direta de ZIP, TAR e 7zip

• TRUNCATE DATABASE

• Otimizações de desempenho do Parquet

Versão

Descrição

Documentação relacionada

22.8

• Melhorias

  • As importações de dados de tabelas externas do MaxCompute agora suportam túneis exclusivos e compressão de dados de rede.

  • O recurso text_log agora está ativado por padrão para registrar logs Warning, Error e Fatal. Consulte-os na tabela system.text_log.

  • O recurso query_thread_log agora está desativado por padrão para evitar uso excessivo de espaço em disco.

• Correções de bugs

  • Correção de problemas com conversões de tipos de dados e comparações de valores entre os tipos DateTime64 e DateTime/Date.

  • Correção do erro "Invalid number of rows in Chunk".

Import data from MaxCompute

21.8

• Novos recursos

  O ApsaraDB for ClickHouse agora usa um mecanismo de tempo de vida de sessão de fallback para conexões ZooKeeper, equilibrando melhor a carga entre os nós do ZooKeeper.

• Correções de bugs

  Correção de um problema de OOM causado por index_granularity=0.

Nenhum

Recurso

Descrição

Referências

Disponibilidade em nova região

Novo recurso

Os clusters da ApsaraDB for ClickHouse agora estão disponíveis na região Malaysia (Kuala Lumpur).

• Create a cluster

• Community-compatible Edition compute node pricing

• Community-compatible Edition storage pricing

• Community-compatible Edition backup storage pricing

Edição Compatível com a Comunidade 22.8

Correção de bug

Correção de um problema que fazia a função Date retornar um resultado de consulta inesperado.

Nenhum

Alterações de especificação

As especificações C4 e S4 foram descontinuadas.

Nenhum

Recurso

Descrição

Documentação relacionada

Desativar backup de dados

Novo recurso

Agora é possível desativar o backup de dados para clusters da ApsaraDB for ClickHouse .

data backup

Recurso

Descrição

Referências

Reinicialização agendada da instância

Novo recurso

Reinicializações agendadas agora são suportadas para suas instâncias da ApsaraDB for ClickHouse .

Restart a Community Edition instance

Gerenciamento de tags

Novo recurso

Os clusters da ApsaraDB for ClickHouse suportam gerenciamento de tags.

Tag management

Configuração do ZooKeeper

Novo recurso

Por padrão, os clusters da ApsaraDB for ClickHouse incluem uma configuração ZooKeeper de 4 núcleos e 8 GB sem custo adicional.

Nenhum

Recurso

Descrição

Referências

Monitoramento e alertas

Novo recurso

View monitoring data in the ApsaraDB for ClickHouse console

Upgrade da versão principal do mecanismo

Novo recurso

Agora é possível fazer upgrade da versão principal do mecanismo para clusters da ApsaraDB for ClickHouse Community Edition migrando dados entre clusters.

Upgrade the major engine version through data migration

Recurso

Descrição

Documentos relacionados

Liberar e montar instâncias Classic Load Balancer (CLB)

Agora é possível liberar e montar uma instância Classic Load Balancer (CLB) para um cluster da ApsaraDB for ClickHouse Community-compatible Edition criado após 1º de dezembro de 2021.

Release and mount a CLB instance

Gerenciamento de contas

Agora é possível configurar contas de banco de dados para clusters da Community-compatible Edition executando instruções SQL.

• Manage database accounts of an ApsaraDB for ClickHouse cluster

• CREATE USER

• GRANT

Recurso

Descrição

Referências

Edição compatível com a comunidade 22.8

• Novos recursos

  • O intervalo de tempo de armazenamento para Date32 e DateTime64 foi estendido. O intervalo suportado vai de 1900-01-01 a 2299-12-31.

  • Suporte a exclusão leve (lightweight delete).

  • Suporte a funções definidas pelo usuário em SQL e funções definidas pelo usuário executáveis.

  • Suporte a pré-processamento no nível de partição usando projeções para otimizar a pré-agregação.

• Otimizações de desempenho

  • Dobra o desempenho das operações INSERT.

  • Triplica o desempenho de consultas IN em listas longas.

• Date32

• DateTime64

• Instrução DELETE

• Funções definidas pelo usuário em SQL

• Funções definidas pelo usuário executáveis

• Projeções

Recurso

Descrição

Referências

Configuração de parâmetros

Novo recurso

Agora é possível modificar parâmetros config.xml no modo XML e visualizar o histórico de alterações para clusters da ApsaraDB for ClickHouse criados após 1º de dezembro de 2021.

Configure config.xml parameters

Recurso

Descrição

Tópicos relacionados

Upgrade da versão secundária do mecanismo

Novo recurso

É possível fazer upgrade da versão secundária do mecanismo para clusters da adquiridos após 1º de dezembro de 2021. Os upgrades de versão secundária do mecanismo incluem melhorias de desempenho, novos recursos e correções de bugs.

Upgrade the minor engine version

Definir uma janela de manutenção

Novo recurso

É possível definir uma janela de manutenção para um ou mais clusters da ApsaraDB for ClickHouse. O sistema executa upgrades dentro da janela de manutenção especificada para garantir a estabilidade do cluster.

Set a maintenance window

Recurso

Descrição

Referências

Monitoramento e alertas

• Novo recurso

  As seguintes novas métricas foram adicionadas:

  • Number of Inactive Data Parts

  • Number of TCP connections

  • Number of Init Query runs

  • Number of HTTP connections

  • Number of MaterializeMySQL

  • Number of failed Insert queries

  • Number of Kafka external tables

  • Number of failed Select queries

  • Number of MaterializeMySQL synchronization failures

  • Number of Kafka External Table Consumption Errors

• Melhorias

  Esta atualização aprimora a disponibilidade do cluster e o monitoramento de exceções, melhorando a estabilidade operacional.

View monitoring data in the ApsaraDB for ClickHouse console

Recurso

Descrição

Referências

Backup e recuperação de dados

Novo recurso

Os clusters da ApsaraDB for ClickHouse nas versões 20,3, 20,8 e 21,8 agora suportam backup e recuperação de dados.

• Data backup

• Data recovery

Recurso

Descrição

Referências

HTTPS

Novo recurso

Esta versão adiciona suporte a HTTPS para criptografar dados em trânsito.

• Enable HTTPS

• Connect to ClickHouse over HTTPS

Upgrade do mecanismo MaterializeMySQL

• Novo recurso

  O mecanismo MaterializeMySQL suporta dados incorretos (dirty data) em tipos ENUM.

• Otimizações

  • A sincronização completa de dados agora é otimizada para evitar bloqueio de tabelas, reduzindo o impacto nas operações de negócios.

  • A sincronização DDL foi otimizada. Erros de sincronização agora são gravados na tabela de sistema.

Nenhum

TCP keepalive ativado por padrão

Novo recurso

O TCP keepalive está ativado por padrão para garantir a confiabilidade da conexão.

Nenhum

Recurso

Descrição

Documentos relacionados

Upgrade do mecanismo MaterializeMySQL

O mecanismo MaterializeMySQL agora suporta o tipo de dados DECIMAL.

Nenhum

Recurso

Descrição

Referências

Community-compatible Edition V21.8

• Novos recursos

  • Suporte a mais padrões SQL e JSON.

  • Adição do mecanismo de tabela e mecanismo de banco de dados MaterializedPostgreSQL, que permitem replicação síncrona de bancos de dados e tabelas.

  • Adição das funções leftPad(), rightPad(), leftPadUTF8() e rightPadUTF8().

  • Adição das funções bin e unbin.

  • Extensão do comando ADD INDEX com a palavra-chave FIRST para adicionar um índice ao início da lista de índices.

  • Adição de suporte aos tipos de dados Map, UInt128, Int128, UInt256 e Int256 nas funções MapAdd e MapSubTract.

  • Adição de suporte à expressão DISTINCT ON (columns).

• Otimização

  Redução da latência de consultas curtas ao ler múltiplas colunas.

Nenhum

Recurso

Descrição

Referências

Recurso de retenção de binlog

O mecanismo MaterializeMySQL suporta um recurso de retenção de binlog ativado definindo o parâmetro enable_binlog_reserved. Este recurso evita falhas na sincronização de dados causadas pela limpeza de binlog, melhorando a estabilidade do mecanismo.

MaterializeMySQL engine

Recurso

Descrição

Referências

Reinicialização de cluster

O ApsaraDB for ClickHouse permite reiniciar um cluster se ele ficar indisponível ou precisar de reinicialização para corrigir um problema.

Restart an ApsaraDB for ClickHouse cluster

Otimização da página de monitoramento

A página de monitoramento foi otimizada para uma experiência de usuário mais fluida.

Nenhum

Suporte a instância analítica do ApsaraDB RDS for MySQL

O ApsaraDB for ClickHouse permite sincronizar dados de uma instância analítica do ApsaraDB RDS for MySQL para um cluster do ApsaraDB for ClickHouse para análise centralizada de dados de negócios.

Create an ApsaraDB for ClickHouse cluster

Recurso

Descrição

Referências

Migração de dados entre clusters do ApsaraDB for ClickHouse

Use o recurso de migração de dados no console do ApsaraDB for ClickHouse para migrar dados entre clusters do ApsaraDB for ClickHouse que executam a mesma versão do mecanismo ou de uma versão anterior para uma posterior.

Migrate data between ClickHouse community-compatible clusters

Recurso

Descrição

Referências

Múltiplos métodos de scale-out

Adição do método simples de scale-out. Agora é possível escolher entre:

• Scale-out baseado em migração

• Scale-out simples

Scale-out and scale-in

Upgrade do mecanismo MaterializeMySQL

• Melhoria no suporte aos tipos de dados JSON, TIME e YEAR.

• Correção de bugs envolvendo a palavra-chave key e criação incremental de tabelas.

• Adição de suporte aos seguintes parâmetros:

  • skip_error_count

  • alter include_tables

MaterializeMySQL engine

Otimização de desempenho de dimensionamento horizontal

Otimização do clickhouse-copier para melhorar o desempenho do dimensionamento horizontal.

Vertical and horizontal scaling for Community-Compatible Edition clusters

Recurso

Descrição

Referências

Backup e recuperação

O recurso de backup e recuperação evita perda acidental de dados e melhora a segurança dos dados.

Data backup

Recurso

Descrição

Referências

Armazenamento em camadas de dados quentes e frios

Este recurso move automaticamente dados entre camadas de armazenamento quente e frio para reduzir custos de armazenamento em mais de 80% sem afetar o desempenho.

Tiered storage of hot and cold data

Suporte a discos cloud ESSD PL2 e PL3

Habilita armazenamento em discos cloud ESSD PL2 e PL3, multiplicando o throughput de I/O.

Nenhum

Criptografia de disco cloud

Criptografa todo o disco de dados usando block storage, tornando os dados ilegíveis e seguros mesmo se um backup for comprometido.

Cloud disk encryption

Recurso

Descrição

Referências

Suporte às regiões China (Hohhot) e China (Hong Kong)

Nenhum

Nenhum

Otimização de entrega de logs

Agora é possível entregar dados de log do Log Service para o ApsaraDB for ClickHouse para análise de logs em tempo real.

Sync from Log Service

Recurso

Descrição

Documentação relacionada

O ApsaraDB for ClickHouse agora está disponível nas regiões China (Zhangjiakou), China (Chengdu) e Japan (Tokyo).

Nenhum

Nenhum

Gerenciamento de contas e permissões para bancos de dados e dicionários de dados

Agora é possível gerenciar contas e permissões de banco de dados no console. Isso inclui criar contas, alterar senhas e definir permissões em bancos de dados e dicionários de dados.

Manage database accounts of an ApsaraDB for ClickHouse cluster

Modificação de parâmetros globais

Agora é possível modificar parâmetros globais diretamente no console do ApsaraDB for ClickHouse. As alterações entram em vigor após a reinicialização do cluster.

Configure config.xml parameters

Recurso

Descrição

Documentação relacionada

Scale-out balanceado de dados

Distribui dados uniformemente ao adicionar nós a um cluster para evitar skew de dados.

N/A

Gerenciamento de consultas

Permite identificar consultas SQL lentas e interromper consultas em execução.

Manage SQL queries

Novas especificações de 4 núcleos e 16 GB

Introdução de especificações de 4 núcleos e 16 GB para melhorar a capacidade de processamento de nó único.

Billable items

Dicionário de dados

Agora é possível configurar dicionários de dados no console. Para dados de negócios contendo constantes ou estruturados com tabelas de fatos e dimensões, usar um dicionário de dados em vez de uma tabela de dimensões melhora a eficiência da consulta por meio de buscas diretas de dados.

Data dictionary

Fila de recursos

Evita que consultas grandes consumam recursos excessivos, o que pode causar falhas na instância no ClickHouse open source.

ClickHouse resource queues

Recurso

Descrição

Referências

Integração com Quick BI

Construa sistemas de BI no Quick BI adicionando o ApsaraDB for ClickHouse como fonte de dados.

Add a ClickHouse data source

Parâmetro

Descrição

Referências

Versão 20,3

Esta versão fornece a versão do mecanismo 20.3.10.75, que corrige vários bugs do mecanismo e melhora a estabilidade.

Nenhum

Suporte a migração de dados e sincronização em tempo real do MySQL

O ApsaraDB for ClickHouse agora suporta migração de dados e sincronização em tempo real do MySQL, permitindo análise interativa e em tempo real dos seus dados operacionais.

Import data from MySQL.

Entrega e análise de logs online

Ao criar uma tarefa de entrega no ApsaraDB for ClickHouse para entregar dados de log comportamental do usuário do SLS para o ClickHouse, é possível realizar análise multidimensional de dados de log online usando o ApsaraDB for ClickHouse.

Sync from Log Service

Recurso

Descrição

Referências

Integração com Data Management Service (DMS)

O ApsaraDB for ClickHouse integra-se ao Data Management Service (DMS), permitindo gerenciar bancos de dados e tabelas, executar consultas de dados e orquestrar e agendar tarefas SQL.

Nenhum

Recurso

Descrição

Referências

Novas especificações

Com base na especificação C8, quatro novas especificações estão agora disponíveis: C4, C24, C64 e C104. Esta atualização também habilita a porta HTTP.

Billable items