Realtime Compute for Apache Flink:Lançamento de 4 de janeiro de 2024

Recurso

O que mudou

Referências

MySQL CDC: especifique offset inicial ou timestamp

A leitura de uma tabela source do MySQL Change Data Capture (CDC) agora aceita um offset inicial ou timestamp. Isso localiza diretamente a posição de leitura e aumenta a velocidade de ingestão dos dados.

Conector MySQL

Conector MongoDB: sincronização de schema e adição automática de colunas para tabelas source

Ao usar o conector MongoDB em uma tabela source, as instruções CREATE TABLE AS ou CREATE DATABASE AS sincronizam alterações de schema da tabela source para a tabela de resultados e adicionam colunas automaticamente.

Instrução CREATE TABLE AS, Instrução CREATE DATABASE AS

Conector MongoDB: suporte a tabelas de dimensão

O conector MongoDB agora pode ser utilizado em tabelas de dimensão, permitindo consultas de junção.

Conector MongoDB (visualização pública)

Suporte a catálogo MongoDB

Registre metadados usando um catálogo MongoDB para inferir automaticamente o schema de uma coleção. Isso elimina a necessidade de escrever instruções DDL para criar uma tabela source do MongoDB em SQL.

Gerencie catálogos do MongoDB (visualização pública)

Conector JDBC: suporte aos tipos JSONB e UUID

O conector JDBC agora aceita dados dos tipos de extensão JSONB e UUID.

Conector JDBC

Conector Hologres: transmissão criptografada com SSL

A leitura e escrita de dados agora utilizam transmissão criptografada com SSL para garantir uma comunicação mais segura.

Conector Hologres

Conector Hologres: modo bulkload

A escrita de dados no modo bulkload reduz significativamente a carga de trabalho ao gravar em uma tabela de resultados do Hologres.

Conector Hologres

Conector Hologres: deduplicação durante processamento em lote

Quando o parâmetro sdkMode está definido como jdbc ou jdbc_fixed, a deduplicação fica disponível durante o processamento de dados em lote. Esse recurso melhora a consistência dos dados e o desempenho do banco de dados, além de reduzir a sobrecarga de rede.

Conector Hologres

**Conector Hologres: remoção do parâmetro jdbcBinlogSlotName**

No Hologres V2.1 ou superior, não é mais necessário configurar o parâmetro jdbcBinlogSlotName. Esse parâmetro especificava o nome do slot de uma tabela source de log binário no modo JDBC.

Conector Hologres, Usar o conector Hologres para consumir dados do Hologres em tempo real

Novo conector PolarDB for Oracle 1.0

O conector PolarDB for Oracle 1.0 já está disponível. Utilize-o para gravar dados no PolarDB for PostgreSQL (compatível com Oracle).

Conector PolarDB for Oracle 1.0

Conector StarRocks: suporte ao tipo JSON

As tabelas de resultados do StarRocks agora aceitam dados do tipo JSON.

Nenhuma

**ApsaraMQ for RocketMQ: parâmetro partitionField**

Configure o parâmetro partitionField em uma tabela de resultados do ApsaraMQ for RocketMQ para definir um campo como coluna de chave de partição. Dados com o mesmo valor de hash são gravados na mesma partição.

Conector ApsaraMQ for RocketMQ

Conector Elasticsearch: suporte à versão V8.X

O conector Elasticsearch agora permite a escrita em tabelas de resultados do Elasticsearch V8.X.

Conector Elasticsearch

**Conector Elasticsearch: parâmetro ignoreKeywordSuffix**

Ao utilizar o conector Elasticsearch em uma tabela de dimensão, defina ignoreKeywordSuffix como true para ignorar o sufixo .keyword em campos do tipo de dado TEXT.

Conector Elasticsearch

Conector MySQL: tratamento de valores nulos

É possível ignorar valores nulos nos dados gravados em uma tabela de resultados do MySQL durante atualizações.

Conector MySQL