ApsaraDB RDS:HTAP query routing

Visão geral

Tipos de instância

• Instância orientada a linhas: A instância primária do RDS for MySQL e regular read-only instances. Essas instâncias usam o mecanismo InnoDB e são ideais para processar solicitações de leitura e escrita OLTP de alta concorrência.

• Instância columnstore: A DuckDB-based analytical read-only instance. Esta instância utiliza o mecanismo DuckDB e é adequada para consultas analíticas OLAP complexas.

Métodos de roteamento

O RDS for MySQL oferece suporte aos dois métodos de roteamento de consultas a seguir:

• Roteamento automático de consultas HTAP: Encaminha automaticamente consultas OLAP e OLTP para instâncias columnstore ou orientadas a linhas, com base no custo estimado de execução da instrução SQL.

• Roteamento manual com hint: Caso o roteamento automático não seja eficaz, ou se a sua versão do MySQL não oferecer suporte à estimativa de custos, utilize um hint para especificar manualmente o destino do roteamento.

Custo de execução de SQL

Ao usar o roteamento automático, execute o comando SHOW STATUS LIKE 'Last_query_cost' para verificar o custo estimado de execução de uma instrução SQL. Isso ajuda a entender a base para as decisões de roteamento. Recomendamos executar a instrução EXPLAIN antes de verificar o custo de execução.

Exemplo

Visualize o custo estimado de execução da instrução SELECT COUNT(*) FROM sbtest5.sbtest1:

EXPLAIN SELECT COUNT(*) FROM sbtest5.sbtest1;
SHOW STATUS LIKE 'Last_query_cost';

-- Example result:
+-------------------+---------------+
| Variable_name     | Value         |
+-------------------+---------------+
| Last_query_cost   | 84454.999000  |
+-------------------+---------------+

O resultado indica que o custo estimado de execução da instrução SQL é 84454.999000. O sistema utiliza esse valor de custo para determinar se deve rotear a consulta para uma instância columnstore.

Pré-requisitos

Para utilizar o roteamento automático de consultas HTAP, a instância primária deve atender às seguintes condições:

• A instância executa MySQL 8.0 com versão secundária do mecanismo 20250731 ou posterior, ou MySQL 5.7 com versão secundária do mecanismo 20260228 ou posterior.

• Uma DuckDB-based analytical read-only instance foi adicionada.

• O recurso database proxy está ativado e a versão do proxy de banco de dados é 2.25.8 ou superior.

Observações de uso

• As configurações de latency threshold e consistency level do proxy de banco de dados também se aplicam a instâncias somente leitura analíticas baseadas em DuckDB.

• O peso de leitura das instâncias somente leitura analíticas baseadas em DuckDB afeta apenas o balanceamento de carga entre essas instâncias e não influencia a lógica de roteamento entre instâncias orientadas a linhas e columnstore.

• Caso todas as instâncias somente leitura analíticas baseadas em DuckDB atinjam a capacidade máxima, as consultas analíticas subsequentes serão enfileiradas para processamento nessas instâncias.

• Após definir a read weight do endpoint do proxy como Custom, o peso de leitura de qualquer nova instância somente leitura analítica baseada em DuckDB adicionada à instância primária terá o valor padrão 0 e deverá ser configurado manualmente.

Roteamento automático de consultas HTAP

Roteamento manual com hint

Se o roteamento automático apresentar baixo desempenho, ou se a estimativa de custos não estiver disponível para a sua versão do MySQL, adicione um hint a uma instrução SQL para forçar uma rota de consulta específica. O hint afeta apenas a instrução SQL atual.

• Forçar roteamento para uma instância columnstore (instância somente leitura analítica baseada em DuckDB)

  /*force_ap_nodes*/ SELECT COUNT(*) FROM <target_table_name>;

• Forçar roteamento para uma instância orientada a linhas (instância primária ou instância somente leitura comum)

  SELECT /*+set_var(rds_cost_threshold_for_duckdb = 0)*/ COUNT(*) FROM <target_table_name>;

Documentos e APIs relacionados

• Add a DuckDB-based analytical read-only instance to an RDS for MySQL high-availability instance

• What is a database proxy?

• APIs relacionadas

  • DescribeDBProxy: Consulta os detalhes de um proxy de banco de dados.

  • DescribeDBProxyEndpoint: Consulta informações sobre um endpoint de proxy.

  • ModifyDBProxyEndpoint: Configura a política de acesso de um endpoint de proxy.

Apêndice: Princípios do roteamento automático de consultas HTAP

1. O proxy de banco de dados recebe uma consulta e a encaminha para uma instância orientada a linhas, como a instância primária ou uma instância somente leitura comum.

2. O otimizador na instância orientada a linhas analisa a consulta e estima se o seu custo de execução excede o limiar configurado.

   • Se o custo estimado de execução estiver abaixo do limiar de custo de execução de SQL, a consulta será executada em uma instância orientada a linhas. Caso existam várias instâncias somente leitura comuns, a consulta será roteada com base nas regras de balanceamento de carga.

   • Se o custo estimado de execução estiver acima do limiar de custo de execução de SQL, a consulta será executada em uma instância columnstore. Se houver múltiplas instâncias columnstore, o roteamento da consulta seguirá as regras de balanceamento de carga.