Hologres:Multi-cluster e auto scaling (beta)

Cost = Elastic resources launched (CU × hour) × Unit price

Verificar o comportamento do auto scaling

Após ativar o auto scaling, use o pgbench (ferramenta nativa de teste de desempenho do PostgreSQL) para confirmar se o dimensionamento é acionado corretamente. Este exemplo usa uma configuração de 32 CU por cluster, 1 cluster reservado e um máximo de 4 clusters.

1. Crie tabelas de teste e carregue dados:

   CREATE TABLE tbl_1 (col1 INT, col2 INT, col3 TEXT);
   CREATE TABLE tbl_2 (col1 INT, col2 INT, col3 TEXT);
   INSERT INTO tbl_1 SELECT i, i+1, md5(random()::TEXT) FROM generate_series(0, 500000) AS i;
   INSERT INTO tbl_2 SELECT i, i+1, md5(random()::TEXT) FROM generate_series(0, 500000) AS i;

2. No servidor de teste de estresse, crie um arquivo chamado select.sql com a seguinte consulta:

   EXPLAIN ANALYZE SELECT * FROM tbl_1 LEFT JOIN tbl_2 ON tbl_1.col3 = tbl_2.col3 ORDER BY 1;

3. Defina a senha como uma variável de ambiente:

   export PGPASSWORD='<AccessKey_Secret>'

4. Execute o teste de estresse. Substitua os espaços reservados pelos seus valores reais. Para detalhes sobre parâmetros de conexão, consulte Conectar ao Hologres e desenvolver dados.

   Espaço reservado	Descrição
   <AccessKey_Secret>	Segredo da AccessKey da sua conta
   <Database>	Nome do banco de dados Hologres de destino
   <AccessKey_ID>	ID da AccessKey da sua conta
   <Endpoint>	Endpoint da instância Hologres
   <Port>	Porta de conexão

   pgbench \
     -c 30 \
     -j 30 \
     -f select.sql \
     -d <Database> \
     -U <AccessKey_ID> \
     -h <Endpoint> \
     -p <Port> \
     -T 1800

Resultados esperados:

• Utilização de CPU do cluster:

  • Quando o cluster 1 sustenta alta carga, o auto scaling adiciona um cluster (posição 1 no gráfico).

  • Após o término do teste de estresse, ambos os clusters apresentam baixa carga e o auto scaling remove o cluster elástico (posição 2).

• Utilização de CPU do virtual warehouse:

  • Um novo cluster é adicionado quando a utilização de CPU do virtual warehouse excede continuamente 85%.

  • Após a adição do novo cluster, a utilização geral de CPU cai para aproximadamente 70%.

Métricas

No Console do Hologres, monitore as seguintes métricas do seu virtual warehouse. Para instruções de configuração, consulte Métricas de monitoramento.

• Utilização de CPU do cluster

• Uso de memória do cluster

• Número de vCPUs iniciadas pelo auto scaling do virtual warehouse

Logs de eventos elásticos

1. Na página Virtual Warehouse Management, clique na aba Elastic Event Execution Logs.

2. Selecione um intervalo de tempo para visualizar eventos de dimensionamento anteriores. Cada registro de evento inclui o horário de execução, virtual warehouse, status de execução, tipo de evento, número de clusters reservados e número alvo de clusters.

Eventos do Cloud Monitor

Os eventos de scale-out e scale-in do auto scaling são registrados no CloudMonitor.

1. Acesse o Centro de Eventos do Cloud Monitor. Na página System Event, selecione Hologres como produto na área Event Monitoring. Os seguintes eventos de auto scaling estão disponíveis:

   Nome do evento	Descrição
   Instance:Warehouse:AutoElastic:Start	O auto scaling foi iniciado para um virtual warehouse
   Instance:Warehouse:AutoElastic:Finish	O auto scaling foi concluído com sucesso
   Instance:Warehouse:AutoElastic:Failed	Falha no auto scaling (por exemplo, não foi possível iniciar um Cluster)

2. Com base nesses eventos, configure notificações ou regras de alerta. Para instruções de configuração, consulte Usar alertas para eventos de sistema.

O exemplo a seguir mostra um payload de evento do Cloud Monitor para uma falha de scale-out:

{
    "status": "Failed",
    "instanceName": "<instance_id>",
    "resourceId": "<instance_resource_id>",
    "content": {
        "AutoElasticCPU": <cpu_num>,
        "ScaleType": "ScaleOut",
        "ScheduleId": "xxxxxx",
        "WarehouseId": "<warehouse_id>",
        "WarehouseName": "<warehouse_name>"
    },
    "product": "hologres",
    "time": 1722852008000,
    "level": "WARN",
    "regionId": "<region>",
    "id": "<event_id>",
    "groupId": "0",
    "name": "Instance:Warehouse:TimedElastic:Failed"
}

ActionTrail

Todas as operações realizadas no Console do Hologres — incluindo a edição de configurações de auto scaling — e as operações reais de dimensionamento de clusters acionadas pelo auto scaling são registradas no ActionTrail. Para mais detalhes, consulte Logs de eventos de auditoria.