Hologres:Multi-cluster and auto scaling (beta)

Cost = Elastic resources launched (CU × hour) × Unit price

Verificar o comportamento do auto scaling

Após ativar o auto scaling, use o pgbench (ferramenta nativa de teste de desempenho do PostgreSQL) para confirmar se o dimensionamento é acionado corretamente. Este exemplo usa uma configuração de 32 CU por cluster, 1 cluster reservado e um máximo de 4 clusters.

1. Crie tabelas de teste e carregue dados:

   CREATE TABLE tbl_1 (col1 INT, col2 INT, col3 TEXT);
   CREATE TABLE tbl_2 (col1 INT, col2 INT, col3 TEXT);
   INSERT INTO tbl_1 SELECT i, i+1, md5(random()::TEXT) FROM generate_series(0, 500000) AS i;
   INSERT INTO tbl_2 SELECT i, i+1, md5(random()::TEXT) FROM generate_series(0, 500000) AS i;

2. No servidor de teste de estresse, crie um arquivo chamado select.sql com a seguinte consulta:

   EXPLAIN ANALYZE SELECT * FROM tbl_1 LEFT JOIN tbl_2 ON tbl_1.col3 = tbl_2.col3 ORDER BY 1;

3. Defina a senha como uma variável de ambiente:

   export PGPASSWORD='<AccessKey_Secret>'

4. Execute o teste de estresse. Substitua os placeholders pelos valores reais. Para detalhes sobre parâmetros de conexão, consulte Connect to Hologres and develop data.

   Placeholder	Descrição
   <AccessKey_Secret>	Segredo do AccessKey da sua conta
   <Database>	Nome do banco de dados Hologres de destino
   <AccessKey_ID>	ID do AccessKey da sua conta
   <Endpoint>	Endpoint da instância Hologres
   <Port>	Porta de conexão

   pgbench \
     -c 30 \
     -j 30 \
     -f select.sql \
     -d <Database> \
     -U <AccessKey_ID> \
     -h <Endpoint> \
     -p <Port> \
     -T 1800

Resultados esperados:

• Utilização de CPU do cluster:

  • Quando o cluster 1 sustenta uma carga elevada, o auto scaling adiciona um cluster (posição 1 no gráfico).

  • Após o término do teste de estresse, ambos os clusters apresentam baixa carga e o auto scaling remove o cluster elástico (posição 2).

• Utilização de CPU da virtual warehouse:

  • Um novo cluster é adicionado quando a utilização de CPU da virtual warehouse excede continuamente 85%.

  • Após a adição do novo cluster, a utilização geral de CPU cai para aproximadamente 70%.

Métricas

No Console do Hologres, monitore as seguintes métricas da sua virtual warehouse. Para instruções de configuração, consulte Monitoring metrics.

• Utilização de CPU do cluster

• Uso de memória do cluster

• Quantidade de vCPUs iniciadas pelo auto scaling da virtual warehouse

Logs de eventos elásticos

1. Na página Virtual Warehouse Management, clique na aba Elastic Event Execution Logs.

2. Selecione um intervalo de tempo para visualizar eventos de dimensionamento anteriores. Cada registro de evento inclui o horário de execução, virtual warehouse, status de execução, tipo de evento, número de clusters reservados e número alvo de clusters.

Eventos do CloudMonitor

Os eventos de expansão e redução do auto scaling são registrados no CloudMonitor.

1. Acesse o Centro de Eventos do Cloud Monitor. Na página System Event, selecione Hologres como product na área Event Monitoring. Os seguintes eventos de auto scaling estão disponíveis:

   Nome do evento	Descrição
   Instance:Warehouse:AutoElastic:Start	O auto scaling foi iniciado para uma virtual warehouse
   Instance:Warehouse:AutoElastic:Finish	O auto scaling foi concluído com sucesso
   Instance:Warehouse:AutoElastic:Failed	Falha no auto scaling (por exemplo, não foi possível iniciar um Cluster)

2. Com base nesses eventos, configure notificações ou regras de alerta. Para instruções de configuração, consulte Use alerts for system events.

O exemplo a seguir mostra um payload de evento do Cloud Monitor para uma falha na expansão:

{
    "status": "Failed",
    "instanceName": "<instance_id>",
    "resourceId": "<instance_resource_id>",
    "content": {
        "AutoElasticCPU": <cpu_num>,
        "ScaleType": "ScaleOut",
        "ScheduleId": "xxxxxx",
        "WarehouseId": "<warehouse_id>",
        "WarehouseName": "<warehouse_name>"
    },
    "product": "hologres",
    "time": 1722852008000,
    "level": "WARN",
    "regionId": "<region>",
    "id": "<event_id>",
    "groupId": "0",
    "name": "Instance:Warehouse:TimedElastic:Failed"
}

ActionTrail

Todas as operações realizadas no Console do Hologres — incluindo a edição de configurações de auto scaling — e as operações reais de dimensionamento de clusters acionadas pelo auto scaling são registradas no ActionTrail. Para mais detalhes, consulte Audit event logs.