Hologres:Multi-cluster and auto scaling (beta)

Cost = Elastic resources launched (CU × hour) × Unit price

Vérifier le comportement de l'Auto Scaling

Après avoir activé l'Auto Scaling, utilisez pgbench (l'outil natif de test de performances PostgreSQL) pour confirmer que le déclenchement de la mise à l'échelle fonctionne correctement. Cet exemple utilise une configuration de 32 CU par cluster, 1 cluster réservé et un maximum de 4 clusters.

1. Créez des tables de test et chargez les données :

   CREATE TABLE tbl_1 (col1 INT, col2 INT, col3 TEXT);
   CREATE TABLE tbl_2 (col1 INT, col2 INT, col3 TEXT);
   INSERT INTO tbl_1 SELECT i, i+1, md5(random()::TEXT) FROM generate_series(0, 500000) AS i;
   INSERT INTO tbl_2 SELECT i, i+1, md5(random()::TEXT) FROM generate_series(0, 500000) AS i;

2. Sur le serveur de test de charge, créez un fichier nommé select.sql contenant la requête suivante :

   EXPLAIN ANALYZE SELECT * FROM tbl_1 LEFT JOIN tbl_2 ON tbl_1.col3 = tbl_2.col3 ORDER BY 1;

3. Définissez le mot de passe comme variable d'environnement :

   export PGPASSWORD='<AccessKey_Secret>'

4. Exécutez le test de charge. Remplacez les espaces réservés par vos valeurs réelles. Pour plus de détails sur les paramètres de connexion, consultez la rubrique Connect to Hologres and develop data.

   Espace réservé	Description
   <AccessKey_Secret>	Secret AccessKey de votre compte
   <Database>	Nom de la base de données Hologres cible
   <AccessKey_ID>	ID AccessKey de votre compte
   <Endpoint>	Endpoint de l'instance Hologres
   <Port>	Port de connexion

   pgbench \
     -c 30 \
     -j 30 \
     -f select.sql \
     -d <Database> \
     -U <AccessKey_ID> \
     -h <Endpoint> \
     -p <Port> \
     -T 1800

Résultats attendus :

• Utilisation du CPU du cluster :

  • Lorsque le cluster 1 subit une charge élevée, l'Auto Scaling ajoute un cluster (position 1 dans le graphique).

  • Une fois le test de charge terminé, les deux clusters affichent une faible charge et l'Auto Scaling supprime le cluster élastique (position 2).

• Utilisation du CPU du virtual warehouse :

  • Un nouveau cluster est ajouté lorsque l'utilisation du CPU du virtual warehouse dépasse continuellement 85 %.

  • Après l'ajout du nouveau cluster, l'utilisation globale du CPU chute à environ 70 %.

Métriques

Dans la console Hologres, surveillez les métriques suivantes pour votre virtual warehouse. Pour obtenir les instructions de configuration, consultez la rubrique Monitoring metrics.

• Utilisation du CPU du cluster

• Utilisation de la mémoire du cluster

• Nombre de vCPU lancés par l'Auto Scaling du virtual warehouse

Journaux des événements élastiques

1. Sur la page Virtual Warehouse Management, cliquez sur l'onglet Elastic Event Execution Logs.

2. Sélectionnez une plage horaire pour afficher les événements de mise à l'échelle passés. Chaque enregistrement d'événement inclut l'heure d'exécution, le virtual warehouse, le statut d'exécution, le type d'événement, le nombre de clusters réservés et le nombre cible de clusters.

Événements Cloud Monitor

Les événements de scale-out et de scale-in de l'Auto Scaling sont enregistrés dans CloudMonitor.

1. Accédez au Centre d'événements Cloud Monitor. Sur la page System Event, sélectionnez Hologres comme produit dans la zone Event Monitoring. Les événements d'Auto Scaling suivants sont disponibles :

   Nom de l'événement	Description
   Instance:Warehouse:AutoElastic:Start	L'Auto Scaling a démarré pour un virtual warehouse
   Instance:Warehouse:AutoElastic:Finish	L'Auto Scaling s'est terminé avec succès
   Instance:Warehouse:AutoElastic:Failed	Échec de l'Auto Scaling (par exemple, un Cluster n'a pas pu être lancé)

2. Sur la base de ces événements, configurez des notifications ou des règles d'alerte. Pour obtenir les instructions de configuration, consultez la rubrique Use alerts for system events.

L'exemple suivant montre la charge utile d'un événement Cloud Monitor pour un échec de scale-out :

{
    "status": "Failed",
    "instanceName": "<instance_id>",
    "resourceId": "<instance_resource_id>",
    "content": {
        "AutoElasticCPU": <cpu_num>,
        "ScaleType": "ScaleOut",
        "ScheduleId": "xxxxxx",
        "WarehouseId": "<warehouse_id>",
        "WarehouseName": "<warehouse_name>"
    },
    "product": "hologres",
    "time": 1722852008000,
    "level": "WARN",
    "regionId": "<region>",
    "id": "<event_id>",
    "groupId": "0",
    "name": "Instance:Warehouse:TimedElastic:Failed"
}

ActionTrail

Toutes les opérations effectuées dans la console Hologres — y compris la modification des configurations d'Auto Scaling — ainsi que les opérations réelles de mise à l'échelle des clusters déclenchées par l'Auto Scaling, sont enregistrées dans ActionTrail. Pour plus de détails, consultez la rubrique Audit event logs.