ApsaraDB for MongoDB:Test de charge du nombre maximal de connexions sur une instance en cluster de réplication

Environnement de test

Créez une instance ECS et une instance ApsaraDB for MongoDB. Pour plus d'informations, consultez les rubriques Créer une instance en cluster de réplication et Créer une instance ECS.

Le tableau suivant présente la configuration de l'instance ECS et des instances ApsaraDB for MongoDB utilisées pour le test.

• L'instance ApsaraDB for MongoDB utilisée pour le test repose sur une architecture à trois nœuds composée d'un nœud principal, d'un nœud secondaire et d'un nœud masqué.

• L'instance ECS et l'instance ApsaraDB for MongoDB utilisées pour le test sont déployées dans la même zone de la même région, avec un temps aller-retour moyen (RTT) de 0 103 ms.

Outil de test

• Le test utilise l'outil open source Yahoo Cloud Serving Benchmark (YCSB) 0.17.0.

  Remarque

  YCSB est un outil Java permettant d'évaluer les performances de plusieurs types de bases de données. Pour plus d'informations sur l'installation et l'utilisation de YCSB, consultez la page YCSB.

• Le test utilise également un programme personnalisé de test de charge des connexions. Pour plus d'informations, consultez la section Informations complémentaires sur un test de charge de 96 000 connexions.

Méthode de test

1. Ajoutez l'primary private IP address de l'instance ECS à la liste d'autorisation de l'instance ApsaraDB for MongoDB. Pour plus d'informations, consultez la rubrique Modifier une liste d'autorisation.

   Remarque

   Connectez-vous à la console ECS et consultez l'Primary Private IP Address de l'instance ECS dans la section Configuration Information de la page Instance Details.

2. Connectez-vous à l'instance ECS. Pour plus d'informations, consultez la rubrique Créer et gérer une instance ECS à l'aide de la console ECS (version express).

3. Chargez les données de test à l'aide de l'outil YCSB.

   ./bin/ycsb.sh load mongodb -s -p workload=site.ycsb.workloads.CoreWorkload -p recordcount=10000000 -p mongodb.url="mongodb://test:****@dds-bp13e84d11****.mongodb.rds.aliyuncs.com:3717/admin" -p table=test -threads 8

   Modifiez les paramètres suivants :

   • recordcount=1000000 : quantité totale de données chargées dans l'instance ApsaraDB for MongoDB.

   • mongodb.url="mongodb://test:**@dds-bp13e84d11**.mongodb.rds.aliyuncs.com:3717/admin" : chaîne de connexion de l'instance ApsaraDB for MongoDB. Lors du test, le compte de base de données est test et la base de données est admin.

     Remarque

     Connectez-vous à la console ApsaraDB for MongoDB. Sur la page Database Connection, consultez la chaîne de connexion dans la section Internal Connections - VPC.

   • threads 8 : nombre de threads simultanés sur le client utilisé pour le test.

4. Exécutez la commande suivante pour lancer le test de charge des performances :

   ./bin/ycsb.sh run mongodb -s -p workload=site.ycsb.workloads.CoreWorkload -p recordcount=10000000 -p operationcount=5000000 -p readproportion=50 -p updateproportion=50 -p requestdistribution=zipfian -p mongodb.url="mongodb://test:****@dds-bp13e84d11****.mongodb.rds.aliyuncs.com:3717/admin?maxPoolSize=8000" -p table=test -threads 8000

   Modifiez les paramètres suivants :

   • recordcount=1000000 : quantité totale de données chargées dans l'instance ApsaraDB for MongoDB.

   • operationcount=5000000 : nombre total d'opérations de lecture et d'écriture.

   • insertproportion=0 : ratio des opérations de chargement.

   • readproportion=50 : ratio des opérations de lecture.

   • updateproportion=50 : ratio des opérations de mise à jour.

   • mongodb.url="mongodb://test:**@dds-bp13e84d11**.mongodb.rds.aliyuncs.com:3717/admin" : chaîne de connexion de l'instance ApsaraDB for MongoDB. Lors du test, le compte de base de données est test et la base de données est admin.

     Remarque

     • Connectez-vous à la console ApsaraDB for MongoDB. Sur la page Database Connection, consultez la chaîne de connexion dans la section Internal Connections - VPC.

     • Spécifiez le paramètre maxPoolSize. Sinon, la valeur par défaut de 100 est utilisée, ce qui provoque une erreur MongoWaitQueueFullException empêchant le test d'atteindre la limite de connexions cible.

5. Consultez les informations de surveillance de l'instance ApsaraDB for MongoDB utilisée pour le test. Pour plus d'informations, consultez la rubrique Surveillance des nœuds (anciennement surveillance de base).

   Dans l'onglet node monitoring, sélectionnez la plage horaire du test pour afficher les métriques CPU Utilization, Memory Usage, QPS, Connections et Connection Usage de l'instance.

OpenJDK 64-Bit Server VM warning: Attempt to protect stack guard pages failed.
OpenJDK 64-Bit Server VM warning: DBWrapper: report latency for each error is false and specific error codes to track for latency are: []INFO: os rrno=12)
#
# There is insufficient memory for the Java Runtime Environment to continue.
# Native memory allocation (mmap) failed to map 12288 bytes for committing reserved memory.
OpenJDK 64-Bit Server VM warning: Attempt to protect stack guard pages failed.
# An error report file with more information is saved as:
# /root/ycsb-0.17.0/hs_err_pid101727.log
DBWrapper: report latency for each error is false and specific error codes to track for latency are: []
OpenJDK 64-Bit Server VM warning: Attempt to protect stack guard pages failed.
DBWrapper: report latency for each error is false and specific error codes to track for latency are: []OpenJDK 64-Bit Server VM warning: Attempt to protect stack guard pages failed.
OpenJDK 64-Bit Server VM warning: DBWrapper: report latency for each error is false and specific error codes to track for latency are: []INFO: os rrno=12)
[thread 140023352145472 also had an error]
OpenJDK 64-Bit Server VM warning: INFO: os::commit_memory(0x00007f59ba0a2000, 12288, 0) failed; error='Cannot allocate memory' (errno=12)

sysctl net.ipv4.ip_local_port_range

net.ipv4.ip_local_port_range = 40000    65535

sudo sysctl -w net.ipv4.ip_local_port_range="10240 65535"

Résultats du test

mgset-xxx:PRIMARY> db.serverStatus().connections
{
        "current" : 7854,
        "available" : 146,
        "totalCreated" : 7857,
        "internal_current" : 27,
        "internal_available" : 7973,
        "internal_totalCreated" : 7029,
        "active" : 9,
        "exhaustIsMaster" : 4,
        "exhaustHello" : 2,
        "awaitingTopologyChanges" : 6
}