E-MapReduce:Créer un cluster Data Science

Prérequis

• Accordez les autorisations AliyunOSSFullAccess et AliyunDLFFullAccess. Pour plus d'informations, consultez la rubrique Autorisation de rôle.

• Disposez d'un cluster Container Service for Kubernetes (ACK) existant. Pour plus d'informations, consultez les rubriques Créer un cluster ACK dédié (obsolète) ou Créer un cluster ACK managé.

Important

Votre cluster ACK doit répondre aux exigences suivantes :

• Version de Kubernetes : 1,22 à 1,24.

• vCPU : 16 ou plus.

• Mémoire : 64 GiB ou plus.

• Type d'instance :

  • Seuls les types d'instance à usage général, optimisés pour le calcul et optimisés pour la mémoire sont pris en charge.

  • Seules les familles d'instances ecs.g5, ecs.g6, ecs.g7 et ultérieures sont prises en charge.

• Créez un pool de nœuds. Pour plus d'informations, consultez la rubrique Créer et gérer des pools de nœuds.

Précautions

Vous ne pouvez déployer qu'un seul cluster Data Science par cluster ACK.

Procédure

1. Connectez-vous à la page EMR on ACK.

2. Sur la page EMR on ACK, cliquez sur Create Cluster.

3. Configurez les paramètres du cluster.

   Region	Région dans laquelle créer le cluster. La région ne peut pas être modifiée après la création.
   Cluster Type	Data Science : prend en charge les scénarios de big data et d'IA, notamment l'ETL big data hors ligne avec Hive et Spark ainsi que l'entraînement de modèles avec TensorFlow. Vous pouvez sélectionner un framework de calcul hétérogène CPU+GPU et utiliser des GPU NVIDIA pour accélérer certains algorithmes d'apprentissage profond.
   Product Version	La dernière version logicielle est sélectionnée par défaut.
   Component Version	Répertorie les composants et les versions correspondant au type de cluster sélectionné.
   ACK cluster	Sélectionnez un cluster ACK existant ou créez-en un dans la console Container Service for Kubernetes (ACK). Remarque Les clusters Data Science utilisent les namespaces suivants : anonymous, cert-manager, fluid-system, ingress-nginx, istio-system, knative-serving, kubeflow, kubernetes-dashboard et monitoring. Si ces namespaces existent déjà dans votre cluster ACK, la création du cluster Data Science les écrasera.
   Configure Dedicated Nodes	Réserve un pool de nœuds ou des nœuds individuels pour une utilisation exclusive par EMR en appliquant des taints et des libellés spécifiques à EMR.
   Cluster Name	Nom du cluster. Il doit comporter entre 1 et 64 caractères et peut contenir des caractères chinois, des lettres, des chiffres, des traits d'union (-) et des underscores (_).

4. Cliquez sur create.

   Le cluster est créé avec succès lorsque son statut passe à Running.