DataWorks:Create and use Serverless resource groups

Prérequis

• Vous disposez des autorisations requises pour les groupes de ressources :

  • Autorisations d'achat : Vous avez besoin des autorisations AliyunBSSOrderAccess et AliyunDataWorksFullAccess.

    L'autorisation AliyunVPCReadOnlyAccess est également requise pour lire les informations VPC.

  • Autorisations de gestion : Seul un administrateur d'espace de travail pour l'espace de travail DataWorks cible peut lier un groupe de ressources à cet espace de travail ou modifier la liaison.

    Vous ne savez pas comment accorder des autorisations ? Consultez les rubriques Afficher les autorisations d'un utilisateur RAM et Gérer les autorisations d'un utilisateur RAM . Pour plus d'informations sur le contrôle des autorisations pour les autres opérations liées aux groupes de ressources, consultez la rubrique Politiques de contrôle des autorisations au niveau des objets dans la console .

• Planification de l'environnement et du réseau :

  • Principe de même région : Le groupe de ressources serverless doit se trouver dans la même région que votre espace de travail DataWorks.

  • Planification du VPC (obligatoire) : Les groupes de ressources serverless nécessitent un Virtual Private Cloud (VPC). Vous devez disposer d'un VPC et d'un vSwitch prêts à l'emploi.

    Important

    • Ne modifiez pas l'environnement VPC et vSwitch lié à un groupe de ressources serverless. Toute modification de l'environnement peut entraîner l'échec des tâches dans DataWorks.

    • **Les groupes de ressources serverless ne prennent pas en charge les VPC utilisant des adresses IP dans le bloc CIDR 21.0.0.0/8, ce qui signifie que les adresses IP allant de 21.0.X.X à 21.255.XXX.XXX sont interdites.**

  • Connectivité réseau : Pour garantir que le groupe de ressources puisse accéder à vos sources de données (bases de données, services de données ou autres données dans des environnements réseau cibles), configurez la connectivité réseau en fonction de l'environnement de votre source de données.

    Important

    Par défaut, les groupes de ressources serverless n'ont pas accès à Internet. Pour accéder aux sources de données via Internet, vous devez configurer une passerelle NAT Internet et une EIP pour le VPC lié au groupe de ressources serverless.

Créer un groupe de ressources serverless

Les forfaits d'essai gratuits ne sont valables que pour les groupes de ressources en paiement à l'utilisation. Pour utiliser l'offre que vous avez réclamée, assurez-vous de créer un groupe de ressources en paiement à l'utilisation.

1. Connectez-vous à la console DataWorks. Dans la région cible, cliquez sur Resource Group dans le volet de navigation de gauche pour afficher la liste des groupes de ressources.

2. Cliquez sur Create Resource Group pour accéder à la page d'achat du groupe de ressources serverless. Les paramètres clés sont les suivants :

   Pour les utilisateurs des versions antérieures, l'opération se trouve dans l'onglet par défaut Exclusive Resource Group .

   Paramètre	Description
   Région et zone	Sélectionnez une région. La région doit être identique à celle de votre espace de travail DataWorks.
   Méthode de facturation	Deux méthodes de facturation sont disponibles : prépayée (Subscription) et postpayée (Pay-As-You-Go). Pay-As-You-Go : Convient aux charges de travail présentant de fortes fluctuations ou aux scénarios de test. Aucun frais n'est facturé lorsque aucune ressource n'est utilisée. Prend en charge le passage à Subscription. Important Limite d'UC en paiement à l'utilisation : La spécification maximale pour un seul groupe de ressources en paiement à l'utilisation est de 500 UC. Subscription : Convient aux charges de travail de production stables à long terme à moindre coût. Le passage de Subscription à Pay-As-You-Go n'est pas pris en charge. Vous pouvez acheter plusieurs groupes de ressources avec différentes méthodes de facturation pour répondre à vos besoins métier.
   Spécifications du groupe de ressources	Lorsque la méthode de facturation est Subscription, définissez les spécifications du groupe de ressources. La quantité minimale d'achat est de 2 UC, et l'incrément de mise à l'échelle minimal est de 1 UC. 1 UC = 1 cœur de processeur + 4 Go de mémoire. Pour des recommandations d'achat et les spécifications minimales requises pour exécuter diverses tâches, consultez la rubrique Spécifications et tarification des groupes de ressources.
   VPC	Sélectionnez le VPC en fonction du réseau auquel le groupe de ressources doit se connecter. Si aucune option n'est disponible dans la liste déroulante, accédez à la console VPC pour en créer un. Pour plus d'informations sur les VPC, consultez la rubrique Qu'est-ce qu'un VPC ?. La source de données se trouve dans le même compte et la même région que le groupe de ressources serverless : Configurez le VPC et le vSwitch où réside la source de données. La source de données se trouve dans d'autres environnements réseau complexes : Vous devez également connecter le VPC lié au groupe de ressources serverless au VPC où réside la source de données en utilisant VPN Gateway ou Express Connect. Pour plus d'informations, consultez la rubrique Connectivité réseau. Important Un groupe de ressources prend en charge la liaison à plusieurs VPC. Vous pouvez lier des VPC supplémentaires après l'achat. Si la méthode de facturation du groupe de ressources est Subscription, le VPC configuré ici ne peut pas être modifié ou remplacé pour Data Service après son application à Data Service, au calcul de données et à l'intégration de données. Planifiez en conséquence.
   vSwitch
   Cycle de facturation	Lorsque la méthode de facturation est Subscription, vous devez définir le cycle de facturation. Important Nous vous recommandons de sélectionner Auto Renewal pour éviter les interruptions de service causées par l'expiration des ressources et leur arrêt ou libération. Après avoir sélectionné cette option, le cycle de renouvellement automatique est mensuel et les frais sont automatiquement déduits au prix en vigueur avant l'expiration de l'instance.
   Rôle lié au service	Lors du premier achat, vous devez Create Service-linked Role (AliyunServiceRoleForDataWorks). Les achats suivants utiliseront automatiquement le rôle créé. Ce rôle est utilisé pour accéder aux ressources VPC, Elastic Network Interface (ENI) et groupe de sécurité. Si vous voyez l'invite Please create AliyunServiceRoleForDataWorks, fournissez cette URL d'autorisation au propriétaire du compte Alibaba Cloud ou à d'autres personnes autorisées pour l'autorisation, puis poursuivez.

   Une fois un groupe de ressources serverless créé, vous ne pouvez pas modifier le vSwitch (V-Switch) lié au groupe de ressources. Si vous sélectionnez un vSwitch incorrect lors de la création, vous ne pouvez pas modifier directement la liaison. Vous devez vous désabonner du groupe de ressources actuel et en acheter un nouveau avec le vSwitch correct. Assurez-vous de vérifier la configuration du vSwitch avant de créer un groupe de ressources.

Après avoir finalisé l'achat, la liste des groupes de ressources peut mettre 1 à 2 minutes pour afficher le groupe de ressources nouvellement créé. Si le groupe de ressources n'apparaît pas immédiatement dans la liste, actualisez manuellement la page. Après la création, le statut du groupe de ressources s'affiche comme Creating. Vous ne pouvez utiliser le groupe de ressources qu'une fois que le statut passe à Running.

Assurez-vous d'associer le groupe de ressources à un espace de travail dès que le statut passe à Running. Sinon, le groupe de ressources ne pourra pas être sélectionné dans les configurations de tâches.

Configuration et utilisation du groupe de ressources

Exploitation et maintenance (O&M) et surveillance du groupe de ressources

Gestion des coûts des groupes de ressources

FAQ

Q : Existe-t-il des restrictions régionales pour les achats ?

R : Les restrictions d'achat sont les suivantes.

• Si vous souhaitez utiliser des groupes de ressources serverless dans un environnement revendeur, confirmez d'abord si votre fournisseur prend en charge la vente de ce produit.

• Les achats ne sont pas pris en charge dans la région Thaïlande (Bangkok).

Q : Après avoir acheté un forfait d'essai gratuit pour les groupes de ressources serverless, je ne peux pas lier un groupe de ressources dans DataWorks et aucun groupe de ressources n'apparaît dans la liste. Que dois-je faire ?

R : Un forfait d'essai gratuit est un bon de réduction de coûts et ne crée pas automatiquement un groupe de ressources. Vous devez créer manuellement un groupe de ressources serverless en paiement à l'utilisation, et le système utilisera automatiquement le forfait pour compenser les coûts générés par ce groupe de ressources. Une fois le quota du forfait épuisé, les frais seront déduits du solde de votre compte en mode paiement à l'utilisation.

Q : Comment un groupe de ressources serverless peut-il accéder à une adresse d'hôte ?

R : Les groupes de ressources serverless ne prennent pas en charge l'accès direct à l'hôte. Si nécessaire, vous pouvez utiliser Privatezone DNS pour résoudre et accéder à l'hôte.

1. Activer le service PrivateZone DNS

   Remarque

   Si PrivateZone DNS est déjà activé, vous pouvez ignorer cette étape.

2. Vous avez créé une zone.

   En prenant le nom de domaine de l'hôte header-1-cn-shanghai comme exemple, effectuez la résolution faisant autorité pour le nom de domaine header-1-cn-shanghai. Vous pouvez ajuster ce paramètre en fonction de la configuration de votre nom de domaine d'hôte.

3. Ajouter un enregistrement DNS

   Définissez la Record Value sur l'adresse IP privée correspondant à l'hôte lié au nom de domaine.

4. Associer un VPC à la zone

   Lors de la définition du VPC pour que le nom de domaine prenne effet, sélectionnez le VPC lié au groupe de ressources.

Q : J'ai réclamé un forfait de ressources pour les nouveaux utilisateurs ou un forfait de déduction, mais je ne peux pas sélectionner de groupe de ressources dans la page de liaison ou la configuration des tâches. Pourquoi ?

R : Les forfaits de ressources pour les nouveaux utilisateurs et les forfaits de déduction sont uniquement des bons de réduction de coûts. Ils ne créent pas automatiquement d'instances de groupe de ressources. Accédez à la page Resource Group List, cliquez sur Create Resource Group, et sélectionnez la méthode de facturation Pay-As-You-Go pour créer une instance de groupe de ressources. Une fois le groupe de ressources créé, actualisez la page et le groupe de ressources apparaîtra dans la liste déroulante.

Si la page redirige vers la page d'essai gratuit pendant la création, revenez manuellement à la page d'achat du groupe de ressources serverless pour créer le groupe de ressources. Le système utilisera automatiquement votre forfait de ressources réclamé pour compenser les coûts générés par le groupe de ressources.

Q : Une tâche d'intégration de données s'exécute depuis longtemps avec 0 % de progression, ou un message d'erreur indique que le type de groupe de ressources n'est pas pris en charge. Que dois-je faire ?

R : Ce problème est généralement causé par l'utilisation d'un ancien groupe de ressources dédié (tel qu'un groupe de ressources dédié à l'intégration de données), où la fragmentation des emplacements machine empêche les tâches d'obtenir suffisamment de ressources. Créez un groupe de ressources serverless et basculez la tâche pour qu'elle s'exécute dessus. Si la tâche ne peut toujours pas s'exécuter, essayez les étapes suivantes :

• Réduisez la configuration de simultanéité de la tâche de synchronisation.

• Augmentez les spécifications du groupe de ressources serverless pour allouer plus d'UC.

Les anciens groupes de ressources dédiés ne sont plus recommandés. Migrez vers des groupes de ressources serverless pour une meilleure élasticité et stabilité.

Q : Quelle est la différence entre les groupes de ressources DataWorks et les ressources de calcul MaxCompute ?

R : Pour exécuter des tâches de synchronisation de données ODPS, vous avez besoin des deux types de ressources suivants :

• Groupe de ressources serverless DataWorks : Utilisé pour planifier et exécuter des tâches de synchronisation. Achetez le groupe de ressources dans la console DataWorks.

• UC de calcul MaxCompute : Utilisées pour analyser et traiter les données dans les projets MaxCompute (ODPS). Achetez et configurez les UC de calcul séparément dans la console MaxCompute.

Ces deux types de ressources sont indépendants et doivent être achetés séparément. Si vous achetez uniquement un groupe de ressources serverless DataWorks mais que le projet MaxCompute ne dispose pas d'assez d'UC de calcul, les tâches de synchronisation ODPS peuvent échouer ou s'exécuter lentement en raison de ressources insuffisantes lors de la phase d'analyse des données.

Références

• Utilisez la fonctionnalité de surveillance intelligente dans Operation Center pour surveiller l'utilisation du groupe de ressources et le nombre d'instances en attente de ressources. Pour plus d'informations, consultez la rubrique Créer une règle personnalisée.

• Si les tâches s'exécutant sur un groupe de ressources serverless nécessitent un environnement de développement spécifique (telles que des dépendances de bibliothèques tierces), vous pouvez créer une image personnalisée qui intègre les packages et dépendances nécessaires, puis spécifier le groupe de ressources serverless comme ressource d'exécution et l'image comme environnement d'exécution lors de l'exécution de la tâche.