DataWorks propose deux types de groupes de ressources partagés : le groupe de ressources partagé pour la planification et le groupe de ressources partagé pour DataService Studio. Ces deux types sont provisionnés automatiquement lors de l'activation de DataWorks ; aucun achat séparé n'est requis. Les groupes de ressources partagés sont multi-locataires : tous les locataires puisent dans le même pool de ressources, ce qui signifie que les tâches de différents locataires entrent en concurrence pour l'accès aux ressources pendant les heures de pointe.
Quand utiliser un groupe de ressources partagé
N'utilisez un groupe de ressources partagé que si toutes les conditions suivantes s'appliquent à votre charge de travail :
|
Question |
Utiliser un groupe de ressources partagé |
Utiliser un groupe de ressources serverless |
|
Combien de nœuds s'exécutent simultanément ? |
Un petit nombre, bien inférieur à la limite de parallélisme |
De nombreux nœuds, ou proche de la limite |
|
Une ponctualité stricte des données est-elle requise ? |
Non |
Oui |
|
La source de données utilise-t-elle un VPC (Virtual Private Cloud) ? |
Non |
Oui |
|
Une liste d'autorisation d'adresses IP est-elle configurée sur la source de données ? |
Non |
Oui |
|
Avez-vous besoin d'appels API fréquents et à haute concurrence via DataService Studio ? |
Non |
Oui |
Si l'une des conditions de la colonne de droite s'applique, utilisez plutôt un groupe de ressources serverless.
Limites
Le tableau suivant résume les limites pour chaque type de groupe de ressources partagé.
|
Type de groupe de ressources |
Limite de nœuds parallèles |
Heures de pointe |
Contraintes réseau |
|
Planification |
Jusqu'à 40 nœuds. Pendant les heures de pointe, le nombre réel peut descendre en dessous de 40. |
00:00–09:00 |
Pas d'accès VPC ; pas de liste d'autorisation d'adresses IP sur les sources de données ; l'accès par adresse IP publique ou domaine nécessite la configuration d'une liste d'autorisation dans le sandbox |
|
DataService Studio |
S/O (ne peut pas répondre aux exigences d'API fréquentes et à haute concurrence) |
S/O |
Pas d'accès VPC ; Internet et le réseau classique sont accessibles |
|
Data Integration |
Jusqu'à 5 nœuds lorsque le système est inactif. La contention peut réduire le nombre réel en dessous de 5. |
S/O |
S/O |
Contraintes supplémentaires (tous les groupes de ressources partagés)
La taille de la mémoire est en lecture seule. La formule est la suivante :
Nombre de nœuds parallèles × 512 Mo.Vous ne pouvez pas modifier la configuration réseau sous-jacente.
Vous ne pouvez pas configurer de liste d'autorisation d'adresses IP sur un groupe de ressources partagé. Pour associer un groupe de ressources à un VPC ou configurer une liste d'autorisation d'adresses IP, utilisez un groupe de ressources serverless.
Que se passe-t-il lorsque les ressources sont épuisées
Lorsque le pool de ressources partagé est saturé, les tâches sont mises en file d'attente et peuvent ne pas s'exécuter à l'heure prévue. Le nombre de nœuds parallèles indiqué ci-dessus représente le plafond dans des conditions idéales ; pendant les heures de pointe (00:00–09:00), la capacité disponible peut être inférieure. Vous ne pouvez ajuster que le nombre de nœuds parallèles ; l'allocation de la mémoire s'adapte automatiquement en fonction de ce nombre.
Connectivité réseau
Un groupe de ressources DataWorks est un ensemble d'instances Alibaba Cloud Elastic Compute Service (ECS). Avant d'exécuter des nœuds, vérifiez que le groupe de ressources peut atteindre vos sources de données et que les paramètres de sécurité ne bloquent pas la connexion.
Groupe de ressources partagé pour la planification
|
Scénario |
Pris en charge |
Action requise |
|
Source de données sans liste d'autorisation d'adresses IP |
Oui |
Aucune |
|
Source de données avec une liste d'autorisation d'adresses IP |
Non |
Utilisez un groupe de ressources serverless |
|
Source de données dans un VPC |
Non |
Utilisez un groupe de ressources serverless |
|
Adresse IP publique ou domaine |
Oui (avec configuration) |
Ajoutez l'adresse IP ou le nom de domaine et le port à la liste d'autorisation du sandbox sur la page Workspace dans Management Center de la console DataWorks. Si la connexion échoue toujours, basculez vers un groupe de ressources serverless. |
Sandbox de sécurité : Le groupe de ressources partagé pour la planification utilise un sandbox de sécurité pour restreindre l'accès depuis des adresses IP inconnues. Ajoutez votre adresse IP à la liste d'autorisation du sandbox de sécurité avant d'accéder au groupe de ressources. Pour plus de détails, consultez la section Paramètres de sécurité de la rubrique « Créer et gérer des espaces de travail ».
Groupe de ressources partagé pour DataService Studio
|
Environnement réseau |
Accessible |
|
Internet |
Oui |
|
Réseau classique |
Oui |
|
VPC |
Non |
Liste d'autorisation d'adresses IP pour les sources de données
Pour obtenir les adresses IP des machines du groupe de ressources partagé et les ajouter à une liste d'autorisation de source de données, consultez la rubrique Configurer une liste d'autorisation d'adresses IP. Pour la liste complète des adresses IP, consultez la rubrique Liste d'autorisation des groupes de ressources Data Integration partagés.
Facturation
Les groupes de ressources partagés sont inclus avec l'activation de DataWorks sans coût supplémentaire. Des frais s'appliquent aux instances ECS du groupe de ressources partagé et aux threads de synchronisation de données consommés, facturés selon le modèle de paiement à l'utilisation.
Pour plus de détails sur la facturation, consultez les rubriques suivantes :