Créez un nœud Data Lake Analytics dans DataWorks pour mettre en place un processus ETL (extraction, transformation et chargement) en ligne.
Informations générales
Les nœuds Data Lake Analytics se connectent à Alibaba Cloud Data Lake Analytics (DLA). Pour plus d'informations sur DLA, consultez la page Présentation de DLA
Les tâches exécutées sur les nœuds Data Lake Analytics peuvent utiliser des groupes de ressources serverless ou des groupes de ressources exclusifs d'ancienne version. Nous vous recommandons d'utiliser les groupes de ressources serverless. Pour savoir comment acheter et utiliser un groupe de ressources serverless, consultez la rubrique Utiliser des groupes de ressources serverless.
Limites
Les nœuds Data Lake Analytics sont pris en charge dans les régions suivantes : Chine (Hangzhou), Chine (Shanghai), Chine (Pékin), Chine (Shenzhen), Chine (Hong Kong), Japon (Tokyo), Singapour, Allemagne (Francfort), Royaume-Uni (Londres), États-Unis (Silicon Valley) et États-Unis (Virginie).
Procédure
-
Accédez à la page DataStudio.
Connectez-vous à la console DataWorks. Dans la région cible, cliquez sur dans le volet de navigation de gauche. Sélectionnez un espace de travail dans la liste déroulante et cliquez sur Go to Data Development.
-
Survolez l'icône
et choisissez .Vous pouvez également ouvrir le workflow cible, cliquer avec le bouton droit sur Custom Rule et choisir .
Dans la boîte de dialogue Create Node , définissez les paramètres Node Name et Location.
Cliquez sur Commit.
-
Configurez le nœud Data Lake Analytics.
-
Sélectionnez une source de données.
Choisissez une source de données. Si la source de données souhaitée ne figure pas dans la liste déroulante, cliquez sur New data source à droite pour accéder à la page Data source management et en créer une. Pour plus d'informations, consultez la rubrique Configurer une source de données Data Lake Analytics (DLA).
-
Rédigez les instructions SQL du nœud.
Une fois la source de données sélectionnée, rédigez des instructions SQL selon la syntaxe prise en charge par DLA. Vous pouvez écrire des instructions DML (langage de manipulation des données) ou DDL (langage de définition des données).
Cliquez sur l'icône
dans la barre d'outils supérieure. Cliquez sur l'icône
dans la barre d'outils supérieure pour exécuter les instructions SQL.
Pour modifier les ressources utilisées lors d'un test sur la page Data Studio , cliquez sur l'icône
dans la barre d'outils et sélectionnez le groupe de ressources serverless cible.RemarqueUn groupe de ressources serverless est requis pour accéder à une source de données déployée dans un VPC. Vous devez sélectionner un groupe de ressources serverless connecté à la source de données.
-
-
Dans le volet de droite, cliquez sur Scheduling pour configurer les propriétés de planification du nœud. Pour plus d'informations, consultez la rubrique Configurer les propriétés de base.
Vous devez sélectionner un groupe de ressources serverless connecté au nœud Data Lake Analytics pour planifier l'exécution périodique des tâches.
Cliquez sur l'icône
dans la barre d'outils supérieure pour enregistrer le nœud.Cliquez sur l'icône
dans la barre d'outils supérieure.Dans la boîte de dialogue Commit Node , saisissez une Change Description.
Cliquez sur OK.
Testez le nœud. Pour plus d'informations, consultez la rubrique Gérer les tâches planifiées.
Enregistrez et validez le nœud.
Vous devez configurer les propriétés Rerun attribute et Parent Nodes du nœud avant de pouvoir le valider.
Si vous utilisez un espace de travail en mode standard, cliquez sur Deploy en haut à droite après avoir validé le nœud. Pour plus d'informations, consultez la rubrique Déployer des tâches.