Data Online Migration:Migration de données

Considérations

Tenez compte des éléments suivants lors de l'utilisation du service de migration en ligne :

• Le service de migration en ligne accède aux données source via les API publiques standard du fournisseur de services de stockage source. Le comportement de la migration dépend de l'implémentation du service par le fournisseur.

• La migration en ligne consomme des ressources à la fois sur la source et sur la destination, ce qui peut avoir un impact sur vos opérations commerciales. Si vos services sont critiques, évaluez l'impact potentiel et configurez une limite de vitesse pour la tâche de migration, ou exécutez la tâche pendant les heures creuses.

• Le service de migration en ligne vérifie les fichiers à la fois sur la source et sur la destination avant le début d'une migration. Toutefois, si un fichier source porte le même nom qu'un fichier de destination et que la tâche de migration est configurée pour écraser les fichiers existants, le service écrase le fichier de destination. Si les fichiers contiennent des données différentes, renommez l'un des fichiers ou sauvegardez le fichier de destination avant de démarrer la migration.

• Le service de migration en ligne conserve l'heure de dernière modification des fichiers sources. Si une règle de cycle de vie est configurée pour le compartiment de destination, un fichier migré dont l'heure de dernière modification correspond aux conditions de la règle peut être supprimé ou transféré vers la classe de stockage d'archive spécifiée.

Limites

• Si l'hébergement de site web statique est activé pour le compartiment source, le service de migration détecte également les chemins de répertoire en tant qu'objets. Par exemple, si vous téléchargez le fichier myapp/resource/1.jpg, le service de migration détecte trois objets : myapp/, myapp/resource/ et myapp/resource/1.jpg. La migration des objets de répertoire myapp/ et myapp/resource/ échouera, mais le fichier myapp/resource/1.jpg sera migré avec succès.

• Si le compartiment source contient des liens symboliques, le service de migration transfère les liens symboliques eux-mêmes, et non les objets vers lesquels ils pointent. Pour plus d'informations sur les liens symboliques, consultez la page Liens symboliques.

• Vous ne pouvez migrer les données que d'un seul compartiment par tâche de migration. La migration des données de l'intégralité d'un compte en une seule fois n'est pas prise en charge.

• La migration de données depuis Financial Cloud et Government Cloud n'est pas prise en charge.

• Lorsque vous migrez des données entre des compartiments Alibaba Cloud OSS, les propriétés des objets sont traitées comme suit :

  • Les propriétés suivantes sont migrées : x-oss-meta-*, LastModifyTime, Content-Type, Cache-Control, Content-Encoding, Content-Disposition, Content-Language et Expires.

  • Les propriétés suivantes ne sont pas migrées (liste non exhaustive) : classe de stockage, ACL, chiffrement côté serveur, tagging et en-têtes définis par l'utilisateur tels que x-oss-persistent-header.

    Remarque

    La liste des propriétés non prises en charge n'est pas exhaustive. Le comportement de migration des propriétés non répertoriées n'est pas garanti. Vérifiez les propriétés de vos objets une fois la migration terminée.

Étape 1 : Sélectionner une région

Étape 2 : Créer une adresse source

1. Dans le volet de navigation de gauche, choisissez Data Online Migration > Address Management, puis cliquez sur Create Address.

2. Dans le panneau Create Address, configurez les paramètres suivants, puis cliquez sur OK.

   Paramètre	Obligatoire	Description
   Name	Oui	Le nom doit comporter entre 3 et 63 caractères. Le nom peut contenir des lettres minuscules, des chiffres, des traits d'union (-) et des underscores (_). Le nom est sensible à la casse. Le nom ne peut pas commencer par un trait d'union (-) ou un underscore (_).
   Type	Oui	Sélectionnez OSS.
   Nom de domaine personnalisé	Non	Vous pouvez spécifier un nom de domaine personnalisé.
   Region	Oui	Sélectionnez la région où se trouve le compartiment source, par exemple China (Hangzhou).
   Rôle RAM	Oui	Si le compartiment source se trouve dans votre compte actuel : Autorisation automatique de rôle RAM (recommandée). Autorisation manuelle de rôle RAM (alternative). Si le compartiment source appartient à un autre compte : Autoriser dans la console OSS.
   Bucket	Oui	Saisissez le nom du compartiment source dans le compte actuel.
   Prefix	Non	Vous pouvez spécifier un préfixe pour migrer un sous-ensemble de vos données. Le préfixe ne peut pas commencer par une barre oblique (/) mais doit se terminer par une barre oblique, par exemple data/to/oss/. Si vous spécifiez un préfixe : par exemple, si le préfixe source est example/src/, un objet avec la clé example/src/example.jpg est sélectionné pour la migration. Si vous définissez le préfixe de destination sur example/dest/, la clé de l'objet après la migration devient example/dest/example.jpg. Si vous ne spécifiez pas de préfixe : par exemple, si vous ne spécifiez pas de préfixe source et que la clé de l'objet est srcbucket/example.jpg, et que vous définissez le préfixe de destination sur destbucket/, la clé de l'objet après la migration devient destbucket/srcbucket/example.jpg.
   Tunnel	Non	Sélectionnez le nom du canal à utiliser. Important Ce paramètre est requis uniquement lors de la migration de données via une connexion Express Connect ou VPN, ou lors de la migration de données depuis un système de stockage autogéré. Vous devez associer un agent si la destination est un système de fichiers local ou si la migration utilise une connexion dédiée, par exemple vers un environnement Financial Cloud ou Apsara Stack.
   Agent	Non	Sélectionnez le nom de l'agent à utiliser. Important Ce paramètre est requis uniquement lors de la migration de données via une connexion Express Connect ou VPN, ou lors de la migration de données depuis un système de stockage autogéré. Vous pouvez sélectionner un maximum de 200 agents pour un canal spécifié.

Étape 3 : Créer une adresse de destination

1. Dans le volet de navigation de gauche, choisissez Data Online Migration > Address Management, puis cliquez sur Create Address.

2. Dans le panneau Create Address, configurez les paramètres suivants et cliquez sur OK.

Paramètre	Obligatoire	Description
Name	Oui	Saisissez un nom pour l'adresse de destination. Le nom doit répondre aux exigences suivantes : Le nom doit comporter entre 3 et 63 caractères. Le nom peut contenir des lettres minuscules, des chiffres, des traits d'union (-) et des underscores (_). La casse est prise en compte. Le nom ne peut pas commencer par un trait d'union (-) ou un underscore (_).
Type	Oui	Sélectionnez OSS.
Nom de domaine personnalisé	Non	Le nom de domaine personnalisé utilisé pour accéder au bucket.
Region	Oui	Sélectionnez la région où se trouve le bucket de destination, par exemple China (Hangzhou).
Rôle	Oui	Si le bucket de destination appartient à votre compte Alibaba Cloud actuel : Autoriser la console Online Migration Service (recommandé). Autoriser manuellement la console Online Migration Service (alternative). Si le bucket de destination appartient à un autre compte Alibaba Cloud : Autoriser dans la console OSS.
Bucket	Oui	Le nom du bucket de destination.
Prefix	Non	Spécifiez un répertoire (préfixe) dans lequel placer les objets migrés dans le bucket de destination. Le préfixe ne peut pas commencer par une barre oblique (/) et doit se terminer par une barre oblique, par exemple data/to/oss/. Si vous spécifiez un préfixe : par exemple, si un objet nommé example.jpg se trouve dans le chemin source example/src/ et que vous définissez le préfixe de destination sur example/dest/, le chemin complet de l'objet dans la destination devient example/dest/example.jpg. Si ce paramètre est laissé vide, les données sont migrées vers la racine du bucket de destination.
Tunnel	Non	Sélectionnez le nom du canal à utiliser. Important Ce paramètre est requis uniquement lors de la migration de données via une connexion Express Connect ou VPN, ou lors de la migration de données depuis un système de stockage autogéré. Vous devez associer un agent si la destination est un système de fichiers local ou si la migration utilise une connexion dédiée, par exemple vers un environnement Financial Cloud ou Apsara Stack.
Agent	Non	Sélectionnez le nom de l'agent à utiliser. Important Ce paramètre est requis uniquement lors de la migration de données via une connexion Express Connect ou VPN, ou lors de la migration de données depuis un système de stockage autogéré. Vous pouvez sélectionner un maximum de 200 agents pour un canal donné.

Étape 4 : Créer une tâche de migration

1. Dans le volet de navigation de gauche, choisissez Data Online Migration > Migration Tasks, puis cliquez sur Create Task.

2. Sur la page Select Address, configurez les paramètres suivants, puis cliquez sur Next.

   Paramètre	Obligatoire	Description
   Name	Oui	Saisissez un nom pour la tâche de migration. Le nom doit répondre aux exigences suivantes : Le nom doit comporter entre 3 et 63 caractères. Le nom peut contenir des lettres minuscules, des chiffres, des traits d'union (-) et des traits de soulignement (_). Le nom est sensible à la casse. Le nom ne peut pas commencer par un trait d'union (-) ou un trait de soulignement (_).
   Source Address	Oui	Sélectionnez une adresse source existante.
   Destination Address	Oui	Sélectionnez une adresse de destination existante.

3. Sur la page Task Configurations, configurez les paramètres suivants.

   Paramètre	Obligatoire	Description
   Paramètres de base
   Migration Bandwidth	Non	Sélectionnez la bande passante de migration. Default : bande passante maximale disponible. La vitesse réelle dépend de la taille des fichiers et du nombre de fichiers. Specify an upper limit : spécifiez une limite maximale de bande passante. Important La bande passante de migration effective dépend de facteurs tels que la source de données, les conditions réseau, la limitation côté destination et la taille des fichiers ; elle peut ne pas atteindre la limite supérieure spécifiée. Choisissez une valeur en fonction de votre source de données, de la destination, des exigences métier et de la bande passante réseau. Une limitation inappropriée peut perturber vos opérations métier.
   Files Migrated Per Second	Non	Sélectionnez le nombre de fichiers migrés par seconde. Default : utilise le débit par défaut pour les fichiers migrés par seconde. Specify an upper limit : spécifiez un nombre maximal de fichiers migrés par seconde. Important Le nombre effectif de fichiers migrés par seconde est influencé par des facteurs tels que la source de données, les conditions réseau, la limitation côté destination et la taille des fichiers ; il peut ne pas atteindre la limite supérieure spécifiée. Choisissez une valeur en fonction de votre source de données, de la destination, des exigences métier et de la bande passante réseau. Une limitation inappropriée peut perturber vos opérations métier.
   Overwrite Mode	Oui	Indique comment gérer les fichiers portant le même nom. Do not overwrite : ignore le fichier. Overwrite All : le fichier source écrase le fichier de destination. Overwrite based on the last modification time : Si l'heure de dernière modification du fichier source est plus récente que celle du fichier de destination, le fichier de destination est écrasé. Si les heures de dernière modification des fichiers source et de destination sont identiques, le fichier de destination est écrasé lorsque leur taille ou leur Content-Type diffère. Avertissement Avec la stratégie Overwrite based on the last modification time, un fichier plus ancien risque d'écraser un fichier plus récent, car cette stratégie ne garantit pas strictement la conservation des fichiers les plus récents. Si vous sélectionnez la stratégie Overwrite based on the last modification time, assurez-vous que les fichiers sources peuvent renvoyer des métadonnées telles que l'heure de dernière modification, la taille et le Content-Type. À défaut, la stratégie d'écrasement peut ne pas fonctionner comme prévu. Lorsque vous sélectionnez Ne pas écraser ou Écraser si l'heure de dernière modification est plus récente, le service envoie une requête à la source et une autre à la destination afin de récupérer les métadonnées nécessaires à la vérification d'écrasement. Cela entraîne des frais de requête tant au niveau de la source que de la destination.
   Paramètres d'audit
   Migration Report	Oui	Indique comment transmettre le rapport de migration. Do not push (par défaut) : ne transmet pas le rapport de migration vers le bucket de destination. Push : transmet le rapport de migration vers le bucket de destination. Pour plus de détails sur le chemin, consultez Étapes suivantes. Important La transmission du rapport de migration consomme de l'espace de stockage sur la destination. La transmission du rapport de migration peut être retardée. Chaque enregistrement d'exécution de tâche possède un ID unique. Le rapport de migration n'est transmis qu'une seule fois. Ne le supprimez pas sauf si cela est nécessaire.
   Migration Logs	Oui	Indique comment transmettre les journaux de migration. Do not push (par défaut) : ne transmet pas les journaux de migration. Push : transmet les journaux de migration vers Log Service (SLS). Vous pouvez consulter les journaux de migration dans SLS. Push only file error logs. : transmet uniquement les journaux d'erreur de fichier vers Log Service (SLS). Vous pouvez consulter ces journaux dans SLS. Lorsque vous sélectionnez Push ou Push only file error logs., Online Migration Service crée un projet dans Log Service (SLS) nommé aliyun-oss-import-log-<ID de compte Alibaba Cloud>-<région de déploiement actuelle>, par exemple aliyun-oss-import-log-137918634953****-cn-hangzhou. Important Avant de sélectionner Push ou Push only file error logs., assurez-vous d'avoir effectué les opérations suivantes. À défaut, la tâche de migration peut échouer. Vous avez activé Log Service (SLS). Vous avez accordé les permissions requises sur la page Authorize.
   Authorize	Non	Cette option s'affiche uniquement lorsque vous définissez Migration Logs sur Push ou Push only file error logs.. Cliquez sur Authorize pour accéder à la page Autorisation d'accès aux ressources cloud. Le système crée le rôle AliyunOSSImportSlsAuditRole et lui accorde les permissions nécessaires. Cliquez sur Accepter l'autorisation pour finaliser l'autorisation.
   Filtres
   File Name	Non	Filtre basé sur les noms de fichiers. Prend en charge les règles Include et Exclude à l'aide d'expressions réguliées basées sur la bibliothèque RE2 (seul un sous-ensemble de la syntaxe est pris en charge). Par exemple : .*\.jpg$ correspond à tous les fichiers se terminant par .jpg. ^file.* correspond par défaut à tous les fichiers à la racine commençant par file. Si vous définissez un préfixe pour l'adresse source, tel que data/to/oss/, vous devez utiliser ^data/to/oss/file.* pour correspondre à tous les fichiers commençant par file sous ce préfixe. ./picture/. correspond à tout sous-répertoire nommé picture. Important Lorsque vous utilisez une règle Inclure, tous les fichiers correspondants sont migrés. En présence de plusieurs règles Inclure, tout fichier correspondant à au moins une règle est migré. Par exemple, si vous disposez de deux fichiers, picture.jpg et picture.png, et que vous définissez une règle Inclure pour .\.jpg$, seul picture.jpg est migré. Si vous ajoutez également une règle Inclure pour .\.png$, les deux fichiers sont migrés. Lorsque vous utilisez une règle Exclure, aucun fichier correspondant n'est migré. En présence de plusieurs règles Exclure, tout fichier correspondant à au moins une règle n'est pas migré. Par exemple, si vous disposez de deux fichiers, picture.jpg et picture.png, et que vous définissez une règle Exclure pour .\.jpg$, seul picture.png est migré. Si vous ajoutez également une règle Exclure pour .\.png$, aucun des deux fichiers n'est migré. Les règles d'exclusion sont prioritaires. Si un fichier correspond à la fois à une règle d'exclusion et à une règle d'inclusion, le fichier n'est pas migré. Par exemple, pour un fichier nommé file.txt, si vous définissez une règle d'exclusion pour .\.txt$ et une règle d'inclusion pour file., le fichier file.txt n'est pas migré.
   File Modification Time	Non	Filtre les fichiers en fonction de leur heure de dernière modification. Vous pouvez spécifier une plage horaire afin de migrer uniquement les fichiers dont l'heure de dernière modification se situe dans cette plage. Les règles sont les suivantes : Si vous spécifiez uniquement une heure de début au 1er janvier 2019, la tâche migre uniquement les fichiers modifiés le ou après cette date. Si vous spécifiez uniquement une heure de fin au 1er janvier 2022, la tâche migre uniquement les fichiers modifiés le ou avant cette date. Si vous spécifiez une heure de début au 1er janvier 2019 et une heure de fin au 1er janvier 2022, la tâche migre uniquement les fichiers modifiés entre ces deux dates (incluses).
   Configuration de migration
   Conserver l'heure de dernière modification	Oui	Indique s'il faut conserver l'heure de dernière modification du fichier source. Conserver (par défaut) : le fichier de destination conserve l'heure de dernière modification du fichier source. Ne pas conserver : l'heure de dernière modification n'est pas définie.
   Convertir un objet ajoutable en objet normal/objet multipartie	Non	Indique s'il faut convertir les objets ajoutables en objets normaux ou en objets multiparties. Oui : convertit les objets ajoutables sources en objets normaux ou en objets multiparties sur la destination. Non : les objets ajoutables sources sont migrés vers la destination en tant qu'objets ajoutables. Important Cette option est visible et configurable uniquement si votre compte figure sur la liste d'autorisation. Cette option est actuellement prise en charge uniquement pour les tâches de migration OSS vers OSS.

   Spécifiez la classe de stockage de destination	Non	Indique si vous souhaitez définir la classe de stockage pour les fichiers de destination. Spécifier : Les fichiers migrés reçoivent la classe de stockage spécifiée à destination. Les classes de stockage suivantes sont disponibles : Standard Infrequent Access Archive Cold Archive Deep Cold Archive Ne pas spécifier (par défaut) : Les fichiers migrés à destination utilisent la classe de stockage par défaut du bucket de destination. Important Cette option n'est visible et configurable que si votre compte figure sur la liste d'autorisation. Cette option est actuellement prise en charge uniquement pour les tâches dont la destination est OSS.
   Planification des tâches
   Heure d'exécution	Non	Important Si une tâche de migration est toujours en cours d'exécution à sa prochaine heure d'exécution planifiée, cette exécution est reportée jusqu'à la prochaine heure planifiée après la fin de l'exécution en cours. Le processus se poursuit jusqu'à ce que le nombre d'exécutions spécifié soit atteint. Limite de concurrence pour les tâches de migration : les régions de déploiement en Chine continentale et en Chine (Hong Kong) prennent en charge un maximum de 10 tâches simultanées. Les régions hors de Chine prennent en charge un maximum de 5 tâches simultanées. Le dépassement de cette limite peut entraîner l'échec des tâches planifiées. Définit le moment d'exécution de la tâche de migration. Immediately : Exécute la tâche dès sa création. At the Specified Time : Spécifie une plage horaire quotidienne pour l'exécution de la tâche. Par défaut, la tâche démarre à l'heure de début spécifiée et s'interrompt à l'heure d'arrêt spécifiée. Periodic Scheduling : Exécute la tâche selon une fréquence et un nombre d'exécutions spécifiés. Fréquence d'exécution : Prend en charge cinq types de fréquences : Horaire, Quotidienne, Hebdomadaire, Jours spécifiques de la semaine et Personnalisée. Pour plus d'informations, consultez la référence sur la fréquence d'exécution. Nombre d'exécutions : Spécifie le nombre d'exécutions de la tâche. Si ce paramètre n'est pas défini, la tâche s'exécute une fois par défaut. Pour connaître le nombre maximal d'exécutions, reportez-vous aux indications de la console. Important Vous pouvez démarrer et arrêter manuellement les tâches à tout moment, indépendamment des paramètres d'heure d'exécution personnalisés.

4. Lisez l'Accord sur le service de migration en ligne, sélectionnez Je comprends et confirme la déclaration d'engagement de conformité et reconnais ma responsabilité de vérifier la cohérence des données une fois la tâche de migration terminée, puis cliquez sur Next.

5. Vérifiez vos paramètres de configuration. Si tout est correct, cliquez sur OK et attendez l'exécution de la tâche de migration.

Fréquence d'exécution

Étape 5 : Vérifier les données