MaxCompute:OSS external tables

• Comment résoudre l'erreur « Inline data exceeds the maximum allowed size » lors du traitement des données OSS à l'aide d'une table externe ?

• Comment résoudre une erreur de dépassement de mémoire survenant après le chargement d'une UDF pour accéder à une table externe OSS sur MaxCompute, alors que la UDF a réussi les tests locaux ?

• Comment fusionner plusieurs petits fichiers en un seul fichier à l'aide d'une table externe OSS ?

• Comment résoudre l'erreur « Couldn't connect to server » lors de la lecture depuis une table externe OSS ?

• Comment résoudre l'erreur « Network is unreachable (connect failed) » lors de la création d'une table externe OSS ?

• Comment résoudre la lenteur d'exécution des tâches SQL sur une table externe OSS ?

• Comment résoudre le problème de suppression des anciennes données sans écriture des nouvelles lors de l'utilisation de la fonctionnalité de téléchargement multipartie OSS ?

• Solution pour l'erreur « table not found » lors de l'accès à une table externe OSS depuis Spark

• Erreur lors de la lecture ou de l'écriture dans des tables externes OSS : Failed to connect Http service: http://***.oss-cn-shanghai-internal.aliyuncs.com.***

• ODPS-0010000:System internal error

Comment résoudre l'erreur « Inline data exceeds the maximum allowed size » lors du traitement des données OSS à l'aide d'une table externe ?

• Problème

  Lors du traitement des données OSS, l'erreur Inline data exceeds the maximum allowed size est signalée.

• Cause

  OSS Store impose une limite de taille pour chaque petit fichier. Une erreur se produit si un fichier dépasse 3 Go.

• Solution

  Ajustez les deux propriétés suivantes pour contrôler la taille des données écrites par chaque réducteur dans la table externe, afin de maintenir les fichiers sous la limite de 3 Go.

  ODPS-0010000:System internal error - 
  ActionHandler job failed with failinfo	storage service worker error occured: 
  common/io/oss/oss_file_system_cppsdk.cpp(919): 
  OSSRequestException: Status: -50, RequestId: , 
  ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

Comment résoudre une erreur de dépassement de mémoire survenant après le chargement d'une UDF pour accéder à une table externe OSS sur MaxCompute, alors que la UDF a réussi les tests locaux ?

• Problème

  Lors de l'accès à une table externe OSS sur MaxCompute, une UDF ayant réussi les tests locaux renvoie l'erreur suivante après son chargement.

  ODPS-0010000:System internal error - 
  ActionHandler job failed with failinfo	storage service worker error occured: 
  common/io/oss/oss_file_system_cppsdk.cpp(919): 
  OSSRequestException: Status: -50, RequestId: , 
  ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

  Après avoir défini les paramètres suivants, le temps d'exécution augmente, mais l'erreur persiste.

  ODPS-0010000:System internal error - 
  ActionHandler job failed with failinfo	storage service worker error occured: 
  common/io/oss/oss_file_system_cppsdk.cpp(919): 
  OSSRequestException: Status: -50, RequestId: , 
  ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

• Cause

  La table externe contient trop de fichiers objets, ce qui entraîne une consommation excessive de mémoire, et aucune partition n'est configurée.

• Solution

  • Utilisez un volume de données plus réduit pour la requête.

  • Partitionnez les fichiers objets afin de réduire l'utilisation de la mémoire.

Comment fusionner plusieurs petits fichiers en un seul fichier à l'aide d'une table externe OSS ?

Consultez le journal Logview pour vérifier si la dernière étape du plan d'exécution SQL est un réducteur ou un joiner.

• S'il s'agit d'un réducteur, exécutez l'instruction set odps.stage.reducer.num=1;

• S'il s'agit d'un joiner, exécutez l'instruction set odps.stage.joiner.num=1;

Comment résoudre l'erreur « Couldn't connect to server » lors de la lecture depuis une table externe OSS ?

• Problème

  Lors de la lecture des données depuis une table externe OSS, l'erreur ODPS-0123131:User defined function exception - common/io/oss/oss_client.cpp(95): OSSRequestException: req_id: , http status code: -998, error code: HttpIoError, message: Couldn't connect to server est signalée.

• Cause

  • Cause 1 : Lors de la création de la table externe OSS, un endpoint public a été utilisé pour le paramètre oss_endpoint dans l'adresse oss_location, au lieu d'un endpoint interne.

  • Cause 2 : Lors de la création de la table externe OSS, l'endpoint d'une autre région a été utilisé pour le paramètre oss_endpoint dans l'adresse oss_location.

• Solution

  • Pour la cause 1

    Vérifiez que le paramètre oss_endpoint dans oss_location correspond à un endpoint interne. S'il s'agit d'un endpoint public, remplacez-le par un endpoint interne. Consultez la section Paramètres.

    Par exemple, si un utilisateur de la région Indonésie (Jakarta) a utilisé l'adresse oss://oss-ap-southeast-5.aliyuncs.com/<bucket>/.... pour créer une table externe, il doit la remplacer par l'adresse interne correspondante oss://oss-ap-southeast-5-internal.aliyuncs.com/<bucket>/.....

  • Pour la cause 2

    Vérifiez que le paramètre oss_endpoint dans oss_location correspond à la région que vous souhaitez atteindre. Les noms de domaine du réseau classique OSS sont répertoriés dans la section Régions et endpoints.

Comment résoudre l'erreur « Network is unreachable (connect failed) » lors de la création d'une table externe OSS ?

• Problème

  Lors de la création d'une table externe OSS, l'erreur ODPS-0130071:[1,1] Semantic analysis exception - external table checking failure, error message: Cannot connect to the endpoint 'oss-cn-beijing.aliyuncs.com': Connect to bucket.oss-cn-beijing.aliyuncs.com:80 [bucket.oss-cn-beijing.aliyuncs.com] failed: Network is unreachable (connect failed) est signalée.

• Cause

  Lors de la création de la table externe OSS, un endpoint public a été utilisé pour le paramètre oss_endpoint dans l'adresse oss_location, au lieu d'un endpoint interne.

• Solution

  Vérifiez que le paramètre oss_endpoint dans oss_location correspond à un endpoint interne. S'il s'agit d'un endpoint public, remplacez-le par un endpoint interne. Consultez la section Paramètres.

  Par exemple, si un utilisateur de la région Chine (Pékin) a utilisé l'adresse oss://oss-cn-beijing.aliyuncs.com/<bucket>/.... pour créer une table externe, il doit la remplacer par l'adresse interne correspondante oss://oss-cn-beijing-internal.aliyuncs.com/<bucket>/.....

Comment résoudre la lenteur d'exécution des tâches SQL sur une table externe OSS ?

• Lenteur de lecture des fichiers compressés GZ dans une table externe OSS

  • Symptômes

    Un utilisateur a créé une table externe OSS dont la source de données est un fichier compressé GZ de 200 Go stocké dans OSS. Le processus de lecture des données est lent.

  • Cause

    La vitesse de traitement SQL est faible car trop peu de mappeurs exécutent le calcul lors de l'étape map.

  • Solution

    • Pour les données structurées, vous pouvez définir le paramètre suivant afin d'ajuster la quantité de données lues par un seul mappeur et accélérer l'exécution SQL.

      ODPS-0010000:System internal error - 
      ActionHandler job failed with failinfo	storage service worker error occured: 
      common/io/oss/oss_file_system_cppsdk.cpp(919): 
      OSSRequestException: Status: -50, RequestId: , 
      ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

    • Pour les données non structurées, vérifiez s'il n'y a qu'un seul fichier OSS dans le chemin de la table externe OSS. Si c'est le cas, un seul mappeur peut être généré, car les données non structurées au format compressé ne peuvent pas être fractionnées. Cela entraîne une lenteur du traitement. Nous vous recommandons de diviser le grand fichier OSS en fichiers plus petits dans le chemin correspondant de la table externe sur OSS. Cette opération augmente le nombre de mappeurs générés lors de la lecture de la table externe et améliore la vitesse de lecture.

• Lenteur de recherche des données de table externe MaxCompute à l'aide d'un SDK

  • Symptômes

    La recherche des données de table externe MaxCompute à l'aide d'un SDK est lente.

  • Solution

    Les tables externes ne prennent en charge que les analyses complètes de table, ce qui est lent. Utilisez plutôt une table interne MaxCompute.

Comment résoudre le problème de suppression des anciennes données sans écriture des nouvelles lors de l'utilisation de la fonctionnalité de téléchargement multipartie OSS ?

• Problème

  Dans un scénario insert overwrite, si la tâche échoue dans des cas extrêmes, le résultat peut ne pas correspondre aux attentes. Les anciennes données sont supprimées, mais les nouvelles données ne sont pas écrites.

• Cause

  L'écriture des nouvelles données dans la table cible échoue en raison d'une panne matérielle ou d'un échec de mise à jour des métadonnées très improbable. L'opération de suppression dans OSS ne supporte pas le rollback, il est donc impossible de récupérer les anciennes données supprimées.

• Solution

  • Si vous écrasez une table externe OSS en vous basant sur ses anciennes données, par exemple insert overwrite table T select * from table T;, sauvegardez préalablement les données OSS. En cas d'échec de la tâche, vous pourrez ainsi écraser la table externe OSS à partir des anciennes données sauvegardées.

  • Si la tâche insert overwrite peut être resoumise, il suffit de la resoumettre en cas d'échec.

Solution pour l'erreur « table not found » lors de l'accès à une table externe OSS depuis Spark

• Problème

  Lors de l'utilisation de Spark pour accéder à une table externe OSS, la tâche échoue avec une erreur « table not found ».

• Solution

  • Ajoutez les paramètres suivants :

    • Activez la configuration des tables externes : spark.sql.catalog.odps.enableExternalTable=true ;

    • Configurez la région où se trouve OSS : spark.hadoop.odps.oss.region.default=cn-<region>

  • Si l'erreur persiste après l'ajout des paramètres ci-dessus :

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

    Recréez la table externe OSS, puis accédez-y à nouveau.

Erreur lors de la lecture ou de l'écriture dans des tables externes OSS : Failed to connect Http service: http://.oss-cn-shanghai-internal.aliyuncs.com.

• Détails de l'erreur

  Détails de l'erreur

  ODPS-0010000:System internal error - 
  ActionHandler job failed with failinfo	storage service worker error occured: 
  common/io/oss/oss_file_system_cppsdk.cpp(919): 
  OSSRequestException: Status: -50, RequestId: , 
  ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

• Causes et solutions

  1. Cause 1 : Vérifiez si la tâche de table externe utilise une UDF pour accéder à un endpoint interne OSS. Si c'est le cas, établissez la connectivité réseau en utilisant l'une des options suivantes. Sinon, les tâches peuvent échouer de manière intermittente.

     1. Option 1 (recommandée) : Utiliser une connexion réseau pour accéder aux ressources VPC.

     2. Option 2 : Ajouter les endpoints internes OSS à la liste d'autorisation.

  2. Cause 2 : Vérifiez si la table externe OSS appartient à l'un des types suivants. Si c'est le cas, établissez la connectivité réseau en utilisant une option indiquée pour la cause 1.

     Tables externes Lance, tables externes Hudi, tables externes Delta Lake ou tables externes utilisant un analyseur personnalisé.

  3. Cause 3 : Sur la page Json Summary dans Logview, vérifiez si le paramètre odps.isolation.session.enable est défini sur true. Si c'est le cas, établissez la connectivité réseau en utilisant une option indiquée pour la cause 1.

ODPS-0010000:System internal error

• Détails de l'erreur

  ODPS-0010000:System internal error - 
  ActionHandler job failed with failinfo	storage service worker error occured: 
  common/io/oss/oss_file_system_cppsdk.cpp(919): 
  OSSRequestException: Status: -50, RequestId: , 
  ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

• Cause

  Un endpoint OSS public a été utilisé lors de la création de la table externe OSS.

• Solution

  Lors de la création d'une table externe OSS, le paramètre location doit contenir un oss_endpoint interne. Pour obtenir l'endpoint, consultez la section Paramètres. Si l'erreur persiste après le passage à un endpoint interne, soumettez un ticket à l'équipe de support technique MaxCompute pour obtenir de l'aide.

Paramètres

Les paramètres suivants sont communs à tous les formats de tables externes. Pour les paramètres spécifiques à un format, consultez la documentation correspondante.

• Paramètres de syntaxe de base

  Paramètre	Obligatoire	Description
  mc_oss_extable_name	Oui	Nom de la table externe OSS à créer. Les noms de table ne sont pas sensibles à la casse et ne peuvent pas être convertis de force vers une casse spécifique.
  col_name	Oui	Nom d'une colonne dans la table externe OSS. Le schéma de la table externe doit correspondre au schéma du fichier de données OSS. Sinon, les données ne peuvent pas être lues.
  data_type	Oui	Type de données d'une colonne dans la table externe OSS. Le type de données de chaque colonne doit correspondre à la colonne correspondante dans le fichier de données OSS. Sinon, les données ne peuvent pas être lues.
  table_comment	Non	Commentaire associé à la table. Il doit s'agir d'une chaîne valide ne dépassant pas 1 024 octets, sous peine de générer une erreur.
  partitioned by (col_name data_type, ...)	Non	Si les fichiers de données dans OSS sont stockés dans un chemin partitionné, incluez ce paramètre pour créer une table partitionnée. col_name : nom de la colonne de clé de partition. data_type : type de données de la colonne de clé de partition.
  '<(tb)property_name>'='<(tb)property_value>'	Oui	Propriétés étendues de la table externe. Consultez la documentation spécifique au format pour plus de détails.
  oss_location	Oui	Chemin OSS où se trouvent les fichiers de données. Par défaut, tous les fichiers de données de ce chemin sont lus. Le format est oss://<oss_endpoint>/<Bucket name>/<OSS directory name>/. oss_endpoint : Nom de domaine OSS. Vous devez utiliser le point de terminaison du réseau classique fourni par OSS, qui contient -internal. Exemple : oss://oss-cn-beijing-internal.aliyuncs.com/xxx. Les noms de domaine du réseau classique OSS sont répertoriés dans Régions et points de terminaison. Assurez-vous que la région OSS où sont stockés les fichiers de données est identique à la région de votre projet MaxCompute. Si elles diffèrent, des problèmes de connectivité réseau peuvent survenir. Si vous ne spécifiez pas de point de terminaison, le système utilise celui de la région où se trouve le projet actuel. Cette méthode n'est pas recommandée, car le stockage de fichiers inter-régions peut entraîner des problèmes de connectivité réseau. Bucket name : nom du bucket OSS. Le nom du bucket doit suivre le oss_endpoint. Exemple : oss://oss-cn-beijing-internal.aliyuncs.com/your_bucket/path/. Consultez les noms des buckets dans Lister les buckets. Directory name : nom du répertoire OSS. Ne spécifiez pas de nom de fichier après le répertoire. Exemple : oss://oss-cn-beijing-internal.aliyuncs.com/oss-mc-test/Demo1/. Exemples incorrects : -- HTTP connections are not supported. http://oss-cn-shanghai-internal.aliyuncs.com/oss-mc-test/Demo1/ -- HTTPS connections are not supported. https://oss-cn-shanghai-internal.aliyuncs.com/oss-mc-test/Demo1/ -- Incorrect connection address. oss://oss-cn-shanghai-internal.aliyuncs.com/Demo1 -- Do not specify a file name. oss://oss-cn-shanghai-internal.aliyuncs.com/oss-mc-test/Demo1/vehicle.csv

• Attributs WITH serdeproperties

  property_name	Scénario	property_value	Valeur par défaut
  odps.properties.rolearn	Ajoutez cette propriété lors de l'utilisation de l'autorisation STS.	Spécifiez l'ARN du rôle RAM disposant des autorisations nécessaires pour accéder à OSS. Obtenez l'ARN à partir des détails du rôle dans la console RAM. Exemple : acs:ram::xxxxxx:role/<role_name>.	Si les propriétaires de MaxCompute et d'OSS sont le même compte : Si vous ne spécifiez pas odps.properties.rolearn dans l'instruction de création de table, l'ARN du rôle aliyunodpsdefaultrole est utilisé par défaut. Vous devez d'abord créer le rôle RAM en utilisant Autorisation STS. Le rôle AliyunODPSDefaultRole dispose d'autorisations étendues. Nous vous recommandons d'accorder les autorisations via un rôle personnalisé. Pour utiliser l'ARN d'un rôle personnalisé, créez d'abord le rôle personnalisé. Autorisation STS pour OSS (autorisation personnalisée). Si les propriétaires de MaxCompute et d'OSS sont des comptes différents, vous devez spécifier l'ARN d'un rôle personnalisé. Pour plus d'informations, consultez Autorisation STS pour OSS (autorisation personnalisée).

Listes d'autorisation et de blocage

Les tables externes MaxCompute OSS prennent en charge le filtrage via des listes d'autorisation (whitelist) et de blocage (blacklist). En définissant les paramètres appropriés dans tblproperties, vous pouvez filtrer les fichiers à lire depuis un répertoire.

• Paramètres tblproperties

  Détails des paramètres tblproperties

  property_name	Cas d'utilisation	Remarque	property_value	Valeur par défaut
  odps.external.data.file.whitelist.regex	Filtrage personnalisé via liste d'autorisation	Motif regex	Motif regex pour la correspondance des fichiers, par exemple '.*\\.json'	Aucune
  odps.external.data.file.blacklist.regex	Filtrage personnalisé via liste de blocage	Motif regex	Motif regex pour la correspondance des fichiers, par exemple '.*\\.txt'	Aucune
  odps.external.data.file.recursive.listing.enabled	Contrôle de la recherche récursive de fichiers		True False	True
  odps.sql.unstructured.file.pattern.black.list（ indicateur de session existant）	Filtrage via liste de blocage au niveau de la session	Motif regex	Motif regex pour la correspondance des fichiers, par exemple '.*\\.json'	Aucune

• Règles d'application

  • La liste de blocage est prioritaire sur la liste d'autorisation : si un fichier correspond à une condition de la liste de blocage, il est exclu.

  • L'indicateur de session et le paramètre de liste de blocage tblproperties fonctionnent selon une logique « OU ». Si les deux sont configurés, ils s'appliquent tous les deux : un fichier correspondant à l'une ou l'autre des conditions de blocage est exclu. La configuration via tblProperties est recommandée.

    Méthode de configuration	Type de chemin	Paramètre
    Indicateur de session	Chemin absolu	odps.sql.unstructured.file.pattern.black.list
    tblproperties	Chemin relatif	odps.external.data.file.blacklist.regex

• Remarques sur les expressions régulières (regex)

  • Les ancres de début de ligne ^ et de fin de ligne $ sont facultatives. Par exemple, pour cibler les fichiers .json, le motif .*\.json suffit.

  • Un seul motif regex est pris en charge. Pour exclure plusieurs types de fichiers, utilisez l'opérateur | :

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

• Mise à jour des paramètres de listes d'autorisation et de blocage

  ODPS-0010000:System internal error - 
  ActionHandler job failed with failinfo	storage service worker error occured: 
  common/io/oss/oss_file_system_cppsdk.cpp(919): 
  OSSRequestException: Status: -50, RequestId: , 
  ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

• Exemples

  • Données d'exemple

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

  • Liste d'autorisation : lecture exclusive des fichiers JSON

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

  • Liste de blocage : exclusion des fichiers txt, csv et parquet

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

  • Combinaison liste d'autorisation et de blocage : lecture des fichiers txt, exclusion du répertoire level2

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

  • Listage récursif : contrôle de la lecture des fichiers dans les sous-répertoires

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

  • Mise à jour des listes d'autorisation et de blocage via ALTER TABLE

    ODPS-0010000:System internal error - 
    ActionHandler job failed with failinfo	storage service worker error occured: 
    common/io/oss/oss_file_system_cppsdk.cpp(919): 
    OSSRequestException: Status: -50, RequestId: , 
    ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

Notes

• Une fois la table externe OSS créée, vous pouvez lire les données stockées dans OSS via cette table. Pour connaître les types de fichiers de données pris en charge ainsi que la syntaxe de création, consultez la section Syntaxe.

• Si une instruction SQL fait appel à des types de données complexes, ajoutez le préfixe set odps.sql.type.system.odps2=true; et soumettez l'ensemble simultanément. Consultez la rubrique Versions des types de données.

• Pour les tables externes OSS qui mappent des données open source, définissez set odps.sql.hive.compatible=true; au niveau de la session avant de lire les données depuis OSS. À défaut, une erreur sera générée.

• OSS impose des limites de bande passante. Si le trafic de lecture ou d'écriture dépasse brièvement la limite de bande passante de l'instance, les performances de la table externe se dégradent. Reportez-vous à la section Limites et métriques de performance.

Syntaxe

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

• select_statement : clause SELECT qui interroge les données à insérer dans la table cible depuis la table source.

• from_statement : clause FROM qui spécifie la source de données, par exemple le nom de la table externe.

Optimisation des requêtes

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

Syntaxe

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED

Pour insérer des données dans des partitions dynamiques, consultez la rubrique Insertion ou remplacement de données dans des partitions dynamiques .

Écriture de données dans OSS à l'aide de la fonctionnalité de téléchargement multipartie d'OSS

Pour écrire des données dans OSS au format open source, créez une table externe avec un analyseur de données open source et activez la fonctionnalité de téléchargement multipartie d'OSS.

Pour activer la fonctionnalité de téléchargement multipartie d'OSS, effectuez les réglages suivants :

setproject odps.sql.unstructured.oss.commit.mode =true;

set odps.sql.unstructured.oss.commit.mode =true;

La valeur par défaut de odps.sql.unstructured.oss.commit.mode est false. Les deux modes fonctionnent comme suit :

Gestion des fichiers exportés

Écriture de fichiers volumineux à l'aide de partitions dynamiques

ODPS-0010000:System internal error - 
ActionHandler job failed with failinfo	storage service worker error occured: 
common/io/oss/oss_file_system_cppsdk.cpp(919): 
OSSRequestException: Status: -50, RequestId: , 
ErrorCode: ClientError:-50, Message: E_HTTP_ERROR_CONN_REFUSED