Object Storage Service:Integração com ecossistema de data lake

Tipo de ecossistema

Engine/Plataforma

Referências

Ecossistema open source

Flink

• Acessar o OSS com Flink

• Gravar dados com retomada no serviço OSS-HDFS com JindoSDK usando Flink

Flume

Gravar dados no serviço OSS-HDFS com JindoSDK usando Flume

Hadoop

Acessar o serviço OSS-HDFS com JindoSDK usando cluster Hadoop autogerenciado

HBase

• Salvar snapshots do HBase no OSS

• Utilizar o serviço OSS-HDFS como armazenamento subjacente do HBase

Hive

Processar dados no serviço OSS-HDFS com JindoSDK usando Hive

HDP

Ler e gravar dados no OSS com HDP 2.6 Hadoop

Impala

Consultar dados no serviço OSS-HDFS com JindoSDK usando Impala

Presto

Consultar dados no serviço OSS-HDFS com JindoSDK usando Trino

Spark

Consultar dados no serviço OSS-HDFS com JindoSDK usando Spark

Ecossistema da Alibaba Cloud

MaxCompute

Consultar e analisar dados do OSS com MaxCompute

SLS

Ingerir dados de log em data lake do OSS com SLS