O DataWorks permite configurar uma fonte de dados Apache Gravitino para conectar-se ao service unificado de gerenciamento de metadados do Gravitino, além de coletar e gerenciar metadados de várias fontes de dados heterogêneas. Como fonte de dados do tipo metadado, ela viabiliza a coleta e a governança de metadados no Data Map após a configuração. Este tópico descreve como configurar essa fonte de dados.
Visão geral
O Apache Gravitino é um framework open source unificado de gerenciamento de metadados que oferece suporte ao gerenciamento de metadados de fontes de dados heterogêneas, como Hive, Iceberg e JDBC. Com o Gravitino, as empresas alcançam o gerenciamento unificado de metadados entre engines e sistemas sem alterar a arquitetura existente de armazenamento de dados.
O DataWorks fornece a fonte de dados Apache Gravitino para integrar os metadados gerenciados pelo Gravitino ao Data Map do DataWorks. Isso possibilita a coleta, descoberta e governança de metadados para ativos de dados nos Catálogos do Gravitino, ajudando você a construir uma visão unificada dos seus ativos de dados.
Limites
Conectividade de rede: Apenas serverless resource groups são suportados.
Caso de uso: A fonte de dados Apache Gravitino aplica-se apenas à Collect Metadata e à governança. Ela não pode ser usada para tarefas de sincronização de integração de dados.
Requisitos de rede: O grupo de recursos do DataWorks precisa acessar o endpoint do service Gravitino. Garanta a conectividade de rede.
Procedimento
1. Acesse a página de fontes de dados
Faça logon no console do DataWorks. Mude para a região de destino, clique em Workspace no painel de navegação à esquerda e, em seguida, clique em Manage na coluna Actions do workspace desejado.
No Workspace Management Center, clique em Data Sources no painel de navegação à esquerda.
2. Crie uma fonte de dados Apache Gravitino
Na página Data Sources, clique em Add Data Source.
Na caixa de diálogo exibida, clique na aba Metadata, pesquise e selecione Apache Gravitino.
3. Configure os parâmetros
Configure os seguintes parâmetros conforme solicitado:
|
Parâmetro |
Descrição |
|
Data Source Name |
Nome personalizado da fonte de dados, por exemplo, |
|
Description |
Descrição da fonte de dados para fins de identificação. |
|
Configuration Mode |
Modo de configuração da fonte de dados. Atualmente, há suporte para Selection Mode, que permite preencher os itens de configuração por meio de formulário. |
|
Endpoint |
Endereço do service Gravitino, por exemplo, |
4. Teste a conectividade
Após configurar a fonte de dados, realize um teste de conectividade para garantir a comunicação normal de rede entre a fonte de dados e os grupos de recursos.
Se Connected for exibido, a configuração está correta.
Caso apareça Connection failed., o sistema disponibiliza uma ferramenta de diagnóstico para ajudar a solucionar o problema. Causas comuns incluem configurações incorretas de endpoint, falhas de rede (lista de permissões de IP não configurada) e ausência de gateways NAT.
No modo padrão, verifique se tanto os ambientes de desenvolvimento quanto os de produção exibem Connected. Caso contrário, ocorrerão erros durante a coleta subsequente de metadados.