DataWorks:SQL query and analysis (legacy)

Fontes de dados compatíveis

O recurso de consulta SQL é compatível com fontes de dados, incluindo MaxCompute, Hologres, EMR, CDH, StarRocks, ClickHouse, SelectDB, Doris, AnalyticDB for MySQL 3.0, AnalyticDB for PostgreSQL, Tablestore, MySQL, PostgreSQL, Oracle e SQL Server.

Permissões da fonte de dados

Acessar o recurso

Faça login na Análise de Dados do DataWorks, mude para a região desejada e clique em Enter Data Analysis.

• Se você vir Switch to New DataAnalysis na barra de navegação, significa que está na página legada de Análise de Dados.

• (Não recomendado) Caso veja Return to Legacy DataAnalysis na barra de navegação, clique nessa opção para retornar à página legada de Análise de Dados.

Etapa 1: Adicionar diretórios

Adicione tabelas de diretórios recomendados pelo sistema e de fontes de dados autorizadas ao seu diretório. Após adicionar um diretório, visualize rapidamente as tabelas nele contidas, verifique os esquemas das tabelas e gere consultas SQL.

1. Na página de análise SQL, clique no botão à direita da caixa de pesquisa acima do diretório para adicionar um diretório.

   • DataMap - Metadata: Metadados de tabelas coletados no Data Map. Cada fonte de dados ou recurso de computação pode ser adicionado como um conjunto de dados.

   • DataMap - Data Album: Coleções de Dados que agregam tabelas de tópicos específicos no Data Map. Cada Coleção de Dados pode ser adicionada como um conjunto de dados.

   • My Favorites: Tabelas marcadas como favoritas no Data Map.

   • My MaxCompute Tables: Todas as tabelas MaxCompute das quais a conta de login atual é proprietária.

   • Public Data: Conjuntos de dados públicos fornecidos pelo MaxCompute, úteis para gerar dados de teste rapidamente.
   Nota

   É permitido adicionar até 12 conjuntos de dados. Remova os conjuntos de dados desnecessários.

Etapa 2: Criar uma consulta SQL

Etapa 3: Configurar o mecanismo de consulta e executar a consulta

1. Clique no botão no canto superior direito da página de detalhes SQL para configurar o mecanismo de consulta SQL.

   Parâmetro	Descrição
   Workspace	O workspace onde reside o mecanismo de execução. Importante Certifique-se de ter permissões de acesso ao workspace. Caso contrário, entre em contato com o administrador do workspace para adicionar você como membro do workspace.
   Datasource Type	O tipo e o nome do mecanismo de execução. Importante Se nenhum projeto específico for especificado na instrução SQL, o mecanismo de execução servirá como fonte de dados padrão.
   Data Source Name
   Access Identity Mode	Selecione o modo de acesso para consultas SQL: Executor Identity: Compatível apenas com mecanismos MaxCompute e Hologres. Recomendado quando você é membro do projeto MaxCompute ou da instância Hologres e possui permissões SELECT. Data Source Default Access Identity: Se sua conta atual for diferente da identidade de acesso padrão configurada na criação da fonte de dados, conceda essa identidade à sua conta atual.

2. Após escrever a instrução SQL, execute todo o script diretamente ou selecione uma parte para execução parcial. Clique no ícone de seta para baixo ao lado do botão de execução para alternar o modo de execução. Escolha modos diferentes para cenários distintos.

   Antes da execução de uma instrução SQL do MaxCompute, o custo estimado é exibido. Também é possível clicar em More > Estimate Costs na barra de ferramentas acima do arquivo SQL para estimar o custo.

   Modo de execução	Cenário	Condição de acionamento	Mecanismos aplicáveis
   Modo de consulta (LIMIT 10000)	Visualizar dados rapidamente e verificar a lógica da consulta. Ideal para cenários onde se deseja ver apenas uma pequena amostra dos resultados para exploração preliminar de dados.	O resultado da consulta exibe ≤ 10.000 linhas e ≤ 10 MB.	Sem limite
   Modo de consulta (dados completos)	Obter o conjunto completo de resultados para análise ou exportação. Mude para este modo quando precisar processar e visualizar todos os dados.	O resultado da consulta exibe > 10.000 linhas ou > 10 MB.	MaxCompute, Hologres, StarRocks, ClickHouse, MySQL
   Modo de tabela temporária	Reutilizar resultados em consultas complexas de múltiplas etapas. Use a saída de uma consulta como entrada da próxima para melhorar a eficiência de desenvolvimento e depuração.	O resultado da consulta exibe ≤ 10.000 linhas e ≤ 10 MB, sendo gravado automaticamente em uma tabela temporária.	Apenas MaxCompute

3. Após a execução da instrução SQL, visualize o log de execução, os resultados e a instrução SQL correspondente na página de resultados da consulta.

   Use os botões no canto superior direito da área de resultados da consulta para alternar o layout da página entre lado a lado e cima-baixo.

Etapa 4: Visualizar resultados da consulta

Na barra de ferramentas à esquerda dos resultados da consulta, clique no botão para gerar gráficos visuais automaticamente a partir dos resultados.

Etapa 5: Exportar e compartilhar

Os resultados da consulta SQL podem ser exportados das seguintes formas:

• Arquivo local: Baixe os resultados da consulta para sua máquina local nos formatos CSV, TXT ou XLS. As principais informações são:

  Item	Descrição
  Limites de download	Somente os mecanismos MaxCompute e EMR são compatíveis. Para mais informações, consulte Limites de contagem de linhas de download. Se o projeto MaxCompute tiver restrições de download de dados ativado (download de dados proibido), o download via Análise de Dados falhará. Importante Se esta opção não aparecer, consulte as Perguntas frequentes para solução de problemas.
  Scope	Escolha entre baixar Only Data Displayed in Table ou All Data. Only Data Displayed in Table: Baixa apenas os dados exibidos na página atual, limitados a 10000 linhas por padrão. All Data: Exporta todos os dados resultantes da consulta dentro do limite de download.
  Método de download	Dois métodos de download são compatíveis: Download After Approval e Download Without Approval. Download após aprovação: Configure regras de identificação de riscos para identificar riscos nas operações de download de dados. Ao baixar dados, envie uma solicitação de aprovação de download para garantir conformidade e segurança. Nota Apenas a Enterprise Edition do DataWorks permite configurar e ativar regras de identificação de riscos. Download sem aprovação: Por padrão, os downloads não exigem aprovação. Nenhuma solicitação de permissão é necessária durante o processo.

• OSS: Exporte os resultados da consulta em um formato especificado (como CSV ou Parquet) para o Object Storage Service (OSS) da Alibaba Cloud. Esta opção é adequada para arquivar grandes volumes de dados ou integrar com outros serviços cloud.

  Ao usar este recurso pela primeira vez, autorize o DataWorks a acessar seus recursos OSS. Na lista suspensa File Path , clique no link Authorize no aviso e siga as instruções para concluir a autorização RAM.

  Parâmetro	Descrição
  File path	Clique no botão de pasta à direita para selecionar o bucket e o diretório OSS onde deseja armazenar o arquivo de resultado.
  File name	Um nome de arquivo é gerado automaticamente. Modifique-o manualmente se desejar.
  File type	Selecione o formato do arquivo de exportação. Os formatos compatíveis incluem csv, text, orc e parquet.
  Delimiter	Especifique o delimitador entre colunas. O delimitador padrão é a vírgula (,).
  Encoding	Selecione o formato de codificação do arquivo, como UTF-8 ou GBK.
  CU	Configure o número de unidades de computação (CUs) para esta tarefa de exportação. O valor padrão é 1 CU.
  Resource group	Selecione o grupo de recursos serverless para executar esta tarefa de exportação. Se nenhum grupo for selecionado, o grupo de recursos do Data Integration configurado em Data Analysis > System Management será usado por padrão.

  Após concluir a configuração, clique em OK para iniciar a tarefa de exportação. Acompanhe o progresso da exportação, o log de execução e os detalhes de configuração na página de execução da tarefa. Após o sucesso da tarefa, acesse o console OSS para baixar o arquivo exportado para sua máquina local.

• Tabela MaxCompute: Exporte os resultados da consulta diretamente para uma tabela MaxCompute, sem precisar baixar dados para sua máquina local primeiro. Defina o ciclo de vida da tabela conforme necessário.

  Esta opção está disponível apenas ao consultar conteúdo do mecanismo MaxCompute.

• Planilha: Salve os resultados em uma planilha para realizar análises de dados mais detalhadas posteriormente. Também é possível compartilhar os resultados mais recentes da análise com outras pessoas.

Mais operações

Perguntas frequentes