O DataWorks é uma plataforma unificada e completa para desenvolvimento e governança de big data, impulsionada por mecanismos de computação como o MaxCompute.
Contexto
Com o DataWorks, você pode associar mecanismos de computação a um workspace para criar e agendar periodicamente tarefas de computação. Conecte-se ao MaxCompute pelo DataWorks das seguintes formas:
-
Recurso SQL Query no DataAnalysis:
Esse recurso permite escrever e editar SQL do MaxCompute, consultar e analisar dados em uma planilha baseada na web, além de compartilhar ou baixar dados. Para obter mais informações sobre o recurso SQL Query, consulte SQL Query (Legacy).
-
Nó ODPS no Data Development:
O DataWorks oferece diversos tipos de nós para diferentes tarefas de mecanismo. Use esses nós para definir jobs de desenvolvimento de dados e combiná-los com recursos e funções na criação de fluxos de trabalho complexos. Os tipos de nó ODPS incluem ODPS SQL node, ODPS Spark node, PyODPS 2 node, PyODPS 3 node, ODPS Script node e ODPS MR node.
Casos de uso
Casos de uso do DataAnalysis
Veja a seguir os casos de uso comuns do recurso SQL Query no DataAnalysis:
Use o recurso SQL Query para consultar dados e analisar os resultados em uma planilha baseada na web. Baixe os resultados da consulta para o seu computador reduz a transferência de dados e melhora a segurança das informações.
Casos de uso de nós ODPS
Use o DataStudio no DataWorks para desenvolver jobs periódicos do MaxCompute. Configure propriedades como ciclos de agendamento e dependências e envie os jobs para o Operation Center para agendamento.
Procedimento
-
-
Associe um recurso de computação do MaxCompute ou crie uma fonte de dados do MaxCompute.
As etapas variam conforme a adesão à prévia pública do novo DataStudio durante a criação do workspace.
Verifique a versão do seu workspace na página Workspaces. Localize o workspace desejado e clique em Shortcuts na coluna Actions.
Se você não aderiu à prévia pública do novo DataStudio
Se você aderiu à prévia pública do novo DataStudio
Na coluna Actions, clique em Shortcuts e selecione Data Development.
A página Data Development possui um painel de navegação à esquerda. O título da área de conteúdo principal é Data Development. A barra de ferramentas inclui os botões Refresh e + New. Abaixo da barra de ferramentas, há três abas: All, Owned by me e My Favorites, além de uma caixa de pesquisa. A árvore de diretórios contém os nós expansíveis Solutions e Business Flows.
Para obter mais informações sobre o DataStudio (Data Development), consulte Data Development (DataStudio) (Legacy).
Na coluna Actions, clique em Shortcuts e selecione Data Studio Public Preview.
Na página Data Development, o painel de navegação à esquerda exibe o módulo Data Development, que inclui os menus Project Directory e Personal Directory. O canto superior direito mostra o nome do workspace atual e um identificador Simple Mode. Por padrão, a área de conteúdo principal exibe a aba Welcome.
Para obter mais informações sobre a nova versão do DataStudio, consulte Data Development (Data Studio) (New).
Caso tenha aderido à prévia pública do novo DataStudio, associe um recurso de computação. Para mais detalhes, consulte Associate a computing resource.
-
Se não tiver aderido à prévia pública do novo DataStudio, crie uma fonte de dados do MaxCompute e vincule-a ao módulo Data Development. Para mais detalhes, consulte Create a data source or register a cluster (for workspaces that have not joined the public preview).
NotaSe você criar apenas uma fonte de dados do MaxCompute sem vinculá-la ao DataStudio, somente a sincronização de dados estará disponível. Não será possível usar o MaxCompute para desenvolvimento de dados, agendamento de tarefas ou análise de dados.
-
Use o MaxCompute pelo DataWorks.
-
DataAnalysis
Acesse o recurso SQL Query no DataAnalysis de uma das seguintes maneiras:
No painel de navegação à esquerda do console do MaxCompute, escolha Data Analytics > SQL Query para abrir a página SQL Query.
Na página inicial do DataAnalysis, clique em SQL Query na seção Shortcuts para abrir a página SQL Query.
No módulo DataAnalysis, clique em SQL Query no menu à esquerda para abrir a página SQL Query.
Para obter mais informações sobre como criar e executar uma consulta SQL, consulte SQL Query (Legacy).
-
Nó ODPS
Para obter mais informações sobre como criar um nó ODPS, consulte Overview of periodically scheduled jobs.
-