O DataWorks é uma plataforma unificada e completa para desenvolvimento e governança de big data, impulsionada por mecanismos de computação como o MaxCompute.
Contexto
Com o DataWorks, você associa mecanismos de computação a um workspace para criar e agendar tarefas de computação periodicamente. Conecte-se ao MaxCompute pelo DataWorks das seguintes formas:
-
Recurso SQL Query no DataAnalysis:
Esse recurso permite escrever e edite SQL do MaxCompute, consultar e analisar dados em uma planilha web, além de compartilhar ou baixe dados. Para obter mais informações sobre o recurso SQL Query, consulte SQL Query (Legado).
-
Nó ODPS no Data Development:
O DataWorks oferece diversos tipos de nós para diferentes tarefas de mecanismo. Use esses nós para definir jobs de desenvolvimento de dados e combiná-los com recursos e funções na criação de fluxos de trabalho complexos. Os tipos de nó ODPS incluem nó ODPS SQL, nó ODPS Spark, nó PyODPS 2, nó PyODPS 3, nó ODPS Script e nó ODPS MR.
Casos de uso
Casos de uso do DataAnalysis
Veja a seguir cenários comuns para o recurso SQL Query no DataAnalysis:
Use o recurso SQL Query para consultar dados e analisar os resultados em uma planilha web. Baixe os resultados da consulta para o seu computador reduz a transferência de dados e aumenta a segurança das informações.
Casos de uso para nós ODPS
O DataStudio no DataWorks permite desenvolver jobs periódicos do MaxCompute. Configure propriedades como ciclos de agendamento e dependências e envie os jobs para o Operation Center para agendamento.
Procedimento
-
-
Associe um recurso de computação do MaxCompute ou crie uma fonte de dados do MaxCompute.
As etapas variam conforme a sua adesão à prévia pública do novo DataStudio durante a criação do workspace.
Verifique a versão do seu workspace na página Workspaces. Localize o workspace desejado e clique em Shortcuts na coluna Actions.
Se você não aderiu à prévia pública do novo DataStudio
Se você aderiu à prévia pública do novo DataStudio
Na coluna Actions, clique em Shortcuts e selecione Data Development.
A página Data Development possui um painel de navegação à esquerda. O título da área de conteúdo principal é Data Development. A barra de ferramentas inclui os botões Refresh e + New. Abaixo da barra de ferramentas, há três abas: All, Owned by me e My Favorites, além de uma caixa de pesquisa. A árvore de diretórios contém os nós expansíveis Solutions e Business Flows.
Para mais detalhes sobre o DataStudio (Data Development), consulte Data Development (DataStudio) (Legado).
Na coluna Actions, clique em Shortcuts e selecione Data Studio Public Preview.
Na página Data Development, o painel de navegação à esquerda exibe o módulo Data Development, que inclui os menus Project Directory e Personal Directory. No canto superior direito, aparecem o nome do workspace atual e um identificador Simple Mode. Por padrão, a área de conteúdo principal mostra a aba Welcome.
Para mais informações sobre a nova versão do DataStudio, consulte Data Development (Data Studio) (Novo).
Se tiver aderido à prévia pública do novo DataStudio, associe um recurso de computação. Para mais detalhes, consulte Associar um recurso de computação.
-
Se não tiver aderido à prévia pública do novo DataStudio, crie uma fonte de dados do MaxCompute e vincule-a ao módulo Data Development. Consulte Criar uma fonte de dados ou registrar um cluster (para workspaces que não participaram da prévia pública) para obter instruções.
NotaSe você criar apenas uma fonte de dados do MaxCompute sem vinculá-la ao DataStudio, somente a sincronização de dados estará disponível. Não será possível usar o MaxCompute para desenvolvimento de dados, agendamento de tarefas ou análise de dados.
-
Use o MaxCompute por meio do DataWorks.
-
DataAnalysis
Acesse o recurso SQL Query no DataAnalysis de uma das seguintes maneiras:
No painel de navegação à esquerda do console do MaxCompute, escolha Data Analytics > SQL Query para abrir a página SQL Query.
Na página inicial do DataAnalysis, clique em SQL Query na seção Shortcuts para abrir a página SQL Query.
No módulo DataAnalysis, clique em SQL Query no menu à esquerda para abrir a página SQL Query.
Para saber mais sobre como criar e execute uma consulta SQL, consulte SQL Query (Legado).
-
Nó ODPS
Para obter detalhes sobre a criação de um nó ODPS, consulte Visão geral de jobs agendados periodicamente.
-