O DataWorks é uma plataforma unificada e de ponta a ponta para desenvolvimento e governança de big data, baseada em mecanismos de computação como o MaxCompute.
Contexto
Com o DataWorks, é possível associar mecanismos de computação a um workspace, o que permite criar e agendar tarefas de computação periodicamente. Conecte-se ao MaxCompute por meio do DataWorks das seguintes maneiras:
-
O recurso SQL Query no DataAnalysis:
Esse recurso permite escrever e editar consultas SQL do MaxCompute, consultar e analisar dados em uma planilha web, além de compartilhar ou baixar dados. Para obter mais informações sobre o recurso SQL Query, consulte SQL Query (Legacy).
-
O nó ODPS no Data Development:
O DataWorks fornece vários tipos de nó para diferentes tarefas dos mecanismos. Esses nós permitem definir jobs de desenvolvimento de dados e combiná-los com recursos e funções para criar fluxos de trabalho complexos. Os tipos de nó ODPS incluem ODPS SQL node, ODPS Spark node, PyODPS 2 node, PyODPS 3 node, ODPS Script node e ODPS MR node.
Casos de uso
Casos de uso para o DataAnalysis
Confira a seguir os casos de uso comuns do recurso SQL Query no DataAnalysis:
Use o recurso SQL Query para consultar dados e analisar os resultados em uma planilha web. Baixar os resultados da consulta para o seu computador reduz a transferência de dados e melhora a segurança.
Casos de uso para nós ODPS
Use o DataStudio no DataWorks para desenvolver jobs periódicos do MaxCompute. Configure propriedades, como ciclos de agendamento e dependências, e envie os jobs ao Operation Center para agendamento.
Procedimento
-
-
Associe um recurso de computação do MaxCompute ou crie uma fonte de dados do MaxCompute.
As etapas dependem de você ter optado pela pré-visualização pública do novo DataStudio ao criar o workspace.
Determine qual versão seu workspace usa na página Workspaces. Encontre o workspace de destino e clique em Shortcuts na coluna Actions.
Se você não optou por participar da pré-visualização pública do novo DataStudio
Se você optou por participar da pré-visualização pública do novo DataStudio
Na coluna Actions, clique em Shortcuts e selecione Data Development.
A página Data Development possui um painel de navegação à esquerda. O título da área de conteúdo principal é Data Development. A barra de ferramentas inclui os botões Refresh e + New. Abaixo da barra de ferramentas, há três abas: All, Owned by me e My Favorites, além de uma caixa de pesquisa. A árvore de diretórios contém os nós expansíveis Solutions e Business Flows.
Para obter mais informações sobre o DataStudio (Data Development), consulte Data Development (DataStudio) (Legacy).
Na coluna Actions, clique em Shortcuts e selecione Data Studio Public Preview.
Na página Data Development, o painel de navegação à esquerda mostra o módulo Data Development, que inclui os menus Project Directory e Personal Directory. O canto superior direito mostra o nome do workspace atual e um identificador Simple Mode. Por padrão, a área de conteúdo principal mostra a aba Welcome.
Para obter mais informações sobre a nova versão do DataStudio, consulte Data Development (Data Studio) (New).
Se você optou pela pré-visualização pública do novo DataStudio, associe um recurso de computação. Para obter mais informações, consulte Associate a computing resource.
-
Se você não optou pela pré-visualização pública do novo DataStudio, crie uma fonte de dados do MaxCompute e vincule-a ao módulo Data Development. Para obter mais informações, consulte Create a data source or register a cluster (for workspaces that have not joined the public preview).
NotaSe você apenas criar uma fonte de dados do MaxCompute, mas não vinculá-la ao DataStudio, só poderá sincronizar dados. Não será possível usar o MaxCompute para desenvolvimento de dados, agendamento de tarefas ou análise de dados.
-
Use o MaxCompute por meio do DataWorks.
-
DataAnalysis
Acesse o recurso SQL Query no DataAnalysis de uma das seguintes formas:
No painel de navegação à esquerda do console do MaxCompute, escolha Data Analytics > SQL Query para abrir a página SQL Query.
Na página inicial do DataAnalysis, clique em SQL Query na seção Shortcuts para abrir a página SQL Query.
No módulo DataAnalysis, clique em SQL Query no menu à esquerda para abrir a página SQL Query.
Para obter mais informações sobre como criar e executar uma consulta SQL, consulte SQL Query (Legacy).
-
Nó ODPS
Para obter mais informações sobre como criar um nó ODPS, consulte Overview of periodically scheduled jobs.
-