A integração de dados do DataWorks sincroniza dados incrementais e completos do Tablestore para o MaxCompute.
Como funciona
A integração de dados do DataWorks executa sincronização de dados offline (em lote). Um túnel de dados offline define as fontes de dados e os conjuntos de dados de source e destino. Esse mecanismo usa plugins de extração (Readers) e de escrita (Writers) com um formato intermediário simplificado para transmitir dados entre fontes estruturadas e semiestruturadas.
Para sincronizar dados do Tablestore para o MaxCompute, configure os plugins Tablestore Reader e MaxCompute Writer em uma tarefa de sincronização offline.
-
Plugins Tablestore Reader
O plugin Tablestore Reader varia conforme o método de sincronização.
Método de sincronização
Plugin
Descrição
Exportação completa
Tablestore (OTS) Reader
Lê dados das tabelas do Tablestore. Especifique um intervalo de carimbo de data/hora para extrair dados incrementais. Para obter mais informações, consulte Fonte de dados do Tablestore.
Sincronização incremental
OTSStream Reader
Exporta dados incrementais das tabelas do Tablestore. Para obter mais informações, consulte Fonte de dados do Tablestore Stream.
-
Plugin MaxCompute Writer
O DataWorks usa o plugin MaxCompute Writer para gravar dados no MaxCompute tanto na exportação completa quanto na sincronização incremental. Para obter mais informações, consulte Fonte de dados do MaxCompute.
Métodos de sincronização
Para exportar todos os dados do Tablestore para o MaxCompute em uma única operação, seja para backup ou outras finalidades, consulte Exportar dados completos para o MaxCompute.