Um dataflow permite a movimentação de dados entre um fileset do Cloud Parallel File Storage (CPFS) e um bucket do Object Storage Service (OSS). Antes de transferir dados entre um fileset e um bucket, crie o dataflow correspondente. Este tópico descreve como criar e gerenciar dataflows no console do CPFS.
Pré-requisitos
Você criou um fileset do CPFS e ele está no estado Normal. Para mais informações, consulte 管理Fileset.
O bucket do OSS de source recebeu uma tag (chave: cpfs-dataflow, valor: true). Não exclua nem modifique essa tag durante o uso do dataflow; caso contrário, o dataflow do CPFS não conseguirá acessar os dados no bucket. Para mais informações, consulte Tag an OSS bucket.
Se vários dataflows do CPFS, ou múltiplos dataflows do mesmo CPFS, utilizarem o mesmo bucket do OSS como armazenamento de source, ative o versionamento no bucket do OSS para evitar conflitos de dados quando vários dataflows exportarem dados para o mesmo local. Para mais informações, consulte Overview of versioning.
-
Para configure a atualização automática de metadados, verifique se o service EventBridge está ativado. Para mais informações, consulte Activate EventBridge and grant permissions.
NotaAtualmente, o recurso de atualização automática de metadados tem suporte apenas nas regiões China (Hangzhou), China (Chengdu), China (Shanghai), China (Shenzhen), China (Zhangjiakou) e China (Beijing).
Observações de uso
-
Faturamento
Após a criação de um dataflow, a cobrança ocorre com base na largura de banda dele. Para mais informações, consulte Billable items.
Ao configure a atualização automática, o CPFS utiliza o EventBridge para coletar eventos de modificação de objetos do armazenamento OSS de source, o que gera taxas de eventos. Para mais informações, consulte EventBridge billing.
-
Permissões
Durante a criação de um dataflow, o CPFS obtém as funções vinculadas ao service AliyunServiceRoleForNasOssDataflow e AliyunServiceRoleForNasEventNotification. Para mais informações, consulte Service-linked roles for CPFS.
Criar um dataflow
Faça login no console do NAS.
No painel de navegação à esquerda, escolha File System > File System List.
Na barra de navegação superior, selecione uma região.
Na página File System List, clique em nome do sistema de arquivos.
Na página de detalhes do sistema de arquivos, clique em Dataflow.
Na aba Dataflow, clique em Create Dataflow.
-
Na caixa de diálogo Create Dataflow, configure os seguintes parâmetros.
Parâmetro
Descrição
Fileset ID /Name
Selecione um fileset.
ImportanteA criação de um dataflow exige que o fileset esteja vazio. Certifique-se de que o fileset não contenha dados; caso contrário, a criação poderá falhar.
OSS Bucket Path
Selecione o bucket do OSS de source para associar ao fileset do CPFS.
OSS Bucket SSL
Especifique se deseja ativar a criptografia de transporte (HTTPS).
Automatic Metadata Update
Especifique se deseja ativar o recurso de atualização automática de metadados.
Metadata update interval (minutes)
Quando o recurso de atualização automática de metadados estiver ativado, especifique o intervalo de atualização dos metadados em minutos.
OSS Prefix
Com a ativação da atualização automática de metadados, especifique o diretório de atualização automática.
Limites:
O comprimento deve ser de 2 a 1024 caracteres.
O caminho deve começar e terminar com uma barra (/).
O caminho deve corresponder a um prefixo existente no bucket do OSS.
EventBridge Status
Status do service EventBridge.
A atualização automática depende do service EventBridge. Verifique se o service EventBridge está ativado.
Bandwidth (MB/s)
Largura de banda máxima de throughput do dataflow. Unidade: MB/s.
Valores válidos:
600
1200
1500
A largura de banda de throughput do dataflow não pode exceder a largura de banda de E/S do sistema de arquivos.
SLR Authorization
Autorize a função vinculada ao service que permite ao CPFS acessar recursos do OSS e do service EventBridge. Para mais informações, consulte Service-linked roles for CPFS.
Clique em OK.
Operações relacionadas
Use o console para visualize dataflows criados, modificar configurações, excluir ou interromper dataflows.
Operação | Descrição | Procedimento |
Visualizar um dataflow | Visualize os dataflows criados e crie tarefas em um dataflow específico. | Na aba Dataflow, visualize as informações de configuração de um dataflow específico. |
Modificar um dataflow | Modifique o intervalo de atualização de metadados, adicione diretórios de atualização automática de prefixo OSS e altere a largura de banda e a descrição de um dataflow. |
|
Interromper um dataflow | Após a interrupção de um dataflow, o faturamento cessa no próximo ciclo de cobrança. Importante Quando um dataflow é interrompido, a importação ou exportação de dados fica impossibilitada e as tarefas em execução são canceladas. |
|
Ativar um dataflow | Ative um dataflow que esteja no estado Stopped. |
|
Excluir um dataflow | Depois que um dataflow é excluído, todas as tarefas associadas a ele são removidas e a sincronização de dados deixa de ser possível. |
|