Cloud Parallel File Storage:Monte um sistema de arquivos CPFS com um cliente CPFS-POSIX no Alibaba Cloud Linux

Contexto

• As instâncias ECS de destino mencionadas neste tópico correspondem aos nós de computação que montam e acessam o sistema de arquivos CPFS.

• O Cloud Parallel File Storage (CPFS) é compatível com a interface POSIX. Para usar o CPFS, instale o cliente CPFS-POSIX e monte um sistema de arquivos. O cliente CPFS-POSIX oferece serviços personalizados e suporta instalação no Alibaba Cloud Linux 2. Para acessar o sistema de arquivos CPFS pelo protocolo NFS, consulte Mount a file system by using a CPFS-NFS client.

• Após adicionar um ponto de montagem POSIX, o CPFS cria automaticamente três instâncias ECS de nó de gerenciamento: <FSID>-<GENID>-qr-001, <FSID>-<GENID>-qr-002 e <FSID>-<GENID>-qr-003. A primeira instância ECS de nó de gerenciamento (<FSID>-<GENID>-qr-001) da lista é o nó de instalação padrão do cliente CPFS-POSIX.

Pré-requisitos

• Um sistema de arquivos foi criado. Para mais informações, consulte Create a file system.

• Um ponto de montagem POSIX foi adicionado. Para mais informações, consulte Add a POSIX mount target.

• Uma ou mais instâncias ECS com Alibaba Cloud Linux 2 foram criadas, com as seguintes especificações:

  • Versão: Alibaba Cloud Linux 2.1903 LTS 64-bit

  • Versão do kernel: 4.19.91-27.4.al7.x86_64 ou anterior.

    Execute o comando uname -r para verificar a versão do kernel.

Etapa 1: Configure o grupo de segurança das instâncias ECS de destino

Antes de montar um sistema de arquivos nas instâncias ECS criadas nos pré-requisitos, adicione o grupo de segurança das instâncias ECS de nó de gerenciamento do CPFS-POSIX às instâncias ECS de destino. Essa configuração evita falhas em conexões remotas e na transmissão de dados entre as instâncias ECS de destino e o cluster CPFS.

1. Obtenha o ID do grupo de segurança do nó de controle CPFS-POSIX.

   1. Faça login no NAS console.

   2. No painel de navegação à esquerda, escolha File Systems > File System List.

   3. No canto superior esquerdo da página, selecione o grupo de recursos e a região do sistema de arquivos de destino.

      

   4. Clique no sistema de arquivos de destino. Na página de detalhes, clique em Mount Targets.

   5. Na seção Client Management node, clique na primeira instância ECS da lista para acessar a página de detalhes da instância.

   6. Na página Instance Details, clique na aba Security Groups e anote o Security Group ID/Name do nó de controle.

      O nome do grupo de segurança do nó de controle segue o formato: <FSID>-<GENID>-qr-sg.

      Nesse formato, <FSID> é o ID do sistema de arquivos CPFS e <GENID> é o número de sequência do ponto de montagem, incrementado a cada novo ponto de montagem CPFS criado.

2. Adicione o grupo de segurança do nó de controle à instância ECS de destino.

   1. No painel de navegação à esquerda, escolha Instances & Images > Instances.

   2. Na página Instance List, clique no ID da instância ECS a ser montada, selecione a aba Security Groups e clique em Change Security Group.

   3. Na caixa de diálogo Change Security Group, selecione o grupo de segurança do nó de controle (<FSID>-<GENID>-qr-sg) registrado na Etapa 1 na lista suspensa Security Groups e clique em OK.

Etapa 2: Instale um cliente CPFS-POSIX

1. Faça login no NAS console.

2. No painel de navegação à esquerda, escolha File System > File System List.

3. No canto superior esquerdo da página, selecione o grupo de recursos e a região onde o sistema de arquivos de destino está localizado.

   Para alternar entre grupos de recursos, use a lista suspensa All Resources na barra de navegação superior.

4. Clique no sistema de arquivos de destino para acessar a página de detalhes e clique em Mount Targets.

5. Na seção Client Management node, clique na primeira instância ECS de nó de gerenciamento da lista para acessar a página de detalhes da instância.

6. Clique em Connect para fazer login no nó de instalação do cliente CPFS-POSIX.

7. Configure o login sem senha entre o nó de gerenciamento e as instâncias ECS de destino.

   Nota

   Antes de configurar o login sem senha entre os nós de gerenciamento CPFS e múltiplas instâncias ECS, recomendamos defina a mesma senha de login para todas as instâncias ECS de destino. Caso contrário, será necessário crie o arquivo client.list várias vezes e repetir as Etapas 10 a 12.

   1. Crie o arquivo client.list e adicione os endereços IP privados das instâncias ECS de destino.

      1. Crie o arquivo client.list

         touch client.list

      2. Execute o comando vi client.list para abrir o arquivo client.list e adicione os endereços IP privados das instâncias ECS de destino.

         <Private IP address of target ECS instance 1> 
         <Private IP address of target ECS instance 2>
         <Private IP address of target ECS instance 3>

         Exemplo:

         192.168.1.249
         192.168.1.250
         192.168.1.251

         Nota

         É possível adicionar uma ou mais instâncias ECS. Ao adicionar várias instâncias, insira os endereços IP privados em linhas separadas.

      3. Salve e saia.

   2. Crie o arquivo qr.list e adicione os endereços IP dos nós de gerenciamento.

      1. Crie o arquivo qr.list

         touch qr.list

      2. Execute o comando vi qr.list para abrir o arquivo qr.list e adicione os endereços IP dos nós de gerenciamento. O exemplo a seguir ilustra o conteúdo do arquivo:

         10.0.2.41
         10.0.2.42
         10.0.2.43

         A seção Client Management node lista os endereços IP dos nós de gerenciamento do cliente CPFS-POSIX.

      3. Salve e saia.

   3. Configure o script auto_ssh.sh.

      1. Crie o arquivo auto_ssh.sh.

         touch auto_ssh.sh

      2. Execute o comando vi auto_ssh.sh para abrir o arquivo auto_ssh.sh e adicione o seguinte conteúdo.

         #!/usr/bin/expect
         set timeout 10
         set username [lindex $argv 0]
         set password [lindex $argv 1]
         set hostname [lindex $argv 2]
         spawn ssh-copy-id -i /root/.ssh/id_rsa.pub $username@$hostname
         expect {
             #first connect, no public key in ~/.ssh/known_hosts
             "Are you sure you want to continue connecting (yes/no)?" {
                 send "yes\r"
                 expect "password:"
                 send "$password\r"
             }
             #already has public key in ~/.ssh/known_hosts
             "password:" {
                 send "$password\r"
             }
             "Now try logging into the machine" {
                 #it has authorized, do nothing!
             }
             "already exist on the remote" {
                 #it has authorized, do nothing!
             }
         }
         expect eof
         

      3. Salve e saia.

8. Execute o comando a seguir para conceder ao usuário a permissão de execução sobre o arquivo auto_ssh.sh.

   chmod +x auto_ssh.sh

9. Execute o comando a seguir para registrar o PASSWD das instâncias ECS de destino no client.list.

   PASSWD='yourpassword'

   Nota

   Se as instâncias ECS de destino tiverem senhas diferentes, será necessário crie o arquivo client.list várias vezes e repetir as Etapas 8 a 10.

10. Execute o comando a seguir para configure o login sem senha no nó de gerenciamento.

    cat client.list | xargs -I {} ./auto_ssh.sh root $PASSWD {}

11. Execute o comando a seguir para instale remotamente o cliente CPFS nas instâncias ECS registradas no client.list. A instalação é concluída com êxito quando Complete！ é retornado.

    region_id=`curl http://100.100.100.200/latest/meta-data/region-id`;
    wget https://cpfs-${region_id}-pre.oss-${region_id}-internal.aliyuncs.com/cpfs/CPFS2.3.4-CentOS.tar.gz -O /root/CPFS2.3.4-CentOS.tar.gz;
    cat client.list | xargs -I {} scp /root/CPFS2.3.4-CentOS.tar.gz {}:/root/
    pssh -ih client.list "tar xzvf /root/CPFS2.3.4-CentOS.tar.gz"
    pssh -ih client.list "cd /root/CPFS2.3.4-CentOS/CentOS7;yum install -y gpfs.adv-*.x86_64.rpm gpfs.base-*.x86_64.rpm gpfs.docs-*.noarch.rpm gpfs.gpl-*.noarch.rpm gpfs.gskit-*.x86_64.rpm gpfs.gss.pmsensors-*.x86_64.rpm gpfs.license.dm-*.x86_64.rpm gpfs.msg.en_US-*.noarch.rpm"

12. Execute o comando a seguir para compilar remotamente a extensão do kernel nas instâncias ECS registradas no client.list.

    pssh -ih client.list "/usr/bin/yum -y install cpp gcc-c++ elfutils-libelf-devel" 
    pssh -ih client.list "export LINUX_DISTRIBUTION=KERNEL_ORG_LINUX; /usr/lpp/mmfs/bin/mmbuildgpl"

    Para reutilizar essa configuração em instâncias ECS adicionais, crie uma imagem personalizada a partir de uma instância já configurada. Para mais informações sobre como criar uma imagem personalizada, consulte Custom images.

Etapa 3: Monte o sistema de arquivos

Perguntas frequentes

• What do I do if the "unsupported OS for 'X86_64' architecture" error is returned when I mount a CPFS file system?

• What do I do if the "make sure kernel-devel version is consistent with kernel" error is returned when I mount a CPFS file system?

• What do I do if the "ssh: connect to host A port 22: Connection timed out" error is returned when I mount a CPFS file system?

• What do I do if a YUM repository error occurs when I use the cpfs add command to mount a CPFS file system?

• [[How do I handle the error "[ FATAL ] No GPFS admin node especifique an admin node using 'spectrumscale node add -a'." when mounting a CPFS file system?](t2092471.xdita#section_ho6_9ec_juh)](t2092471.xdita#section_ho6_9ec_juh)

• How do I clean up residual configuration of an unmounted ECS instance?

• [What do I do if the "[FATAL] B: Could not connect to B via ssh" error is returned when I mount a CPFS file system?](t2092471.xdita#section_ox8_038_gzv)

Para mais perguntas frequentes e soluções sobre a montagem do CPFS, consulte Mount access FAQ.

Referências

• Create a dataflow

• View CPFS performance and capacity monitoring details

• Access control

• Unmount a file system