Cloud Parallel File Storage:Memasang sistem file CPFS dengan client CPFS-POSIX pada Alibaba Cloud Linux

Latar Belakang

• Instans ECS target yang disebutkan dalam topik ini mengacu pada node komputasi yang memasang dan mengakses sistem file CPFS.

• Cloud Parallel File Storage (CPFS) kompatibel dengan antarmuka POSIX. Anda dapat menggunakan CPFS dengan menginstal client CPFS-POSIX dan memasang sistem file tersebut. Client CPFS-POSIX menyediakan layanan khusus dan mendukung instalasi pada Alibaba Cloud Linux 2. Jika Anda ingin mengakses sistem file CPFS menggunakan protokol NFS, lihat Memasang sistem file menggunakan client CPFS-NFS.

• Setelah Anda menambahkan titik pemasangan POSIX, CPFS secara otomatis membuat tiga instans ECS node manajemen: <FSID>-<GENID>-qr-001, <FSID>-<GENID>-qr-002, dan <FSID>-<GENID>-qr-003. Instans ECS node manajemen pertama (<FSID>-<GENID>-qr-001) dalam daftar merupakan node instalasi client CPFS-POSIX default.

Prasyarat

• Sistem file telah dibuat. Untuk informasi selengkapnya, lihat Membuat sistem file.

• Titik pemasangan POSIX telah ditambahkan. Untuk informasi selengkapnya, lihat Menambahkan titik pemasangan POSIX.

• Satu atau beberapa instans ECS Alibaba Cloud Linux 2 telah dibuat, dengan spesifikasi instans sebagai berikut.

  • Versi: Alibaba Cloud Linux 2.1903 LTS 64-bit

  • Versi kernel: 4.19.91-27.4.al7.x86_64 atau lebih lama.

    Anda dapat menjalankan perintah uname -r untuk memeriksa versi kernel.

Langkah 1: Konfigurasikan grup keamanan untuk instans ECS target

Sebelum memasang sistem file ke instans ECS yang dibuat dalam prasyarat, Anda harus menambahkan grup keamanan dari instans ECS node manajemen CPFS-POSIX ke instans ECS target. Hal ini mencegah kegagalan koneksi jarak jauh dan transmisi data antara instans ECS target dan kluster CPFS.

1. Dapatkan ID grup keamanan dari node kontrol CPFS-POSIX.

   1. Login ke Konsol NAS.

   2. Pada panel navigasi kiri, pilih File Systems > File System List.

   3. Di pojok kiri atas halaman, pilih kelompok sumber daya dan wilayah sistem file target.

      

   4. Klik sistem file target. Pada halaman detail, klik Mount Targets.

   5. Pada bagian Client Management node, klik instans ECS pertama dalam daftar untuk membuka halaman detail instans.

   6. Pada halaman Instance Details, klik tab Security Groups dan catat Security Group ID/Name dari node kontrol.

      Nama grup keamanan node kontrol mengikuti format: <FSID>-<GENID>-qr-sg.

      Dalam format ini, <FSID> adalah ID sistem file CPFS dan <GENID> adalah nomor urut titik pemasangan, yang bertambah setiap kali titik pemasangan CPFS dibuat.

2. Tambahkan grup keamanan node kontrol ke instans ECS target.

   1. Pada panel navigasi kiri, pilih Instances & Images > Instances.

   2. Pada halaman Instance List, klik ID instans ECS yang akan dipasang, pilih tab Security Groups, lalu klik Change Security Group.

   3. Pada kotak dialog Change Security Group, pilih grup keamanan node kontrol (<FSID>-<GENID>-qr-sg) yang dicatat di Langkah 1 dari daftar drop-down Security Groups, lalu klik OK.

Langkah 2: Instal client CPFS-POSIX

1. Login ke Konsol NAS.

2. Pada panel navigasi kiri, pilih File System > File System List.

3. Di pojok kiri atas halaman, pilih kelompok sumber daya dan wilayah tempat sistem file target berada.

   Untuk mengganti kelompok sumber daya, gunakan daftar drop-down All Resources di bilah navigasi atas.

4. Klik sistem file target untuk membuka halaman detail sistem file, lalu klik Mount Targets.

5. Pada bagian Client Management node, klik instans ECS node manajemen pertama dalam daftar untuk membuka halaman detail instans tersebut.

6. Klik Connect untuk login ke node instalasi client CPFS-POSIX.

7. Konfigurasikan login tanpa password antara node manajemen dan instans ECS target.

   Catatan

   Sebelum mengonfigurasi login tanpa password antara node manajemen CPFS dan beberapa instans ECS, kami menyarankan agar Anda mengatur kata sandi logon instans ECS target menjadi kata sandi yang sama. Jika tidak, Anda harus membuat file client.list beberapa kali dan mengulangi Langkah 10 hingga 12.

   1. Buat file client.list dan tambahkan alamat IP pribadi instans ECS target.

      1. Buat file client.list

         touch client.list

      2. Jalankan perintah vi client.list untuk membuka file client.list dan tambahkan alamat IP pribadi instans ECS target.

         <Private IP address of target ECS instance 1> 
         <Private IP address of target ECS instance 2>
         <Private IP address of target ECS instance 3>

         Contoh:

         192.168.1.249
         192.168.1.250
         192.168.1.251

         Catatan

         Anda dapat menambahkan satu atau beberapa instans ECS. Saat menambahkan beberapa instans ECS, masukkan alamat IP pribadi instans ECS target pada baris terpisah.

      3. Simpan dan keluar.

   2. Buat file qr.list dan tambahkan alamat IP node manajemen.

      1. Buat file qr.list

         touch qr.list

      2. Jalankan perintah vi qr.list untuk membuka file qr.list dan tambahkan alamat IP node manajemen. Contoh isi file sebagai berikut:

         10.0.2.41
         10.0.2.42
         10.0.2.43

         Bagian Client Management node mencantumkan alamat IP node manajemen client CPFS-POSIX.

      3. Simpan dan keluar.

   3. Konfigurasikan skrip auto_ssh.sh.

      1. Buat file auto_ssh.sh.

         touch auto_ssh.sh

      2. Jalankan perintah vi auto_ssh.sh untuk membuka file auto_ssh.sh dan tambahkan konten berikut.

         #!/usr/bin/expect
         set timeout 10
         set username [lindex $argv 0]
         set password [lindex $argv 1]
         set hostname [lindex $argv 2]
         spawn ssh-copy-id -i /root/.ssh/id_rsa.pub $username@$hostname
         expect {
             #first connect, no public key in ~/.ssh/known_hosts
             "Are you sure you want to continue connecting (yes/no)?" {
                 send "yes\r"
                 expect "password:"
                 send "$password\r"
             }
             #already has public key in ~/.ssh/known_hosts
             "password:" {
                 send "$password\r"
             }
             "Now try logging into the machine" {
                 #it has authorized, do nothing!
             }
             "already exist on the remote" {
                 #it has authorized, do nothing!
             }
         }
         expect eof
         

      3. Simpan dan keluar.

8. Jalankan perintah berikut untuk memberikan izin eksekusi kepada pengguna pada file auto_ssh.sh.

   chmod +x auto_ssh.sh

9. Jalankan perintah berikut untuk mencatat PASSWD instans ECS target dalam client.list.

   PASSWD='yourpassword'

   Catatan

   Jika PASSWD instans ECS target berbeda-beda, Anda harus membuat file client.list beberapa kali dan mengulangi Langkah 8 hingga 10.

10. Jalankan perintah berikut untuk mengonfigurasi login tanpa password untuk node manajemen.

    cat client.list | xargs -I {} ./auto_ssh.sh root $PASSWD {}

11. Jalankan perintah berikut untuk menginstal client CPFS secara jarak jauh pada instans ECS yang tercatat dalam client.list. Instalasi berhasil jika respons berupa Complete！.

    region_id=`curl http://100.100.100.200/latest/meta-data/region-id`;
    wget https://cpfs-${region_id}-pre.oss-${region_id}-internal.aliyuncs.com/cpfs/CPFS2.3.4-CentOS.tar.gz -O /root/CPFS2.3.4-CentOS.tar.gz;
    cat client.list | xargs -I {} scp /root/CPFS2.3.4-CentOS.tar.gz {}:/root/
    pssh -ih client.list "tar xzvf /root/CPFS2.3.4-CentOS.tar.gz"
    pssh -ih client.list "cd /root/CPFS2.3.4-CentOS/CentOS7;yum install -y gpfs.adv-*.x86_64.rpm gpfs.base-*.x86_64.rpm gpfs.docs-*.noarch.rpm gpfs.gpl-*.noarch.rpm gpfs.gskit-*.x86_64.rpm gpfs.gss.pmsensors-*.x86_64.rpm gpfs.license.dm-*.x86_64.rpm gpfs.msg.en_US-*.noarch.rpm"

12. Jalankan perintah berikut untuk mengompilasi ekstensi kernel secara jarak jauh pada instans ECS yang tercatat dalam client.list.

    pssh -ih client.list "/usr/bin/yum -y install cpp gcc-c++ elfutils-libelf-devel" 
    pssh -ih client.list "export LINUX_DISTRIBUTION=KERNEL_ORG_LINUX; /usr/lpp/mmfs/bin/mmbuildgpl"

    Untuk menggunakan kembali konfigurasi ini pada instans ECS tambahan, buat custom image dari instans yang telah dikonfigurasi. Untuk informasi selengkapnya tentang cara membuat custom image, lihat Custom images.

Langkah 3: Memasang sistem file

FAQ

• FAQ Akses Pemasangan

• FAQ Pemasangan dan Akses

• FAQ Pemasangan dan Akses

• FAQ Pemasangan dan Akses

• [Bagaimana cara menangani error "[ FATAL ] No GPFS admin node specified. specify an admin node using 'spectrumscale node add -a'." saat memasang sistem file CPFS?](t2092471.xdita#section_ho6_9ec_juh)

• FAQ Akses Pemasangan

• FAQ Akses Pemasangan

Untuk FAQ dan solusi lainnya terkait pemasangan CPFS, lihat FAQ Akses Pemasangan.

Referensi

• Mengelola dataflow

• Melihat detail pemantauan performa dan kapasitas CPFS

• Kontrol akses

• Melepas pemasangan sistem file