Klaster cloud hibrida memperluas lingkungan komputasi kinerja tinggi (HPC) lokal Anda ke Alibaba Cloud, memungkinkan Anda menjalankan pekerjaan komputasi-intensif pada node cloud tanpa mengganti penjadwal atau pengaturan manajemen akun yang sudah ada. Node penjadwalan dan node akun domain tetap berada di pusat data Anda, sedangkan node komputasi berjalan baik secara lokal maupun di cloud.
Topik ini menjelaskan cara membuat klaster cloud hibrida di Elastic High Performance Computing (E-HPC) dan memperluas kapasitasnya dengan menambahkan node komputasi cloud.
Cara kerja
Klaster lokal Anda menangani penjadwalan pekerjaan seperti biasa. E-HPC menyediakan node komputasi cloud dan mendaftarkannya ke penjadwal yang sudah ada, sehingga pekerjaan mengalir secara transparan antara node lokal dan node cloud. Konektivitas jaringan antara pusat data Anda dan virtual private cloud (VPC)—yang disediakan oleh VPN Gateway, Cloud Enterprise Network (CEN), atau Express Connect—mengalirkan seluruh lalu lintas antara penjadwal dan node cloud.
Secara opsional, aktifkan Proxy Mode untuk men-deploy node proxy di cloud. Gunakan opsi ini ketika node komputasi cloud tidak dapat mengakses langsung node penjadwalan lokal Anda. Node proxy meneruskan komunikasi antara penjadwal dan sisi cloud.
Prasyarat
Sebelum memulai, pastikan Anda telah memiliki:
VPC dan vSwitch. Lihat Create and manage a VPC dan Create and manage a vSwitch.
Peran terkait layanan untuk E-HPC. Saat pertama kali login ke konsol E-HPC, Anda akan diminta membuat peran ini.
Konektivitas jaringan antara pusat data Anda dan Alibaba Cloud, melalui salah satu: VPN Gateway, instans CEN, atau sirkuit Express Connect. Lihat Create a CEN instance, Create a VPN gateway, dan What is a connection over an Express Connect circuit?.
Persyaratan klaster lokal
Node manajemen klaster lokal Anda harus memenuhi persyaratan berikut:
Sistem operasi: CentOS 7.2, 7.3, 7.4, 7.5, 7.6, atau 8.0
Scheduler: Deadline, Portable Batch System (PBS) 18.1.1, Open Grid Scheduler (SGE), atau penjadwal kustom
Jika klaster Anda menggunakan PBS atau SGE, sistem operasinya harus CentOS 7.x.
Manajemen akun: Layanan manajemen akun kustom
Langkah 1: Buat klaster cloud hibrida
Login ke konsol E-HPC.
Di bilah navigasi atas, pilih wilayah.
Klik Cluster di bilah navigasi atas.
Di halaman Cluster, klik Create Hybrid Cluster.
Konfigurasikan pengaturan perangkat keras.
Tetapkan parameter dasar:
Parameter Deskripsi Availability Zone Zona ketersediaan tempat node komputasi cloud disediakan. Pricing Model Metode penagihan untuk node komputasi cloud. Tidak berlaku untuk elastic IP addresses (EIPs) atau sistem file Penyimpanan File NAS. Opsi: Subscription (mingguan, bulanan, atau tahunan), Pay-As-You-Go (ditagih per jam), atau Preemptible Instance (biaya lebih rendah, harga berfluktuasi sesuai permintaan dan pasokan, ditagih berdasarkan durasi penggunaan). Lihat ECS billing method overview. Compute Node Tipe instans untuk node komputasi cloud. Kinerja keseluruhan klaster bergantung pada pengaturan ini. Proxy Mode Jika diaktifkan, node proxy dibuat di cloud untuk meneruskan komunikasi antara penjadwal lokal dan node komputasi cloud. Aktifkan opsi ini jika node cloud tidak dapat mengakses langsung node penjadwalan Anda. Proxy Node Tipe instans untuk node proxy. Diperlukan saat Proxy Mode diaktifkan. Buka Advanced Configurations dan atur parameter jaringan serta penyimpanan:
Kategori Parameter Deskripsi Network configuration VPC dan vSwitch VPC dan vSwitch tempat kluster berada. VPC dan vSwitch pertama dalam setiap daftar dipilih secara default. Pastikan vSwitch memiliki alamat IP yang tersedia cukup untuk semua node kluster. Anda dapat mengklik Create VPC dan Create vSwitch (for subnet) untuk membuat VPC dan vSwitch. Lihat Create and manage a VPC dan Create and manage a vSwitch. Create Security Group dan Security Group Name Security group dibuat secara otomatis dan tidak dapat dinonaktifkan. Masukkan nama untuk security group baru. Storage Storage Path Cara storage dipasang pada node komputasi cloud. Opsi: Do Not Mount File System, Use On-premises File System, atau Use Cloud File System. Local Cluster Storage Mount Point Jalur penyimpanan on-premises (untuk sistem file on-premises). Mount Path Jalur pada node cloud tempat storage dipasang (untuk sistem file on-premises). Local Path Jalur on-premises yang akan dipasang ke dalam kluster (untuk sistem file on-premises). Configure by Directory Apakah akan memasang sistem file berbeda untuk setiap folder (untuk sistem file cloud). Type Jenis sistem file cloud. File System ID dan Mount Point Sistem file dan titik pemasangan yang akan digunakan. Item pertama dalam setiap daftar dipilih secara default. Klik Create a file system atau Create mount point untuk membuat yang baru. Lihat Create a file system dan Manage mount targets. Mount Configurations Untuk sistem file NAS tujuan umum, pilih protokol pemasangan: Mount over NFSv3 atau Mount over NFSv4. Remote Directory Direktori remote dari sistem file yang akan dipasang.
Klik Next.
Konfigurasikan pengaturan klaster lokal:
Parameter Deskripsi Image Type dan Image Tipe image dan image yang digunakan untuk menyiapkan lingkungan node komputasi cloud. Scheduler Tipe penjadwal yang digunakan oleh klaster lokal Anda. Scheduler Node IP Address Alamat IP node penjadwalan di klaster lokal Anda. Scheduling Node Hostname Hostname node penjadwalan di klaster lokal Anda. Account System Layanan akun domain dari node penjadwalan di klaster lokal Anda. Local Cluster Domain Name Nama domain klaster lokal Anda. Account Node IP Address Alamat IP node akun domain di klaster lokal Anda. Account Node Hostname Hostname node akun domain di klaster lokal Anda. Klik Next.
Konfigurasikan pengaturan dasar klaster:
Parameter Deskripsi Cluster Name Nama yang ditampilkan di halaman Cluster. Logon Password Kata sandi untuk akses SSH ke node logon klaster. Username-nya adalah root. Jika Proxy Mode diaktifkan, masukkan kata sandi root klaster lokal Anda. Repeat Password Konfirmasi kata sandi. Di bagian Configuration List, tinjau semua pengaturan. Baca dan terima Alibaba Cloud International Website Product Terms of Service, lalu klik OK.
Verifikasi: Di halaman Cluster, tunggu hingga status klaster berubah menjadi Running. Hal ini menunjukkan bahwa klaster berhasil dibuat.
Langkah 2: Perluas kapasitas klaster cloud hibrida
Klaster cloud hibrida yang baru dibuat belum memiliki node komputasi. Perluas kapasitasnya untuk menambahkan node komputasi cloud.
Sebelum memperluas kapasitas, siapkan custom image yang telah terinstal penjadwal Anda. Untuk penjadwal Deadline atau penjadwal kustom, image tersebut harus mencakup perangkat lunak penjadwal. Lihat Create a custom image from an instance.
Di halaman Cluster, temukan klaster Anda dan klik Resize.
Di panel Resize, lengkapi konfigurasi dasar. Untuk detail parameter, lihat Manually scale out a cluster. Atur hal berikut:
Image Type: Pilih Custom Image.
Image: Pilih custom image yang telah Anda siapkan.
Tinjau pengaturan. Baca dan terima Alibaba Cloud International Website Product Terms of Service, lalu klik Buy Now.
Verifikasi: Di panel navigasi kiri, pilih Resource Management > Nodes. Pilih klaster Anda dari daftar drop-down Cluster dan pilih Compute Node dari daftar drop-down Node Type. Ketika semua node menampilkan status Running, proses skala keluar selesai.