Topik ini menjelaskan cara membuat kluster StarRocks.
Prasyarat
Anda telah membuat VPC dan vSwitch di wilayah target. Untuk informasi selengkapnya, lihat Buat dan kelola VPC dan Buat dan kelola vSwitch.
Prosedur
Buka halaman pembuatan kluster.
Login ke Konsol E-MapReduce.
Opsional: Pada bilah navigasi atas, pilih wilayah dan, jika perlu, kelompok sumber daya.
Wilayah: Kluster dibuat di wilayah yang dipilih. Pengaturan ini tidak dapat diubah setelah pembuatan.
Kelompok sumber daya: Secara default, semua resource dalam akun Anda akan ditampilkan.
Di bagian atas halaman, klik CREATE_CLUSTER.
Konfigurasikan kluster.
Konfigurasikan pengaturan perangkat lunak, perangkat keras, dan dasar kluster.
PentingSetelah kluster dibuat, Anda hanya dapat mengubah namanya. Pastikan semua konfigurasi lain sudah benar sebelum melanjutkan.
Konfigurasikan pengaturan perangkat lunak.
Parameter
Contoh
Deskripsi
Region
China (Hangzhou)
Wilayah tempat kluster akan dibuat. Pengaturan ini tidak dapat diubah setelah pembuatan.
Business Scenario
Data Analytics
Pilih Data Analytics.
Product Version
EMR-5.19.0
Versi E-MapReduce. Versi terbaru dipilih secara default.
High Service Availability
Off
Jika diaktifkan, kluster menggunakan tiga node master untuk menyediakan ketersediaan tinggi bagi ResourceManager dan NameNode. Anda dapat menyesuaikan jumlah node.
Optional Services
StarRocks 3
Pilih komponen tambahan sesuai kebutuhan Anda. Untuk komponen yang dipilih, proses layanan terkait akan dimulai secara default.
Collect Service Operational Logs
On
Fitur ini diaktifkan secara default dan mengumpulkan log operasional dari semua layanan untuk keperluan diagnosis.
Setelah kluster dibuat, Anda dapat mengubah Collection Status of Service Operational Logs pada halaman Basic Information.
PentingJika Anda menonaktifkan pengumpulan log, pemeriksaan kesehatan dan dukungan teknis untuk E-MapReduce akan terbatas, tanpa memengaruhi fitur lainnya. Untuk informasi lebih lanjut tentang cara menonaktifkan fitur ini dan dampaknya, lihat Bagaimana cara menghentikan pengumpulan log layanan?.
StarRocks Architecture
Shared-nothing
Pengaturan ini hanya tersedia untuk StarRocks 3.x.
StarRocks mendukung arsitektur shared-nothing dan shared-data.
Shared-nothing (Default): Resource komputasi dan penyimpanan saling terikat erat, dan data disimpan langsung pada disk lokal node komputasi.
Arsitektur ini cocok untuk skenario Pemrosesan Analitik Online (OLAP) yang memerlukan pemrosesan real-time dan kueri cepat, seperti analitik data dan pembuatan laporan Business Intelligence (BI).
Shared-data architecture : Resource komputasi dan penyimpanan sepenuhnya terpisah. Node komputasi fokus pada eksekusi tugas kueri, sedangkan data disimpan dalam sistem penyimpanan terdistribusi eksternal. Hal ini meningkatkan fleksibilitas dan keandalan sistem.
Arsitektur ini cocok untuk kasus penggunaan yang melibatkan penyimpanan data berskala besar dan memerlukan komputasi elastis.
DLF Unified Metadata
Selected
Dipilih secara default. Jika dipilih, metadata disimpan di Data Lake Formation (DLF).
Setelah Anda mengaktifkan DLF, sistem akan memilih DLF Catalog default untuk Anda, yaitu UID Anda. Jika ingin menggunakan katalog data berbeda untuk kluster berbeda, buat katalog baru:
Klik Create Catalog. Di kotak dialog yang muncul, masukkan ID katalog dan klik OK.
Dari daftar drop-down DLF Catalog, pilih katalog yang telah Anda buat.
Advanced Settings
Off
Custom Software Configuration: Memungkinkan Anda menentukan file JSON untuk mengonfigurasi perangkat lunak dasar seperti Hadoop, Spark, dan Hive. Fitur ini dinonaktifkan secara default.
Konfigurasikan pengaturan perangkat keras.
Parameter
Contoh
Deskripsi
Billing Method
pay-as-you-go
Metode penagihan berikut didukung:
Pay-as-you-go: Metode penagihan pasca bayar di mana Anda membayar resource setelah menggunakannya. Anda ditagih per jam berdasarkan penggunaan aktual. Metode ini ideal untuk pengujian jangka pendek atau tugas dinamis.
Subscription: Metode penagihan prabayar di mana Anda membayar resource sebelum menggunakannya.
CatatanKami merekomendasikan menggunakan metode Pay-as-you-go untuk pengujian. Setelah pengujian berhasil, buat kluster Subscription baru untuk penggunaan produksi.
Zone
China (Hangzhou) Zone I
Zona adalah lokasi fisik terpisah dalam suatu wilayah yang dihubungkan oleh jaringan internal berlatensi rendah. Dalam kebanyakan kasus, Anda dapat menggunakan zona default.
VPC
starrocks_test/vpc-bp1f4epmkvncimpgs****
VPC yang ada dipilih secara default.
Untuk membuat VPC baru, buka konsol VPC. Untuk informasi selengkapnya, lihat Buat dan kelola VPC.
vSwitch
vsw_test/vsw-bp1e2f5fhaplp0g6p****
Pilih vSwitch di zona dan VPC yang dipilih. Jika tidak tersedia vSwitch di zona tersebut, buka konsol VPC untuk membuatnya. Untuk informasi selengkapnya, lihat VPCs dan vSwitches.
Default Security Group
sg-bp1ddw7sm2risw****/sg-bp1ddw7sm2risw****
Grup keamanan yang ada dipilih secara default. Untuk informasi selengkapnya tentang grup keamanan, lihat Ikhtisar grup keamanan.
Anda juga dapat mengklik create a new security group. untuk membuat grup keamanan di konsol ECS. Untuk informasi selengkapnya, lihat Buat grup keamanan.
PentingJangan gunakan advanced security groups yang dibuat di konsol ECS.
Node Group
Gunakan nilai default
Anda dapat memilih tipe instans sesuai kebutuhan. Untuk informasi selengkapnya, lihat Instance families.
Master: Menjalankan layanan control plane seperti ResourceManager dan NameNode.
Core: Menyimpan data dalam sistem file terdistribusi kluster (HDFS). Anda juga dapat melakukan scale out node Core sesuai kebutuhan setelah kluster dibuat.
Task: Menyediakan kapasitas komputasi tambahan dan tidak menyimpan data. Grup node ini opsional dan dapat ditambahkan untuk menskalakan resource komputasi.
PentingGrup node Task mendukung metode penagihan pay-as-you-go, instans preemptible, dan subscription.
Add to Deployment Set: Saat ketersediaan tinggi diaktifkan, node Master secara default ditambahkan ke deployment set. Deployment set adalah kebijakan yang mengontrol distribusi instans. Untuk informasi selengkapnya, lihat Deployment sets.
System Disk: Pilih SSD standar, enhanced SSD (ESSD), atau ultra disk sesuai kebutuhan. Sesuaikan ukuran disk sistem sesuai kebutuhan.
Data Disk: Pilih SSD standar, enhanced SSD (ESSD), atau ultra disk sesuai kebutuhan. Sesuaikan ukuran disk data sesuai kebutuhan.
CatatanSaat Anda memilih enhanced SSD (ESSD), Anda dapat mengatur tingkat kinerja (PL) berbeda berdasarkan kapasitas disk untuk memenuhi berbagai kebutuhan kinerja kluster. Tingkat kinerja default adalah PL1. Bergantung pada kapasitas disk, disk sistem mendukung PL0, PL1, dan PL2, sedangkan disk data mendukung PL0, PL1, PL2, dan PL3. Untuk informasi selengkapnya tentang cloud disk, lihat Ikhtisar cloud disk.
Instances: Grup node Master memiliki satu instans secara default. Jika ketersediaan tinggi diaktifkan, Anda dapat memiliki beberapa instans Master.
Grup node Core memiliki dua instans secara default. Anda dapat menyesuaikan jumlah ini sesuai kebutuhan.
Additional Security Group: Grup keamanan tambahan memungkinkan kontrol akses fleksibel antara resource eksternal atau aplikasi berbeda. Anda dapat mengaitkan hingga dua grup keamanan tambahan dengan grup node ini.
Assign Public Network IP: Menentukan apakah akan menetapkan alamat Elastic IP (EIP) ke kluster. Ini dinonaktifkan secara default. Hanya kluster DataLake yang mendukung penetapan IP publik di tingkat grup node.
CatatanJika Anda tidak mengaktifkan fitur ini tetapi ingin menggunakan alamat IP publik untuk mengakses kluster setelah dibuat, Anda harus mengajukan permohonan di konsol ECS. Untuk informasi selengkapnya, lihat Ajukan EIP.
Konfigurasikan pengaturan dasar.
Pada bagian Basic Information, konfigurasikan parameter berikut.
Parameter
Contoh
Deskripsi
Cluster Name
Emr-StarRocks
Nama kluster. Nama harus terdiri dari 1 hingga 64 karakter dan hanya boleh berisi karakter Tionghoa, huruf, angka, tanda hubung (-), dan garis bawah (_).
Identity Credentials
Password
Key Pair (Default): Menggunakan pasangan kunci SSH untuk login ke node master.
Untuk informasi selengkapnya tentang pasangan kunci, lihat SSH key pairs.
Password: Menetapkan kata sandi login untuk node master. Kata sandi harus terdiri dari 8 hingga 30 karakter dan berisi huruf kapital, huruf kecil, angka, dan karakter khusus.
Karakter khusus meliputi:
! @ # $ % ^ & *.Karakter khusus mencakup tanda seru (!), tanda at (@), tanda pagar (#), tanda dolar ($), tanda persen (%), tanda sisipan (^), tanda ampersand (&), dan tanda bintang (*).
(Opsional) Save as Cluster Template: Jika Anda memilih Key Pair sebagai kredensial login, Anda dapat mengklik Save as Cluster Template untuk menyimpan konfigurasi kluster saat ini sebagai templat kluster.
Pada kotak dialog Save as Cluster Template, masukkan Cluster Template Name dan pilih Cluster Template Resource Group.
Parameter
Deskripsi
Cluster Template Name
Masukkan nama untuk templat kluster agar mudah dikelola. Nama harus terdiri dari 1 hingga 64 karakter dan hanya boleh berisi karakter Tionghoa, huruf, angka, tanda hubung (-), dan garis bawah (_).
Cluster Template Resource Group
Pilih kelompok sumber daya yang ada untuk mengorganisasi templat Anda.
Jika perlu membuat kelompok sumber daya baru, Anda dapat mengklik Create Resource Group. di bawah. Untuk informasi selengkapnya, lihat Buat kelompok sumber daya.
Klik OK.
Templat kluster baru ditambahkan ke panel Manage Cluster Templates. Untuk informasi selengkapnya tentang templat kluster, lihat Buat templat kluster.
Klik Confirm.
Segarkan halaman untuk melihat progres pembuatan. Kluster siap digunakan ketika Status-nya berubah menjadi Running.