Topik ini menjelaskan cara membuat kluster Stream Storage for Apache Fluss serta menyediakan catatan penting terkait proses pembuatannya.
Prasyarat
-
Diperlukan Akun Alibaba Cloud. Untuk membuatnya, lihat Create an Alibaba Cloud account.
-
Jika Anda menggunakan RAM user atau role, pastikan Anda memiliki izin yang diperlukan untuk membeli dan membuat sumber daya. Untuk informasi selengkapnya, lihat RAM authorization.
Buat kluster Fluss
Stream Storage for Apache Fluss sedang dalam masa pratinjau publik gratis. Untuk informasi selengkapnya, lihat Fluss public preview notice.
-
Masuk ke Realtime Compute management console.
-
Klik Streaming Storage Fluss di sebelah Stream Storage Fluss.
-
Di bagian bawah halaman pembelian, buat service-linked role terlebih dahulu, lalu isi informasi konfigurasi. Untuk informasi selengkapnya tentang role tersebut, lihat Service-linked role.
-
Konfigurasikan parameter berikut.
Parameter
Description
Example
Region
Pilih wilayah yang sama dengan compute engine Anda. Instans di wilayah berbeda tidak dapat berkomunikasi melalui jaringan internal.
China (Beijing)
Deployment mode
single-AZ: Menyebar kluster di satu availability zone. High Availability: Menyediakan disaster recovery lintas availability zone. Sistem secara otomatis menyebar kluster, layanan integrasi lakehouse, dan cold storage dengan redundansi multi-AZ.
single-AZ
VPC
Pilih VPC di wilayah yang ditentukan. Anda tidak dapat mengubah VPC setelah instans dibuat.
-
VSwitch
Setiap VSwitch sesuai dengan satu availability zone. Setiap TabletServer memerlukan satu alamat IP. Rencanakan Blok CIDR jaringan Anda berdasarkan skala kluster.
-
Instance name
Nama harus dimulai dengan huruf kecil dan hanya boleh berisi huruf kecil, angka, dan tanda hubung (-). Nama tidak boleh diakhiri dengan tanda hubung, maksimal 60 karakter, unik dalam wilayah yang sama, dan tidak dapat diubah setelah dibuat.
fluss-test
TabletServer specifications
Spesifikasi untuk satu node TabletServer. 1 RCU setara dengan 1 core vCPU dan memori 8 GiB.
Untuk informasi selengkapnya, lihat Cluster capacity planning untuk memilih konfigurasi yang sesuai.
4 RCU
Number of TabletServers
Jumlah node harus antara 3 hingga 300.
3
Disk capacity
Kapasitas disk untuk satu TabletServer. ESSD digunakan secara default. Secara default, data disimpan dalam tiga replika. Oleh karena itu, disk 900 GiB menyediakan kapasitas yang dapat digunakan sebesar 300 GiB. Ukuran minimum adalah 500 GiB dan maksimum 2 TiB. Anda tidak dapat melakukan scale-in kapasitas disk setelah ditetapkan. Anda harus melakukan scale-out jika penggunaan disk lokal melebihi 80%.
900 GiB
Cold storage
Anda ditagih berdasarkan jumlah data yang disimpan dan durasi penyimpanan. Cold storage berfungsi sebagai ekstensi remote dari disk lokal. Sistem menulis ke penyimpanan lokal dan cold storage secara bersamaan untuk mencegah gangguan layanan akibat disk lokal penuh.
Billed by actual usage
Fixed resources
Sumber daya komputasi yang dicadangkan untuk pekerjaan sinkronisasi integrasi lakehouse. 1 CU setara dengan 1 core vCPU dan memori 4 GiB.
-
Elastic resources
Batas atas sumber daya komputasi elastis untuk pekerjaan sinkronisasi integrasi lakehouse. Anda ditagih berdasarkan penggunaan aktual.
100 CU
CatatanLayanan integrasi lakehouse yang baru menggunakan mode fully-managed. Sistem secara otomatis membuat, menjalankan, dan memelihara pekerjaan sinkronisasi sehingga Anda tidak perlu mengelola status pekerjaan di lapisan bawah. Untuk informasi selengkapnya, lihat Fully-managed lakehouse integration service.
-
Setelah pembayaran selesai, buka Konsol Manajemen. Kluster Fluss baru akan muncul dengan status "Creating". Proses pembuatan kluster biasanya memerlukan waktu 15 hingga 20 menit.
-
View cluster details: Di Realtime Compute management console, klik Details pada kluster target untuk melihat informasinya.
-
Manage permissions: Untuk memberikan akses kluster kepada RAM user, Anda harus mengonfigurasi izin. Untuk informasi selengkapnya, lihat Authorize access to a Fluss cluster.
-
Modify cluster specifications: Di Realtime Compute management console, klik More pada kluster target untuk menyesuaikan sumber dayanya.
-
Mulai menggunakan Fluss
|
Basic concepts Pahami klasifikasi tabel dan karakteristik dasarnya. |
Integrate with the Flink engine Buat dan tulis data ke tabel Fluss. |
|
Lakehouse integration Konsep arsitektur data baru yang menggabungkan data lake dengan stream real-time. |
Best practices Solusi Fluss untuk skenario bisnis umum. |