Memulai dengan instans terintegrasi penyimpanan-komputasi - E-MapReduce

Instans terintegrasi penyimpanan-komputasi cocok untuk skenario yang memerlukan kinerja kueri tinggi, seperti analisis multidimensi Pemrosesan Analitik Online (OLAP), kueri konkurensi tinggi, dan analitik data real-time. Tipe instans ini menyimpan data pada disk cloud atau disk lokal guna memastikan efisiensi baca-tulis data yang tinggi. Topik ini menjelaskan cara membuat dan menggunakan instans EMR Serverless StarRocks terintegrasi penyimpanan-komputasi dengan Akun Alibaba Cloud.

Prasyarat

Daftarkan Akun Alibaba Cloud dan selesaikan verifikasi identitas.
Jika Anda adalah pengguna Resource Access Management (RAM), berikan kebijakan sistem AliyunEMRStarRocksFullAccess.
Catatan
Kebijakan sistem AliyunEMRStarRocksFullAccess diperlukan untuk membuat dan mengelola instans StarRocks.

Perhatian

Lingkungan runtime kode dikelola dan dikonfigurasi oleh pemilik lingkungan tersebut.

Prosedur

Langkah 1: Membuat instans StarRocks terintegrasi penyimpanan-komputasi

Buka halaman daftar instans EMR Serverless StarRocks.
1. Masuk ke Konsol E-MapReduce.
2. Pada panel navigasi di sebelah kiri, pilih EMR Serverless > StarRocks.
3. Pada bilah menu atas, pilih wilayah yang diperlukan.
Pada halaman Instance List, klik Create Instance.

Pada halaman E-MapReduce Serverless StarRocks, konfigurasikan parameter instans.

Konfigurasi	Contoh	Deskripsi
Product Type	Bayar sesuai pemakaian	Pilih Pay-as-you-go. Untuk detail penagihan, lihat Bayar sesuai pemakaian.
Region	Tiongkok (Beijing)	Lokasi fisik instans. Penting Anda tidak dapat mengubah wilayah setelah instans dibuat. Pilih wilayah dengan hati-hati.
Network And Zone	vpc_Hangzhou/vpc-bp1f4epmkvncimpgs** Zona I vsw_i/vsw-bp1e2f5fhaplp0g6p**	Pilih virtual private cloud, zona, dan informasi vSwitch yang sesuai. Virtual private cloud (VPC): VPC adalah lingkungan jaringan terisolasi yang Anda definisikan di Alibaba Cloud. Anda memiliki kontrol penuh atas VPC Anda. Pilih VPC yang sudah ada, atau klik Create VPC untuk membuka Konsol VPC dan membuatnya. Untuk informasi selengkapnya, lihat Membuat dan mengelola VPC. Catatan Saat membuat VPC, blok CIDR IPv4 harus dipilih dari salah satu dari tiga rentang jaringan pribadi berikut yang didefinisikan dalam RFC 1918: `10.0.0.0/8` (10.0.0.0 hingga 10.255.255.255) `172.16.0.0/12` (172.16.0.0 hingga 172.31.255.255) `192.168.0.0/16` (192.168.0.0 hingga 192.168.255.255) Jika instans Serverless StarRocks Anda perlu mengakses internet, misalnya untuk mengimpor data atau mengkueri tabel eksternal, pastikan VPC-nya memiliki akses internet. Anda dapat men-deploy Internet NAT gateway di VPC dan mengaktifkan fitur SNAT. Hal ini memungkinkan instans Serverless StarRocks mengakses sumber daya internet melalui gerbang tersebut. Untuk informasi selengkapnya, lihat Menggunakan fitur SNAT dari Internet NAT gateway untuk mengakses internet. Zona: Zona tempat instans berada. vSwitch: vSwitch adalah modul jaringan dasar dari VPC yang digunakan untuk menghubungkan berbagai sumber daya cloud. Pilih vSwitch yang sudah ada, atau klik Create VSwitch untuk membuka Konsol VPC dan membuatnya. Untuk informasi selengkapnya, lihat Membuat dan mengelola vSwitch.
Instance Type	Terintegrasi penyimpanan-komputasi	Cocok untuk skenario yang memerlukan kinerja kueri tinggi, seperti analisis multidimensi OLAP, kueri konkurensi tinggi, dan analitik data real-time. Tipe instans ini menyimpan data pada disk cloud atau disk lokal untuk memastikan efisiensi baca-tulis data yang tinggi.
Instance Series	Edisi Standar	Mendukung Starter Edition dan Standard Edition. Untuk informasi selengkapnya, lihat Deskripsi family instans. Catatan Edisi Starter hanya tersedia di wilayah Tiongkok (Beijing), Tiongkok (Shanghai), Tiongkok (Shenzhen), dan Tiongkok (Hangzhou).
Version	3.3	Nomor versi komunitas StarRocks.
FE Specifications	Tipe spesifikasi: Standard Unit komputasi: 8 CU Disk data: PL1 ESSD, Ketersediaan tinggi: Diaktifkan secara default. Jumlah node: 3 Penyeimbangan beban: PrivateZone bawaan	Tipe spesifikasi: Tipe spesifikasi node FE bervariasi tergantung pada Seri instans StarRocks. Starter Edition: Mendukung Standard. Standard Edition: Mendukung spesifikasi Standard dan Memory-enhanced. Compute CU: Pilih jumlah unit komputasi (CU). Pilih spesifikasi CU yang sesuai sesuai kebutuhan. Untuk informasi lebih lanjut tentang biaya CU, lihat Item penagihan. Data Disk: Hanya mendukung PL1 ESSD. Ukuran disk data berkisar antara 100 GB hingga 65.000 GB, dengan ukuran langkah 100. Untuk informasi lebih lanjut tentang disk cloud, lihat ESSD. High Availability: Diaktifkan secara default. Edisi Standar mendukung ketersediaan tinggi (HA). Saat Anda mengaktifkan HA, jumlah node FE StarRocks meningkat dari 1 menjadi 3 untuk mengurangi risiko kegagalan. Penting Aktifkan ketersediaan tinggi untuk lingkungan produksi. Number Of Nodes: Jumlah node FE. Nilainya dapat berupa angka ganjil dari 1 hingga 11. Load Balancing: Metode berikut didukung. Built-in PrivateZone: Menggunakan resolusi nama domain PrivateZone untuk menyeimbangkan lalu lintas secara otomatis. Tidak ada biaya tambahan. Cocok untuk skenario ringan atau lingkungan yang sensitif terhadap biaya. Cocok untuk lingkungan non-produksi atau layanan dengan persyaratan rendah terhadap kinerja penyeimbangan beban. Server Load Balancer (SLB): Menggunakan layanan SLB untuk mencapai penyeimbangan beban berkinerja tinggi. Disarankan untuk lingkungan produksi, terutama untuk layanan dengan persyaratan kinerja dan keandalan tinggi. Fitur untuk menghapus leader FE dari lalu lintas kueri hanya tersedia setelah SLB diaktifkan. Anda harus mengaktifkan layanan SLB, yang akan menimbulkan biaya tambahan. Untuk informasi selengkapnya, lihat Ikhtisar Penagihan CLB.
BE Specifications	Tipe spesifikasi: Standard Unit komputasi: 8 CU Disk data: PL1 ESSD, 100 GB, 1 Jumlah node: 3	Tipe spesifikasi: Tipe spesifikasi node BE bervariasi tergantung pada Seri instans StarRocks. Starter Edition: Mendukung Standard. Standard Edition: Mendukung spesifikasi berikut. Standard: Spesifikasi default yang direkomendasikan. 1 CU = 1 core CPU + 4 GiB memori. Konfigurasi ini menggunakan SSD enterprise (ESSD) sebagai solusi penyimpanan untuk StarRocks. Memory-enhanced: 1 RCU = 1 core CPU + 8 GiB memori. Tipe ini cocok untuk skenario intensif memori, seperti banyak kueri kompleks atau permintaan konkuren tinggi. ESSD digunakan sebagai solusi penyimpanan untuk StarRocks. Network-enhanced: 1 NCU = 1 core CPU + 4 GiB memori. Lebar pita jaringan lebih dari dua kali lipat dibandingkan spesifikasi standar. Tipe ini cocok untuk skenario yang melibatkan pemindaian data dalam jumlah besar pada tabel eksternal. ESSD digunakan untuk penyimpanan StarRocks. High-performance Storage: Pilih spesifikasi detail sesuai kebutuhan. Tipe spesifikasi ini menggunakan SSD lokal sebagai disk data untuk penyimpanan StarRocks. Cocok untuk skenario dengan persyaratan ketat terhadap kinerja I/O penyimpanan. Large-capacity Storage: Pilih spesifikasi detail sesuai kebutuhan. Tipe spesifikasi ini menggunakan HDD lokal sebagai disk data untuk penyimpanan StarRocks. Cocok untuk skenario dengan volume data sangat besar. Tipe ini dapat secara efektif mengurangi biaya penyimpanan keseluruhan tetapi memiliki persyaratan kinerja I/O penyimpanan yang relatif rendah. Compute CU: Pilih jumlah unit komputasi (CU). Pilih spesifikasi CU yang sesuai sesuai kebutuhan. Untuk informasi lebih lanjut tentang biaya CU, lihat Item penagihan. Data Disk: Mendukung PL0 ESSD, PL1 ESSD (direkomendasikan), PL2 ESSD, dan PL3 ESSD. Untuk informasi selengkapnya, lihat ESSD. Ukuran disk cache berkisar antara 100 hingga 65.000 GB. Jumlah disk cache adalah 1 secara default. Nilainya dapat berkisar antara 1 hingga 8, dengan ukuran langkah 1. Catatan Anda dapat memasukkan kapasitas penyimpanan yang dibutuhkan, dan sistem akan secara otomatis memberikan konfigurasi default yang direkomendasikan. Jika kapasitas disk cloud yang Anda pilih melebihi ambang batas yang direkomendasikan, sistem akan menampilkan prompt untuk membantu Anda melakukan penyesuaian yang tepat guna memastikan kinerja optimal. Number Of Nodes: Jumlah node BE. Nilainya dapat berkisar antara 3 hingga 50.
Instance Name	Masukkan nama instans kustom.	Nama instans harus terdiri dari 1 hingga 64 karakter dan dapat berisi karakter Tionghoa, huruf, angka, tanda hubung (-), dan garis bawah (_).
Administrator Username	admin	Nama pengguna administrator yang digunakan untuk mengelola StarRocks. Nilai default-nya adalah admin dan tidak dapat diubah.
Logon Password dan Confirm Password	Masukkan kata sandi kustom.	Kata sandi untuk administrator bawaan, admin. Anda harus mencatat kata sandi ini. Kata sandi diperlukan saat Anda mengelola dan menggunakan instans. Jika Anda lupa kata sandi, Anda dapat mengatur ulang. Untuk informasi selengkapnya, lihat Bagaimana cara mengatur ulang kata sandi instans?

Untuk informasi selengkapnya tentang parameter instans, lihat Membuat instans.

Pilih Ketentuan Layanan, klik Create Instance, lalu selesaikan pembayaran sesuai petunjuk.
Setelah pembayaran selesai, kembali ke halaman daftar instans untuk melihat instans yang telah dibuat. Instans berhasil dibuat ketika Status-nya berubah menjadi Running.

Langkah 2: Menghubungkan ke instans StarRocks

Pada halaman Instance List, klik Connect To Instance pada kolom Actions.
Anda juga dapat menghubungkan ke instans StarRocks dengan cara lain.

Hubungkan ke instans StarRocks.

Pada tab New Connection, konfigurasikan parameter berikut.

Parameter	Contoh	Deskripsi
Region	Tiongkok (Hangzhou)	Pilih lokasi fisik instans StarRocks yang telah dibuat.
Instance	StarRocks_Serverless	Pilih nama instans StarRocks yang telah dibuat.
Connection Name	Connection_Serverless	Masukkan nama koneksi kustom. Nama harus terdiri dari 1 hingga 64 karakter dan dapat berisi karakter Tionghoa, huruf, angka, tanda hubung (-), dan garis bawah (_).
Username	Masukkan nilai berdasarkan kebutuhan aktual Anda.	Nama pengguna awal default adalah admin. Anda dapat menggunakan nama pengguna ini untuk terhubung atau membuat pengguna lain sesuai kebutuhan. Untuk informasi selengkapnya tentang cara membuat pengguna, lihat Mengelola Pengguna dan Otorisasi Data.
Password	Masukkan nilai berdasarkan persyaratan Anda.	Kata sandi yang sesuai dengan nama pengguna yang dibuat di instans StarRocks.

Klik Test Connectivity.
Setelah pengujian koneksi berhasil, klik OK.
Pada halaman SQL Editor, Anda dapat mengeksekusi pernyataan SQL. Untuk informasi selengkapnya, lihat Menghubungkan ke instans StarRocks menggunakan EMR StarRocks Manager.

Langkah 3: Menjalankan kueri SQL

Pada halaman Query List di SQL Editor, klik ikon .
Pada kotak dialog New File, klik OK.

Pada file baru, masukkan perintah berikut. Pilih semua perintah lalu klik Run.

/**Membuat database**/
CREATE DATABASE IF NOT EXISTS load_test;

/**Menggunakan database**/
USE load_test;

/**Membuat tabel**/
CREATE TABLE insert_wiki_edit
(
    event_time DATETIME,
    channel VARCHAR(32) DEFAULT '',
    user VARCHAR(128) DEFAULT '',
    is_anonymous TINYINT DEFAULT '0',
    is_minor TINYINT DEFAULT '0',
    is_new TINYINT DEFAULT '0',
    is_robot TINYINT DEFAULT '0',
    is_unpatrolled TINYINT DEFAULT '0',
    delta INT SUM DEFAULT '0',
    added INT SUM DEFAULT '0',
    deleted INT SUM DEFAULT '0'
)
AGGREGATE KEY(event_time, channel, user, is_anonymous, is_minor, is_new, is_robot, is_unpatrolled)
PARTITION BY RANGE(event_time)
(
    PARTITION p06 VALUES LESS THAN ('2015-09-12 06:00:00'),
    PARTITION p12 VALUES LESS THAN ('2015-09-12 12:00:00'),
    PARTITION p18 VALUES LESS THAN ('2015-09-12 18:00:00'),
    PARTITION p24 VALUES LESS THAN ('2015-09-13 00:00:00')
)
DISTRIBUTED BY HASH(user) BUCKETS 10
PROPERTIES("replication_num" = "1");

/**Memasukkan data**/
INSERT INTO insert_wiki_edit VALUES("2015-09-12 00:00:00","#en.wikipedia","GELongstreet",0,0,0,0,0,36,36,0),("2015-09-12 00:00:00","#ca.wikipedia","PereBot",0,1,0,1,0,17,17,0);

/**Mengkueri data**/
select * from insert_wiki_edit;

Informasi berikut dikembalikan.

Langkah 4: Menjalankan uji kinerja

Untuk informasi selengkapnya, lihat Petunjuk Pengujian.

(Opsional) Langkah 5: Melepas instans

Penting

Operasi ini menghapus instans beserta seluruh sumber dayanya. Tindakan ini tidak dapat dibatalkan. Lanjutkan dengan hati-hati.

Saat instans tidak lagi diperlukan, lepaskan instans tersebut untuk menghindari biaya tambahan.

Pada halaman Instance List, klik Release pada kolom Aksi instans.
Pada kotak dialog yang muncul, klik OK.

Referensi

Untuk informasi selengkapnya tentang operasi di SQL Editor, lihat SQL Editor.
Untuk melihat informasi kueri SQL instans saat ini, menganalisis rencana eksekusi SQL, serta mendiagnosis dan memecahkan masalah SQL secara cepat, lihat Diagnosis dan analisis.
Untuk melihat dan menganalisis semua operasi yang terjadi di database, lihat Log audit.

Hubungi kami

Jika Anda memiliki pertanyaan, cari ID grup DingTalk 24010016636 dan bergabunglah ke grup tersebut untuk mengajukan pertanyaan Anda.