Depolama ve işlem birleştirilmiş örnekler; OLAP çok boyutlu analiz, yüksek eşzamanlı sorgular ve gerçek zamanlı veri analitiği gibi yüksek sorgu performansı gerektiren senaryolar için tasarlanmıştır. Veriler, yüksek okuma ve yazma verimliliği sağlamak amacıyla cloud disklerde veya yerel disklerde saklanır. Bu kılavuzda, bir EMR Serverless StarRocks depolama ve işlem birleştirilmiş örneğin nasıl oluşturulup kullanılacağı adım adım açıklanmaktadır.
Ön koşullar
Bir Alibaba Cloud hesabı kaydedin ve kimlik doğrulamasını tamamlayın.
-
Resource Access Management (RAM) kullanıcısıysanız AliyunEMRStarRocksFullAccess sistem ilkesini atayın.
NotStarRocks örneklerini oluşturmak ve yönetmek için AliyunEMRStarRocksFullAccess sistem ilkesi gereklidir.
Dikkat Edilmesi Gerekenler
Kodunuzun çalışma zamanı ortamını yönetmek ve yapılandırmak sizin sorumluluğunuzdadır.
Yordam
1. Adım: Depolama ve işlem birleştirilmiş bir StarRocks örneği oluşturun
-
E-MapReduce Serverless StarRocks örnek listesi sayfasına gidin.
E-MapReduce konsolu oturumunu açın.
Sol gezinme bölmesinde seçeneğini belirleyin.
Üst menü çubuğunda gerekli bölgeyi seçin.
Instances sayfasında Create Instance öğesine tıklayın.
-
E-MapReduce Serverless StarRocks sayfasında örnek parametrelerini yapılandırın.
Yapılandırma
Örnek
Açıklama
Product Type
Kullandıkça öde
Pay-as-you-go seçeneğini belirleyin. Faturalandırma hakkında daha fazla bilgi için bkz. kullandıkça öde.
Region
China (Beijing)
Örneğin fiziksel konumu.
ÖnemliÖrnek oluşturulduktan sonra bölge değiştirilemez. Bölgeyi dikkatle seçin.
Network and zone
-
vpc_Hangzhou/vpc-bp1f4epmkvncimpgs****
-
Zone I
-
vsw_i/vsw-bp1e2f5fhaplp0g6p****
Bir sanal özel cloud (VPC), bir alan ve ilgili vSwitch seçin.
-
VPC: Alibaba Cloud'da tanımladığınız yalıtılmış bir ağ ortamıdır.
Mevcut bir VPC'yi seçin veya bir tane oluşturmak üzere VPC konsoluna gitmek için Create a VPC seçeneğine tıklayın. Daha fazla bilgi için bkz. VPC oluşturma ve yönetme.
Not-
Bir VPC oluştururken RFC 1918'de tanımlanan aşağıdaki üç özel ağ aralığından bir IPv4 CIDR bloğu seçmelisiniz:
-
10.0.0.0/8(10.0.0.0 - 10.255.255.255) -
172.16.0.0/12(172.16.0.0 - 172.31.255.255) -
192.168.0.0/16(192.168.0.0 - 192.168.255.255)
-
-
Serverless StarRocks örneğinizin İnternet'e erişmesi gerekiyorsa (örneğin veri içe aktarmak veya yabancı tabloları sorgulamak için) VPC'nizin İnternet erişimine sahip olduğundan emin olun. VPC içinde bir İnternet NAT ağ geçidi dağıtabilir ve SNAT özelliğini etkinleştirebilirsiniz. Daha fazla bilgi için bkz. İnternet'e erişmek için İnternet NAT ağ geçidinin SNAT özelliğini kullanma.
-
-
Alan: Örneğin bulunduğu alandır.
-
vSwitch: vSwitch, farklı cloud kaynaklarını birbirine bağlayan bir VPC'nin temel ağ modülüdür.
Mevcut bir vSwitch'i seçin veya bir tane oluşturmak üzere VPC konsoluna gitmek için . Create vSwitch seçeneğine tıklayın. Daha fazla bilgi için bkz. vSwitch oluşturma ve yönetme.
Instance Type
Depolama ve işlem birleştirilmiş
OLAP çok boyutlu analiz, yüksek eşzamanlı sorgular ve gerçek zamanlı veri analitiği gibi yüksek sorgu performansı gerektiren senaryolar için tasarlanmıştır. Yüksek okuma ve yazma verimliliği sağlamak amacıyla veriler cloud disklerde veya yerel disklerde saklanır.
Instance Edition
Standard Edition
Basic Edition ve Standard Edition sürümlerini destekler. Daha fazla bilgi için bkz. Örnek sürümü ayrıntıları.
NotStarter Edition yalnızca China (Beijing), China (Shanghai), China (Shenzhen) ve China (Hangzhou) bölgelerinde kullanılabilir.
Kernel Version
3.3
StarRocks topluluk sürüm numarası.
FE Specifications
-
Teknik özellik türü: Standard Specifications
-
İşlem CU'su: 8 CU
-
Veri diski: PL1 ESSD,
-
Yüksek kullanılabilirlik: Varsayılan olarak etkindir.
-
Düğüm sayısı: 3
-
Yük dengeleme: Yerleşik PrivateZone
-
Teknik özellik türü: FE düğümlerinin teknik özellik türü, StarRocks'un Instance Edition değerine göre değişir.
-
Basic Edition: Standard Specifications destekler.
-
Standard Edition: Standard Specifications ve Memory-optimized Specifications teknik özelliklerini destekler.
-
-
Compute CUs: İşlem birimi (CU) sayısını seçin.
Gereksiniminize uygun CU teknik özelliklerini seçin. CU ücretleri hakkında daha fazla bilgi için bkz. Faturalandırılan öğeler.
-
Data Disk: Yalnızca PL1 ESSD desteklenir. Veri diski boyutu 100 GB ile 65000 GB arasında değişir ve artış miktarı 100'dür.
Cloud diskler hakkında daha fazla bilgi için bkz. Kurumsal SSD'ler.
-
HA: Varsayılan olarak etkindir. Standard Edition yüksek kullanılabilirliği destekler. Yüksek kullanılabilirliği etkinleştirdiğinizde, arıza riskini azaltmak için StarRocks FE düğüm sayısı 1'den 3'e çıkar.
ÖnemliÜretim ortamları için yüksek kullanılabilirliği etkinleştirmenizi şiddetle öneririz.
-
Number of Nodes: FE düğüm sayısı. Değer 1 ile 11 arasında tek bir sayı olabilir.
-
Load balancing: Aşağıdaki yöntemleri destekler.
-
Built-in Private Zone: Ekstra maliyet olmadan PrivateZone alan adı çözümlemesi aracılığıyla trafiği dengeler. Hafif veya maliyet duyarlı senaryolar için uygundur.
Üretim dışı ortamlar veya düşük yük dengeleme gereksinimine sahip hizmetler için önerilir.
-
Load balancing SLB: SLB hizmeti aracılığıyla yüksek performanslı yük dengeleme sağlar. Yüksek performans ve güvenilirlik gereksinimine sahip üretim ortamları için önerilir.
FE liderini sorgu trafiğinden kaldırma özelliği yalnızca SLB etkinleştirildikten sonra kullanılabilir.
Ek ücrete tabi olan SLB hizmetini etkinleştirmeniz gerekir. Daha fazla bilgi için bkz. CLB faturalandırmasına genel bakış.
-
BE Specifications
-
Teknik özellik türü: Standard Specifications
-
İşlem CU'su: 8 CU
-
Veri diski: PL1 ESSD, 100 GB, 1
-
Düğüm sayısı: 3
-
Teknik özellik türü: BE düğümlerinin teknik özellik türü, StarRocks'un Instance Edition değerine göre değişir.
-
Basic Edition: Standard Specifications destekler.
-
Standard Edition: Aşağıdaki teknik özellikleri destekler.
-
Standard Specifications: Varsayılan ve önerilen seçenektir. 1 CU = 1 CPU çekirdeği + 4 GiB bellek. Bu teknik özellik, StarRocks depolaması için ESSD kullanır.
-
Memory-optimized Specifications: 1 RCU = 1 CPU çekirdeği + 8 GiB bellek. Bu teknik özellik, çok sayıda karmaşık sorgu çalıştırma veya yüksek eşzamanlı istekleri işleme gibi bellek yoğun senaryolar için uygundur. StarRocks depolaması için ESSD kullanır.
-
Network-enhanced Specifications: 1 NCU = 1 CPU çekirdeği + 4 GiB bellek olup standart teknik özelliklere göre iki katından fazla ağ bant genişliği sunar. Bu teknik özellik, dış tablolardan büyük miktarda veri taramayı içeren senaryolar için uygundur. StarRocks depolaması için ESSD kullanır.
-
High-performance Storage: Bu tür için ayrıntılı teknik özellikleri seçmeniz gerekir. StarRocks depolaması için yerel bir SSD kullanır ve sıkı G/Ç performansı gereksinimleri olan senaryolar için idealdir.
-
High-specification Storage: Bu tür için ayrıntılı teknik özellikleri seçmeniz gerekir. StarRocks depolaması için yerel bir HDD kullanır. Bu tür, çok büyük veri hacimlerini daha düşük maliyetle depolamak için idealdir ancak G/Ç performansı daha düşüktür.
-
-
-
Compute CUs: İşlem birimi (CU) sayısını seçin.
Gereksiniminize uygun CU teknik özelliklerini seçin. CU ücretleri hakkında daha fazla bilgi için bkz. Faturalandırılan öğeler.
-
Data Disk: PL0 ESSD, PL1 ESSD (önerilen), PL2 ESSD ve PL3 ESSD'yi destekler. Daha fazla bilgi için bkz. Kurumsal SSD'ler.
Önbellek diski boyutu 100 ile 65000 GB arasında değişir. Önbellek diski sayısı varsayılan olarak 1'dir. Değer 1 ile 8 arasında olabilir ve artış miktarı 1'dir.
NotGerekli depolama kapasitesini girebilirsiniz; sistem otomatik olarak bir yapılandırma önerir. Seçtiğiniz kapasite önerilen eşiği aşarsa, optimum performans için ayarlamanıza yardımcı olacak bir uyarı görüntülenir.
-
Number of Nodes: BE düğüm sayısı. Değer 3 ile 50 arasında olabilir.
Instance Name
Özel bir örnek adı girin.
Örnek adı 1 ila 64 karakter uzunluğunda olmalı ve Çince karakterler, harfler, rakamlar, kısa çizgiler (-) ve alt çizgiler (_) içerebilir.
Administrator
admin
StarRocks'u yönetmek için kullanılan yönetici kullanıcı adıdır. Varsayılan değer admin'dir ve değiştirilemez.
Password ve Confirm Password
Özel bir parola girin.
Yerleşik yönetici admin'in parolasıdır. Parolayı kaydetmeniz gerekir. Örnek yönetimi ve kullanımı sırasında parola gereklidir. Parolayı unutursanız sıfırlayabilirsiniz. Daha fazla bilgi için bkz. Örnek parolası nasıl sıfırlanır?
Örnek parametreleri hakkında daha fazla bilgi için bkz. Örnek oluşturma.
-
-
Hizmet şartlarını okuyup seçin, Create Instance seçeneğine tıklayın ve istendiği gibi ödemeyi tamamlayın.
Ödeme tamamlandıktan sonra yeni oluşturulan örneği görüntülemek için örnek yönetim sayfasına dönün. Örneğin Status durumu Running olarak değiştiğinde örnek oluşturulmuş olur.
2. Adım: StarRocks örneğine bağlanın
-
Instances sayfasında hedef örneği bulun ve Actions sütunundaki Connect seçeneğine tıklayın.
StarRocks örneğine başka yollarla da bağlanabilirsiniz.
-
StarRocks örneğine bağlanın.
-
New Connection sekmesinde aşağıdaki parametreleri yapılandırın.
Yapılandırmayı tamamladıktan sonra bağlantıyı doğrulamak için Test Network Connectivity seçeneğine tıklayın ve ardından bağlantıyı oluşturmak için OK seçeneğine tıklayın.
Parametre
Örnek
Açıklama
Region
China (Hangzhou)
StarRocks örneğinizin bulunduğu bölgeyi seçin.
Instance
StarRocks_Serverless
Bağlanmak istediğiniz StarRocks örneğini seçin.
Name
Connection_ServerlessÖzel bir bağlantı adı girin.
Ad 1 ila 64 karakter uzunluğunda olmalı ve Çince karakterler, harfler, rakamlar, kısa çizgiler (-) ve alt çizgiler (_) içerebilir.
Username
Gerçek ihtiyaçlarınıza göre bir değer girin.
Varsayılan kullanıcı adı admin'dir. Gerektiğinde başka kullanıcılar da oluşturabilirsiniz. Daha fazla bilgi için bkz. Kullanıcıları Yönetme ve Veri Yetkilendirme.
Password
Gereksinimlerinize göre bir değer girin.
Belirtilen kullanıcı adının parolası. Test Connectivity seçeneğine tıklayın.
-
Bağlantı testi başarılı olduktan sonra OK seçeneğine tıklayın.
SQL sorguları çalıştırabileceğiniz SQL Editor sayfasına yönlendirilirsiniz. Daha fazla bilgi için bkz. EMR StarRocks Manager kullanarak StarRocks örneğine bağlanma.
-
3. Adım: SQL sorguları çalıştırın
SQL Editor'ün Queries sayfasında
simgesine tıklayın.New iletişim kutusunda Confirm seçeneğine tıklayın.
-
Yeni dosyada aşağıdaki komutları girin. Tüm komutları seçin ve Run seçeneğine tıklayın.
/**Create a database**/ CREATE DATABASE IF NOT EXISTS load_test; /**Use the database**/ USE load_test; /**Create a table**/ CREATE TABLE insert_wiki_edit ( event_time DATETIME, channel VARCHAR(32) DEFAULT '', user VARCHAR(128) DEFAULT '', is_anonymous TINYINT DEFAULT '0', is_minor TINYINT DEFAULT '0', is_new TINYINT DEFAULT '0', is_robot TINYINT DEFAULT '0', is_unpatrolled TINYINT DEFAULT '0', delta INT SUM DEFAULT '0', added INT SUM DEFAULT '0', deleted INT SUM DEFAULT '0' ) AGGREGATE KEY(event_time, channel, user, is_anonymous, is_minor, is_new, is_robot, is_unpatrolled) PARTITION BY RANGE(event_time) ( PARTITION p06 VALUES LESS THAN ('2015-09-12 06:00:00'), PARTITION p12 VALUES LESS THAN ('2015-09-12 12:00:00'), PARTITION p18 VALUES LESS THAN ('2015-09-12 18:00:00'), PARTITION p24 VALUES LESS THAN ('2015-09-13 00:00:00') ) DISTRIBUTED BY HASH(user) BUCKETS 10 PROPERTIES("replication_num" = "1"); /**Insert data**/ INSERT INTO insert_wiki_edit VALUES("2015-09-12 00:00:00","#en.wikipedia","GELongstreet",0,0,0,0,0,36,36,0),("2015-09-12 00:00:00","#ca.wikipedia","PereBot",0,1,0,1,0,17,17,0); /**Query data**/ select * from insert_wiki_edit;
Sorgu sonuçları görüntülenir.
Başarılı bir sorgu, insert_wiki_edit tablosundaki kayıtları döndürür ve verilerin başarıyla içe aktarıldığını onaylar.
4. Adım: Performans testi çalıştırın
Daha fazla bilgi için bkz. Test Talimatları.
(İsteğe bağlı) 5. Adım: Örneği serbest bırakın
Bu işlem, örneği ve tüm kaynaklarını siler. Bu eylem geri alınamaz. Dikkatli ilerleyin.
Bir örneğe artık ihtiyacınız olmadığında ek ücretlerden kaçınmak için örneği serbest bırakın.
Instances sayfasında hedef örneği bulun ve Actions sütunundaki Release seçeneğine tıklayın.
Görüntülenen iletişim kutusunda OK seçeneğine tıklayın.
İlgili belgeler
SQL Editor hakkında daha fazla bilgi için bkz. SQL Editor.
SQL sorgu ayrıntılarını görüntülemek, yürütme planlarını analiz etmek ve SQL sorunlarını gidermek için bkz. Tanılama ve Analiz.
Tüm veritabanı işlemlerini görüntülemek ve analiz etmek için bkz. Denetim Günlüğü.
Bize ulaşın
Sorularınız için 24010016636 ID'sini arayarak destek DingTalk grubumuza katılın.