Sorgu profili, bir sorguda yer alan tüm işçi düğümlerden yürütme bilgilerini toplar. Sorgu profilini kullanarak StarRocks örneğinizdeki performans darboğazlarını görsel analizle hızla tespit edebilirsiniz.
Sorgu profilini etkinleştirin
Örneğiniz için sorgu profilini etkinleştirmek amacıyla enable_profile değişkenini true olarak ayarlayın.
SET enable_profile = true;
Örneğiniz 2.5.13 veya üzeri (2.x serisi) ya da 3.1.5 veya üzeri (3.x serisi) çekirdek sürümü kullanıyorsa sorgu performansını etkilemeden sorgu profilini genel düzeyde etkinleştirebilirsiniz.
Yukarıda belirtilenlerden daha eski çekirdek sürümlerinde sorgu performansının düşmemesi için profili etkinleştirmeden önce çekirdeği yükseltin.
Sorgu profili yapısı
Sorgu profili aşağıdaki beş bölümden oluşur:
Parça (Fragment): Bir yürütme ağacıdır. Sorgu bir veya daha fazla parçadan oluşur.
Parça örneği: Bir parçanın birden fazla örneği olabilir; her biri parça örneği olarak adlandırılır. Her örnek farklı bir hesaplama düğümünde çalışır.
İşlem hattı (Pipeline): Bir yürütme zinciridir. İşlem hattı bir dizi operatörden oluşur. Parça örneği bir veya daha fazla işlem hattına ayrılır.
İşlem hattı sürücüsü: Çoklu çekirdeklerden tam yararlanmak için işlem hattının birden fazla örneği olabilir; her biri işlem hattı sürücüsü olarak adlandırılır.
Operatör: İşlem hattı sürücüsünün bir bileşenidir. İşlem hattı sürücüsü birden fazla operatörden oluşur.
Sorgu Profilini Görselleştirin
StarRocks Manager, Sorgu Profilini ağaç yapısında görselleştirir; burada her düğüm toplanmış bir Operatörü temsil eder. Sayfanın sağ tarafındaki sekmelerde ayrıntıları görüntülemek için bir Operatöre tıklayın. Operatör seçilmezse sağ tarafta Sorgu özeti görünür.
Yürütme özeti
Execution Details sayfası sol tarafta görsel yürütme planı ağacını gösterir. Her operatör düğümü yürütme süresi ve yüzdesiyle etiketlenir. HASH_JOIN gibi çok zaman tüketen düğümler kırmızıyla vurgulanır. Düğümler arasındaki çizgiler işlenen satır sayısını belirtir. Sağ tarafta üst bölümde zaman yüzdesine göre sıralanmış düğüm listesi, alt bölümde ise özet ölçümlerin genel görünümü yer alır.
Execution Details sayfası yürütme süresi, G/Ç performansı ve ağ veri aktarım hacmi dahil temel özet ölçümleri görüntüler.
-
Total
Metric
Description
Total
Sorgunun tükettiği toplam süre. Planlama, yürütme ve analiz aşamalarının süresini içerir.
PlannerTotalTime
Planlama süresi. SQL ayrıştırma, analiz, optimizasyon ve yürütme planı oluşturma süreçlerini içerir.
ExecutionWallTime
Sorgu yürütme süresi ve BE tarafındaki yürütme süresi (gerçek saat yürütme süresi).
CollectProfileTime
Profil toplama süresi. BE'lerden profil ölçümlerinin toplanması için harcanan süredir. -
Execution time
Metric
Description
ExecutionWallTime
Sorgu yürütmesinin tükettiği toplam süre.
CumulativeCpuTime
Tüm BE düğümlerinin CPU sürelerinin toplamı. Toplam CPU kaynak tüketimini yansıtır.
CpuUtilization
CPU kullanımı = CumulativeCpuTime / ExecutionWallTime. Kullanılan ortalama CPU çekirdek sayısını gösterir.
CumulativeWaitTime
İşlem hattının kümülatif bekleme süresi. Boş giriş kuyruğu, dolu çıkış kuyruğu veya hazır olmayan bağımlılıklar gibi koşullar nedeniyle oluşan zamanlama bekleme süresini (ScheduleTime) ve engelleme süresini (PendingTime) içerir.
OperatorCumulativetime
Tüm operatörlerin yürütme sürelerinin toplamı. G/Ç, ağ ve hesaplamayı içerir.
IO
Tüm Tarama (Scan) operatörleri için kümülatif G/Ç süresi. Yerel disk okumalarını, uzak okumaları ve veri önbelleği erişimini içerir. -
I/O
Metric
Description
RawRowsRead
Tüm SCAN düğümlerinin taradığı toplam kayıt sayısı.
DiskReadBytes
Tüm SCAN yürütme düğümlerinin okuduğu toplam sıkıştırılmış veri miktarı.
LocalDiskReadBytes
Tüm Connector Scan yürütme düğümlerinin yerel önbellekten okuduğu toplam sıkıştırılmış veri boyutu. Bu ölçüm yalnızca paylaşılan veri örnekleri için geçerlidir.
RemoteReadBytes
Tüm Connector Scan yürütme düğümlerinin OSS'den okuduğu toplam sıkıştırılmış veri boyutu. Bu ölçüm yalnızca paylaşılan veri örnekleri için geçerlidir.
ResultRows
Tüm SCAN yürütme düğümlerinin ürettiği toplam kayıt sayısı.
ResultBytes
Tüm SCAN yürütme düğümlerinin okuduğu toplam veri miktarı. -
Network
Metric
Description
Bytes sent over network
Tüm Exchange yürütme düğümlerinin aktardığı toplam bayt sayısı. BytesSent ölçümüne karşılık gelir.
Operatör
Sayfanın sağ tarafında aşağıdaki bilgileri görüntülemek için bir operatöre tıklayın:
CoreMetrics sekmesi: Operatörün temel ölçümlerini görüntüler.
NodeMetrics sekmesi: Operatörün tüm ölçümlerini görüntüler.
Pipeline sekmesi: Operatörü içeren işlem hattının ölçümlerini görüntüler. Bu ölçümler yalnızca zamanlamayla ilgilidir ve yakından izlenmesi gerekmez.
Bir operatörün harcadığı süre oranı arttıkça rengi koyulaşır. En uzun yürütme sürelerine sahip ilk üç düğüm renk kodludur. Bu sayede sorgu darboğazlarını kolayca belirleyebilirsiniz.
Profil ağacında yakınlaşmak ve uzaklaşmak için fare tekerleğini kaydırın veya yakınlaştırma düğmelerine tıklayın.
Temel ölçümler
Sorgu düzeyi
-
Özet ölçümler
Metric
Description
Total
Planlama, Yürütme ve Profil Oluşturma aşamalarında geçen süreler dahil sorgunun toplam geçen süresi.
QueryCpuCost
Sorgunun tükettiği kümülatif CPU süresi. Bu değer, tüm eşzamanlı işlemlerden gelen CPU sürelerinin toplamıdır; bu nedenle gerçek yürütme süresini aşabilir.
QueryMemCost
Sorgunun tükettiği toplam bellek.
Variables
Sorguyla ilişkili değişkenler. -
İşlem hattı düzeyi
Metric
Description
ActiveTime
Sürücü yürütme süresi.
DriverTotalTime
Sürücünün tükettiği toplam süre.
PendingTime
Sürücünün girdilerini ve önkoşullarını beklediği süre.
Operatör düzeyi
-
Genel operatör ölçümleri
Metric
Description
OperatorTotalTime
Operatörün toplam yürütme süresi.
PushRowNum
Operatörün ürettiği toplam satır sayısı.
PullRowNum
Operatöre giren toplam satır sayısı.
PullChunkNum
Operatöre giren toplam yığın (chunk) sayısı.
PushChunkNum
Operatörün ürettiği toplam yığın (chunk) sayısı.
PeakMemoryUsage
Operatörün en yüksek bellek kullanımı. -
OLAP Tarama (Scan) Operatörü
Metric
Description
Table
Tablo adı.
ScanTime
Eşzamansız G/Ç iş parçacığı havuzunda gerçekleştirilen tarama işlemleri için harcanan toplam süre.
TabletCount
Taranan tablet sayısı.
PushdownPredicates
Aşağı itilen (pushed-down) yüklemelerin sayısı.
BytesRead
Okunan veri miktarı.
CompressedBytesRead
Okunan sıkıştırılmış veri miktarı.
IOTime
Toplam G/Ç süresi.
BitmapIndexFilterRows
Bitmap dizinleriyle filtrelenen satır sayısı.
BloomFilterFilterRows
Bloom filtresiyle filtrelenen satır sayısı.
SegmentRuntimeZoneMapFilterRows
Çalışma zamanı bölge haritasıyla filtrelenen satır sayısı.
SegmentZoneMapFilterRows
Bölge haritasıyla filtrelenen satır sayısı.
ShortKeyFilterRows
Kısa anahtarla filtrelenen satır sayısı.
ZoneMapIndexFilterRows
Bölge haritası diziniyle filtrelenen satır sayısı. -
Connector Tarama (Scan) Operatörü
Bu ölçümler, OLAP Tarama Operatörü ölçümlerine ek olarak hesaplama ve depolama ayrımı kullanan örnekler için geçerlidir.
Metric
Description
CompressedBytesReadLocalDisk
Hesaplama düğümündeki yerel önbellekten okunan sıkıştırılmış veri miktarı.
CompressedBytesReadRemote
OSS'den okunan toplam sıkıştırılmış veri miktarı.
IOTimeLocalDisk
Verileri yerel önbellekten okurken G/Ç işlemleri için harcanan süre.
IOTimeRemote
Verileri OSS'den okurken G/Ç işlemleri için harcanan süre. -
Exchange Operatörü
-
Sink (Alıcı)
Metric
Description
PartType
Veri dağıtım modu. Geçerli değerler:UNPARTITIONED,RANDOM,HASH_PARTITIONEDveBUCKET_SHUFFLE_HASH_PARTITIONED.
BytesSent
Gönderilen veri miktarı.
OverallThroughput
Genel veri aktarım hızı.
NetworkTime
Paketlerin iletilmesi için harcanan süre; alım sonrası işleme süresi hariç.
WaitTime
Gönderen tarafındaki kuyruk dolu olduğu için harcanan bekleme süresi.
NetworkBandwidth
Veri aktarımı sırasında hesaplanan ağ bant genişliği. -
Source (Kaynak)
Metric
Description
SenderWaitLockTime
Gönderenin kilit için beklediği toplam süre.
BytesReceived
Alınan veri miktarı.
DecompressChunkTime
Veri yığınlarının sıkıştırmasını açmak için harcanan toplam süre.
DeserializeChunkTime
Veri yığınlarının serileştirmesini geri almak için harcanan toplam süre.
SenderTotalTime
Gönderenin harcadığı toplam süre.
-
-
Aggregate (Toplama) Operatörü
Metric
Description
GroupingKeys
GROUP BY yan tümcesinde kullanılan sütunlar.
AggregateFunctions
Uygulanan toplama işlevleri.
AggComputeTime
Toplama işlevlerini hesaplamak için harcanan süre.
ExprComputeTime
İfadeleri hesaplamak için harcanan süre.
HashTableSize
Toplama için kullanılan karma tablonun boyutu. -
Join (Birleştirme) Operatörü
-
Probe (Sonda)
Metric
Description
DistributionMode
Veri dağıtım modu.
JoinType
Birleştirme türü.
OtherJoinConjunctEvaluateTime
Diğer birleştirme bileşkelerini değerlendirmek için harcanan süre.
ProbeConjunctEvaluateTime
Sonda bileşkelerini değerlendirmek için harcanan süre.
SearchHashTableTime
Karma tabloyu aramak için harcanan süre.
WhereConjunctEvaluateTime
WHERE bileşkelerini değerlendirmek için harcanan süre. -
Build (Oluşturma)
Metric
Description
JoinPredicates
Birleştirme koşulunda kullanılan yüklemeler.
JoinType
Birleştirme türü.
BuildBuckets
Birleştirmenin karma tablosundaki kova sayısı.
BuildHashTableTime
Birleştirme için karma tabloyu oluşturmak için harcanan süre.
RuntimeFilterBuildTime
Çalışma zamanı filtresini oluşturmak için harcanan süre.
RuntimeFilterNum
Çalışma zamanı filtrelerinin sayısı.
DistributionMode
Veri dağıtım modu.
-
-
Window Function (Pencere İşlevi) Operatörü
Metric
Description
ComputeTime
Pencere işlevlerini hesaplamak için harcanan süre.
PartitionKeys
Pencereyi bölmek için kullanılan anahtarlar.
AggregateFunctions
Uygulanan toplama işlevleri. -
Sort (Sıralama) Operatörü
Metric
Description
SortKeys
Sıralama anahtarları.
SortType
Tam sıralama veya top-N sıralama gibi kullanılan sıralama yöntemi.
MergingTime
Sıralanmış veri bloklarını birleştirmek için harcanan süre.
SortingTime
Verileri sıralamak için harcanan süre. -
TableFunction (Tablo İşlevi) Operatörü
Metric
Description
TableFunctionExecTime
Tablo işlevini hesaplamak için harcanan süre.
TableFunctionExecCount
Tablo işlevinin yürütülme sayısı. -
Project (Projeksiyon) Operatörü
Metric
Description
ExprComputeTime
İfadeleri hesaplamak için harcanan süre.
CommonSubExprComputeTime
Ortak alt ifadeleri hesaplamak için harcanan süre. -
LocalExchange (Yerel Değişim) Operatörü
Metric
Description
Type
Yerel değişim türü. Geçerli değerler:Passthrough,PartitionveBroadcast.
ShuffleNum
Karıştırma (shuffle) sayısı. Bu ölçüm yalnızcaTypedeğeriPartitionolduğunda geçerlidir.