Zamanlanmış bir SQL (Scheduled SQL) işi, kaynak bir Logstore'daki verileri işler ve toplu sonuçları hedef bir Metricstore'a yazar.
Ön koşullar
Kaynak Logstore'da veri topladınız. Daha fazla bilgi için bkz. Veri toplama.
Kaynak Logstore için bir dizin oluşturdunuz. Daha fazla bilgi için bkz. Dizin oluşturma.
Hedef Metricstore'u oluşturdunuz. Daha fazla bilgi için bkz. Metricstore oluşturma.
Bu konuda bahsedilen Logstore, bir Standart Logstore'dur. Daha fazla bilgi için bkz. Logstore'ları yönetme.
Yordam
Zamanlanmış SQL özelliği genel ön izleme aşamasındadır ve ücretsizdir. Genel ön izleme sona erdiğinde, Dedicated SQL tarafından tüketilen hesaplama kaynakları için ücretlendirilirsiniz. Faturalandırma ayrıntıları için özellik bazlı ödeme modunun faturalandırılabilir öğelerine bakın.
Simple Log Service konsolu oturumunu açın.
Proje listesinde hedef Projeyi tıklayın.
sekmesinde hedef Logstore'u tıklayın.
-
Bir sorgu ve analiz ifadesi girin, ardından sorgu ve analiz için bir zaman aralığı ayarlamak üzere Last 15 Minutes seçeneğini tıklayın.
Daha fazla bilgi için bkz. Adım 1: Dizin yapılandırma.
NotZamanlanmış SQL işini ön izlemek ve sorgu ile analiz ifadenizin geçerli olduğunu ve veri döndürdüğünü doğrulamak için bu adımı kullanın.
Graph sekmesinde Save as Scheduled SQL Job seçeneğini tıklayın.
-
Zamanlanmış bir SQL işi oluşturun.
-
Compute Settings sihirbazında aşağıdaki parametreleri yapılandırın ve Next seçeneğini tıklayın.
Parametre
Açıklama
Task Name
Zamanlanmış SQL işinin benzersiz adı.
Display Name
Zamanlanmış SQL işinin görünen adı.
Job Description
Zamanlanmış SQL işinin açıklaması.
Resource Pool
Simple Log Service, veri analizi için geliştirilmiş kaynak havuzları sağlar.
Geliştirilmiş bir kaynak havuzu, Dedicated SQL hesaplama gücünden yararlanır, yeterli eşzamanlılık sağlar ve kaynakları konsol SQL işlemlerinizden izole eder. Tüketilen CPU süresine göre ücretlendirilirsiniz. Daha fazla bilgi için bkz. Yüksek performanslı ve yüksek doğruluklu sorgu ve analiz (Dedicated SQL).
Write Mode
Kaynak Logstore'daki verileri işlemek ve bunları hedef Metricstore'da depolamak için Import Data from Logstore to Metricstore seçeneğini belirleyin.
SQL Code
Adım 4'te girdiğiniz sorgu ve analiz ifadesini görüntüler. İfadenin geçerli olduğunu ve veri döndürdüğünü doğrulamak için sonuçları ön izleyin.
İş çalıştırıldığında, Simple Log Service verileri analiz etmek için bu ifadeyi yürütür.
SQL Settings
Metric Column
Simple Log Service, sorgu ve analiz ifadenize göre verileri toplar. Sonuçlardan sayısal değerlere sahip bir veya daha fazla sütunu ölçüm sütunları olarak seçin. Daha fazla bilgi için bkz. zaman serisi verileri.
Labels
Simple Log Service, sorgu ve analiz ifadenize göre verileri toplar. Sonuçlardan bir veya daha fazla sütunu etiket olarak seçin. Daha fazla bilgi için bkz. zaman serisi verileri.
Rehash
Bir Hash Column yapılandırmak için Rehash özelliğini etkinleştirin. Aynı karma sütun değerine sahip veriler tek bir parçaya yazılır; bu durum veri yerelitesini ve sorgu verimliliğini artırır.
Sorgu ve analiz sonuçlarından karma sütun olarak bir veya daha fazla sütun seçin. Örneğin, Hash Column değerini status olarak ayarlarsanız, aynı status alan değerine sahip veriler aynı parçaya yazılır.
Time Column
-
Unix zaman damgaları içeren bir sütun seçerseniz (örneğin,
atime:1627025331), sistem bu değerleri zaman serisi verilerinin zaman damgaları olarak kullanır. -
Null seçeneğini belirlerseniz, sistem sorgu ve analiz zaman aralığının başlangıç saatini zaman serisi verilerinin zaman damgası olarak kullanır.
Daha fazla bilgi için bkz. zaman serisi verileri.
Additional Labels
Ölçümlerin ilgili niteliklerini tanımlamak için anahtar-değer çiftleri halinde statik etiketler ekleyin.
Örneğin,
label_keydeğeriniappvelabel_valuedeğeriniingress-nginxolarak ayarlayın.Source Project/Logstore
Kaynak verilerin bulunduğu Proje ve Logstore.
Target
Destination Region
Hedef Projenin bulunduğu bölge.
Destination Project
SQL analiz sonuçlarının depolandığı hedef Projenin adı.
Target Store
SQL analiz sonuçlarının depolandığı hedef Metricstore'un adı.
UyarıHedef deposunu mevcut kaynak depo olarak yapılandırmayın (aynı kaynak yapılandırması). Aksi takdirde, günlükler döngüsel olarak yazılabilir; bu durum ek depolama ve trafik maliyetlerine yol açar. Oluşan kaynak tüketimi ve maliyetlerden siz sorumlusunuz.
Write Authorization
Zamanlanmış SQL işine, hedef Metricstore'a veri yazma izni verin.
-
Default Role: Zamanlanmış SQL işini, yürütme sonuçlarını hedef Metricstore'a yazmak için AliyunLogETLRole sistem rolünü kullanmaya yetkilendirir.
-
Custom Role: Zamanlanmış SQL işini, yürütme sonuçlarını hedef Metricstore'a yazmak için özel bir rol kullanmaya yetkilendirir.
Öncelikle gerekli izinleri özel RAM rolüne vermeniz ve ardından ARN değerini Role ARN alanına girmeniz gerekir. Daha fazla bilgi için bkz. Özel bir RAM rolüne hedef Logstore'a veri yazma izni verme.
SQL Execution Authorization
Zamanlanmış SQL işine, kaynak Logstore'dan veri okuma ve mevcut Projede SQL analizi çalıştırma izni verin.
-
Default Role: Zamanlanmış SQL işini, gerekli işlemleri gerçekleştirmek için AliyunLogETLRole sistem rolünü kullanmaya yetkilendirir.
-
Custom Role: Zamanlanmış SQL işini, gerekli işlemleri gerçekleştirmek için özel bir rol kullanmaya yetkilendirir.
Öncelikle gerekli izinleri özel role vermeniz ve ardından ARN değerini Role ARN alanına girmeniz gerekir. Daha fazla bilgi için bkz. Özel bir RAM rolüne kaynak Logstore'daki verileri analiz etme izni verme.
-
-
Scheduling Settings sihirbazında aşağıdaki parametreleri yapılandırın ve OK seçeneğini tıklayın.
Parametre
Açıklama
Scheduling Interval
İşin çalışma sıklığı. Her çalıştırma bir yürütme örneği oluşturur.
-
Fixed Interval: İş sabit bir aralıkla planlanır.
-
Cron: İş bir cron ifadesine göre planlanır.
Bir cron ifadesi için minimum hassasiyet bir dakikadır. Saat 24 saatlik biçimdedir. Örneğin,
0 0/1 *ifadesi işin her saat başı, 00:00'dan başlayarak çalıştığını belirtir.Bir saat dilimi yapılandırmanız gerekiyorsa Cron seçeneğini belirleyin. Yaygın saat dilimlerinin listesi için bkz. Saat dilimi biçimleri.
Scheduling Time Range
İşin planlandığı zaman aralığı.
-
From Specific Time: İlk yürütme örneği için başlangıç saatini belirtin.
-
Specific Time Range: Planlama için bir başlangıç ve bitiş saati belirtin. İş yalnızca bu zaman aralığında yürütülebilir.
Not-
Bir yürütme örneğinin planlanan zamanı bu aralık içinde olmalıdır. Planlanan zaman bu aralığın dışına düşerse iş yeni örnekler oluşturmayı durdurur.
-
Planlama zaman aralığı,
__time__ayrılmış alanıyla eşleşir. Daha fazla bilgi için bkz. Ayrılmış alanlar.
SQL Time Window
Zamanlanmış SQL işi çalıştırıldığında analiz edilecek günlüklerin zaman aralığı. SQL zaman penceresi, yürütme örneğinin planlanan zamanı ile birlikte çalışır. Zaman aralığı, Scheduling Interval değerinin beş katından fazla olamaz ve bir günü aşamaz. Daha fazla bilgi için bkz. Zaman ifadesi sözdizimi.
Örneğin, Scheduling Interval değeri fixed interval of 10 minutes, Start At değeri 2021-04-01 00:00:00, Delay Task değeri 30 seconds ve SQL Time Window değeri [@m-10m,@m) ise ilk yürütme örneği 00:00:30'da oluşturulur. Bu örnek,
[23:50:00, 00:00:00)zaman aralığındaki günlükleri analiz eder. Daha fazla bilgi için bkz. Planlama ve yürütme senaryoları.Not-
SQL zaman penceresi,
__time__ayrılmış alanıyla eşleşir. Daha fazla bilgi için bkz. Ayrılmış alanlar. -
SQL kodunda
__time__tanımlanmamışsa, hedef Metricstore'a yazılan verilerin__time__değeri varsayılan olarak SQL zaman penceresinin başlangıç saatine ayarlanır.
SQL Timeout
Başarısız olan SQL analizi işlemlerini yeniden deneme için zaman aşımı süresi. Sistem başarısızlık durumunda otomatik olarak yeniden dener. Yeniden denemeler bu zaman aşımını veya maksimum yeniden deneme sayısını aşarsa örnek durumu Başarısız olarak değişir. Daha sonra hata nedenine göre manuel olarak yeniden deneyebilirsiniz. Daha fazla bilgi için bkz. Zamanlanmış bir SQL işi örneğini yeniden deneme.
Delay Task
Planlanan saatten sonra yürütmeyi geciktirme süresi (saniye cinsinden). Değer 0 ile 120 arasında bir tamsayı olmalıdır.
Metricstore'a veri alımında gecikme olması durumunda veri bütünlüğünü sağlamak için bir gecikme ayarlayın.
Zamanlanmış SQL işini oluşturduktan sonra yürütme sonuçlarını hedef Metricstore'da görüntüleyebilirsiniz.
-
-