Veri dönüştürme, verileri bir kaynak Logstore'dan okur, işler ve sonuçları bir veya daha fazla hedef Logstore'a yazar. Dönüştürülen verileri sorgulayıp analiz ederek ek içgörüler elde edebilirsiniz.
Ön koşullar
Simple Log Service içinde veri toplamış olmanız gerekir. Daha fazla bilgi için bkz. veri toplama.
Bir RAM kullanıcısıysanız veri dönüştürme için gerekli izinlere sahipsiniz. Daha fazla bilgi için bkz. RAM kullanıcısına veri dönüştürme izinleri verme.
Yordam
Simple Log Service konsolu adresine gidin ve oturum açın.
-
Veri dönüştürme sayfasına gidin.
Projects bölümünde istediğiniz projeyi tıklayın.
sekmesinde istediğiniz logstore'u tıklayın.
Sorgu ve analiz sayfasında Data Transformation öğesini tıklayın.
-
Sağ üst köşede veriler için bir zaman aralığı seçin.
Zaman aralığını seçtikten sonra Raw Logs sekmesinde günlüklerin görüntülendiğinden emin olun.
-
Düzenleyiciye bir veri dönüştürme ifadesi girin.
İfade sözdizimi hakkında daha fazla bilgi için bkz. Veri dönüştürme sözdizimi.
-
Verileri ön izleyin.
-
Quick öğesini tıklayın.
Simple Log Service Hızlı ve Gelişmiş ön izleme modlarını destekler. Daha fazla bilgi için bkz. Verileri ön izleme ve hata ayıklama.
-
Preview Data öğesini tıklayın.
Ön izleme sonuçlarını görüntüleyin.
Veri dönüştürme hatalı bir ifade veya izin hataları nedeniyle başarısız olursa sorunu çözmek için sayfadaki talimatları uygulayın.
Sonuçlar doğruysa 6 adıma geçin.
-
-
Bir veri dönüştürme işi oluşturun.
Save as Transformation Job (Old Version) öğesini tıklayın.
-
Create Data Transformation Job panelinde aşağıdaki parametreleri yapılandırın ve OK öğesini tıklayın.
Parametre
Açıklama
İş adı
Veri dönüştürme işinin adı.
Görünen ad
Veri dönüştürme işinin görünen adı.
İş açıklaması
Veri dönüştürme işinin açıklaması.
Yetkilendirme yöntemi
Kaynak Logstore'dan veri okuma yetkilendirme yöntemi.
-
Varsayılan Rol: İş, kaynak Logstore'dan veri okumak için
AliyunLogETLRolesistem rolünü üstlenir. -
Özel Rol: İş, kaynak Logstore'dan veri okumak için özel bir rolü üstlenir.
Öncelikle özel role kaynak Logstore'dan veri okuma izni vermelisiniz. Ardından Role ARN alanına özel rolün ARN değerini girin. Daha fazla bilgi için bkz. Verilere erişmek için özel rol kullanma.
Depolama hedefi
Hedef adı
Depolama hedefinin adı. Bir depolama hedefi proje ve Logstore gibi yapılandırmaları içerir.
Dönüştürme sonuçlarını farklı Logstore'larda saklamak için birden çok depolama hedefi oluşturabilirsiniz. Aşağıdaki hususlara dikkat edin:
-
Dönüştürme ifadenizde
e_output()veyae_coutput()işlevindekinameparametresini kullanarak Hedef adı değerini tanımlayabilirsiniz. Daha fazla bilgi için bkz. e_output. -
Dönüştürme ifadesi
e_output()işlevini içermiyorsa iş sonuçları varsayılan olarak ilk yapılandırılan hedef Logstore'a yazılır.Yalnızca bir hedef Logstore'unuz varsa genellikle
e_output()işlevine gerek yoktur. -
e_output()veyae_coutput()işlevindename,projectvelogstoreparametrelerini belirtirseniz bu ayarlar arayüzdeki Hedef proje ve Hedef logstore yapılandırmalarını geçersiz kılar.
Hedef bölge
Hedef projenin bölgesi.
Bölgeler arası veri dönüştürme veri gizliliğini sağlamak için HTTPS kullanır.
Bölgeler arası veri dönüştürme verileri genel internet üzerinden iletir; bu durum ağ kararsızlığından kaynaklanan gecikme süresine neden olabilir. Bölgeler arası aktarımı hızlandırmak için DCDN Acceleration onay kutusunu işaretleyin. Bu özelliği kullanmadan önce ilgili proje için hızlandırmanın etkinleştirildiğinden emin olun. Daha fazla bilgi için bkz. Günlük toplamayı hızlandırma.
NotBölgeler arası veri dönüştürme giden internet trafiğine (sıkıştırma sonrası) göre faturalandırılır. Daha fazla bilgi için bkz. Özellik bazlı ödeme.
Hedef proje
Dönüştürülen verilerin depolandığı proje.
Hedef logstore
Dönüştürme sonuçlarının depolandığı Logstore.
UyarıHedef Logstore'u kaynak Logstore ile aynı olarak ayarlamayın. Bu yanlış yapılandırma sonsuz bir veri döngüsüne neden olur ve ek depolama ile trafik maliyetleri doğurur. Bu hatadan kaynaklanan tüm ücretlerden siz sorumlusunuz.
Yetkilendirme yöntemi
Hedef Logstore'a veri yazma yetkilendirme yöntemi.
-
Varsayılan Rol: İş, sonuçları hedef Logstore'a yazmak için
AliyunLogETLRolesistem rolünü üstlenir. -
Özel Rol: İş, sonuçları hedef Logstore'a yazmak için özel bir rolü üstlenir.
Öncelikle özel role hedef Logstore'a veri yazma izni vermelisiniz. Ardından Role ARN alanına özel rolün ARN değerini girin. Daha fazla bilgi için bkz. Verilere erişmek için özel rol kullanma.
İşleme kapsamı
Zaman aralığı
Dönüştürülecek verilerin zaman aralığı.
NotBu zaman aralığı günlüklerin hizmet tarafından alındığı zamana dayanır.
-
All: Logstore'daki en eski mevcut zaman noktasından başlayarak işi manuel olarak durdurana kadar tüm günlükleri işler.
-
From Specific Time: Belirtilen bir başlangıç saatinden itibaren işi manuel olarak durdurana kadar günlükleri işler.
-
Specific Time Range: Belirtilen bir zaman aralığındaki günlükleri işler. İş aralığın sonuna ulaştığında otomatik olarak durur.
Gelişmiş seçenekler
Gelişmiş parametre yapılandırması
Dönüştürme ifadelerinde kullanılan veritabanı parolaları gibi hassas bilgiler için bilgileri bir sırda anahtar-değer çiftleri olarak kaydedin ve ifadede
res_local("key")kullanarak bunlara başvurun.Birden çok anahtar-değer çifti eklemek için + öğesini tıklayın. Örneğin,
config.vpc.vpc_id.test1:vpc-uf6mskb0b****n9yjbir RDS örneğinin bulunduğu VPC'nin kimliğini temsil edebilir. -
Sonraki adımlar
Veri dönüştürme işini oluşturduktan sonra şunları yapabilirsiniz:
Data Transformation Overview sayfasında iş ayrıntılarını görüntüleyin, işi değiştirin veya durdurun. Daha fazla bilgi için bkz. Veri dönüştürme işlerini yönetme.
Hedef Logstore'daki verileri sorgulayın ve analiz edin. Daha fazla bilgi için bkz. Sorgu ve analize giriş.