Hızlı ön izleme özelliği, veri işleme deyimlerini ücretsiz olarak hızla doğrulamanıza ve çıktıyı kontrol etmenize olanak tanır. Bu konuda özelliğin nasıl kullanılacağı açıklanmakta ve bir örnek sunulmaktadır.
Ön koşullar
Veriler toplanmıştır. Daha fazla bilgi için bkz. veri toplama.
Yordam
Simple Log Service konsolu oturumunu açın.
-
Veri dönüştürme sayfasına gidin.
Projects bölümünde istediğiniz projeyi tıklayın.
sekmesinde istediğiniz logstore'u tıklayın.
Sorgu ve analiz sayfasında Data Transformation öğesini tıklayın.
-
Sağ üst köşede veriler için bir zaman aralığı seçin.
Zaman aralığını seçtikten sonra Raw Logs sekmesinde günlüklerin göründüğünden emin olun.
-
Düzenleyiciye veri işleme deyimini girin.
Sözdizimi hakkında daha fazla bilgi için bkz. veri işleme sözdizimi.
NotDüzenleyici, veri işleme deyimlerinde yorumları destekler. Kodunuzu satır satır hata ayıklamak için bu özelliği kullanabilirsiniz.
-
Verileri ön izleyin.
Sayfanın sağ üst köşesinde Quick öğesini tıklayın.
Sayfanın alt kısmında Test Data öğesini tıklayın.
-
Test Data sekmesinde test verilerini girin.
Test verileri temel verileri ve boyut tablosu verilerini içerir.
{ "time_local": "25/May/2020:01:56:22", "user agent": "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.18 (KHTML, like Gecko) Chrome/11.xxx) Safari/534.18", "request:method": "GET", "remote user": "john" }-
Data sekmesinde test verilerini ayarlayın.
Raw Logs sekmesinde bir günlük girişi bulun ve örnek olarak eklemek için Add Test Data öğesini tıklayın. Test verilerini manuel olarak da girebilirsiniz.
NotTek bir ön izleme için test verilerinin boyutu 1 MB'ı aşamaz.
Birden çok test verisi girişini boş bir satırla ayırın.
Birden çok satıra yayılan alan değerlerinin tek bir alan olarak ayrıştırılmasını sağlamak için değeri üçlü geri tırnak içine alın (
).Data sekmesinde test verileri anahtar-değer (KV) veya JSON formatında olabilir. KV formatında bir anahtarı değerinden ayırmak için iki nokta üst üste işareti (:) kullanın.
-
Örnek 1: Bu örnekte iki test girişi bulunmaktadır. İlki KV formatındadır ve çok satırlı bir
tracebackalanı içerir. İkincisi JSON formatındadır.time_local: 25/May/2020:01:56:22 user agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.18 (KHTML, like Gecko) Chrome/11.0.661.0 Safari/534.18 "request:method": GET traceback: Traceback (most recent call last): File "traceback_print_exc.py", line 20, in <module> produce_exception() File "/home/user/code/test.py", line 16, in produce_exception produce_exception(recursion_level-1) File "/home/user/code/test.py", line 18, in produce_exception raise RuntimeError() RuntimeError { "time_local": "25/May/2020:01:56:22", "user agent": "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.18 (KHTML, like Gecko) Chrome/11.0.661.0 Safari/534.18", "request:method": "GET", "remote user": "john" } -
Örnek 2: Üç test verisi girişi içeren tek bir JSON dizisi.
[ { "time_local": "25/May/2020:01:56:22", "user agent": "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.18 (KHTML, like Gecko) Chrome/11.0.661.0 Safari/534.18", "request:method": "GET", "remote user": "john" }, { "time_local": "25/May/2020:01:56:22", "user agent": "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.18 (KHTML, like Gecko) Chrome/11.0.661.0 Safari/534.18", "request:method": "GET", "remote user": "john" }, { "time_local": "25/May/2020:01:56:22", "user agent": "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) AppleWebKit/534.18 (KHTML, like Gecko) Chrome/11.0.661.0 Safari/534.18", "request:method": "GET", "remote user": "john" } ]
-
Dimension Table sekmesinde test verilerini ayarlayın.
Boyut tablosu, kaynak işlevleri için örnek veriler sağlar ve bu sayede günlüklerinizi harici verilerle zenginleştirebilirsiniz. Bu durum, ön izleme sırasında bu işlevleri test etmenize ve hata ayıklamanıza olanak tanır.
NotDimension Table sekmesinde,
res_rds_mysqlveyares_log_LogStore_pullkaynak işlevleri için test verilerine ait veri örneği CSV formatında olmalıdır; ancakres_oss_fileveyares_localkaynak işlevleri için CSV veya JSON formatında olabilir.Örnek: Aşağıdaki örnekte iki test verisi girişi bulunmaktadır. İlki CSV formatında, ikincisi ise JSON formatındadır.
ip,country,province 127.0.0.1,China,Shanghai 192.168.0.0,China,Zhejiang [ { "ip": "127.0.0.1", "country": "China", "province": "Shanghai" }, { "ip": "192.168.0.0", "country": "China", "province": "Zhejiang" } ]
-
-
Preview Data öğesini tıklayın.
NotHer ön izleme en fazla 100 işleme sonucu döndürür.
Ardından sonuçları Transformation Results sekmesinde görüntüleyebilirsiniz.
Geçersiz bir deyim veya hatalı izinler nedeniyle veri işleme başarısız olursa sorunu çözmek için ekrandaki talimatları uygulayın.
İşleme sonuçları beklendiği gibiyse deyimi uygulamak için bir veri dönüştürme işi oluşturabilirsiniz. Daha fazla bilgi için bkz. Veri dönüştürme işi oluşturma.
Hızlı ön izleme örneği
-
Veri işleme deyimi
Düzenleyiciye aşağıdaki veri işleme deyimini girin.
# e_set("insert_field", "test_value") e_table_map( res_rds_mysql( address="rm-uf6wjk5****.mysql.rds.aliyuncs.com", username="test_username", password="****", database="test_db", table="test_table", ), "ip", ["country", "province"], ) -
Test verileri
sekmesinde aşağıdaki içeriği girin.
{ "id": "1001", "ip": "127.0.0.1" } -
Boyut tablosu verileri
sekmesinde aşağıdaki içeriği girin.
ip,country,province 127.0.0.1,China,Shanghai 192.168.0.0,China,Zhejiang -
Ön izleme sonucu
Preview Data öğesini tıklayın. Transformation Results sekmesinde target0 için çıkan sonuçlarda şu alanlar gösterilir:
id:1001,ip:127.0.0.1,country:Chinaveprovince:Shanghai. Bu durum, boyut tablosunun günlüğücountryveprovincealanlarıyla başarıyla zenginleştirdiğini gösterir. summary of run results bölümünde Toplam: 1, Başarılı: 1, Başarısız: 0 bilgileri görüntülenir.