Simple Log Service (SLS) hizmet günlüğü özelliği, ayrıntılı, önemli ve görev çalıştırma günlüklerini kaydeder. Bu konuda, günlük türlerine ait günlük alanları açıklanmaktadır.
Günlük türleri
Hizmet günlüğü özelliğini etkinleştirdiğinizde, oluşturulacak hizmet günlüğü türlerini seçebilirsiniz. Aşağıdaki tabloda kullanılabilir günlük türleri listelenmektedir.
Özel sorgu ifadeleriniz için uyumluluğu sağlamak amacıyla, günlük türünü __topic__: XXX kullanarak belirtin.
|
Tür |
Genel Bakış |
Logstore adı |
Ayrıntılar |
Açıklama |
|
Ayrıntılı günlükler |
Projenizdeki tüm kaynaklarda gerçekleştirilen işlemleri; oluşturma, değiştirme, güncelleme, silme, okuma ve yazma işlemlerini kaydeder. Not
JDBC protokolü üzerinden yapılan erişimler günlüğe kaydedilmez. |
internal-operation_log |
Konsol, tüketici grupları ve SDK'lar gibi istemcilerden gelen istekler dahil olmak üzere tüm API istekleri ve işlemlerine ilişkin ayrıntılı işlem günlükleri. |
|
|
önemli günlükler |
Logstore düzeyindeki tüketici grubu gecikme günlüklerini ve Logtail hata, kalp atışı ile istatistik günlüklerini içerir. |
internal-diagnostic_log |
Tüketici grubu gecikme günlükleri her 2 dakikada bir oluşturulur. Tüketici grubu gecikme günlüklerini sorgulamak için sorgu ifadesinde |
|
|
Logtail hatalarını kaydeder. Her 30 saniyede bir günlük oluşturulur. Bu süre içinde aynı türde birden fazla hata oluşursa sistem yalnızca toplam oluşum sayısını ve rastgele seçilen bir hata mesajını kaydeder. Logtail uyarı günlüklerini sorgulamak için sorgu ifadesinde |
||||
|
Logtail toplama istatistiklerini kaydeder. Her 10 dakikada bir günlük oluşturulur. Logtail toplama günlüklerini sorgulamak için sorgu ifadesinde |
||||
|
Logtail'den gelen periyodik durum günlüklerini kaydeder. Her dakikada bir günlük oluşturulur. Logtail durum günlüklerini sorgulamak için sorgu ifadesinde |
||||
|
operasyonel günlükler |
Bir projedeki veri dönüştürme, Zamanlanmış SQL, veri içe aktarma ve veri taşıma işlerinin operasyonel ölçümleri ile operasyonel günlüklerini kaydeder. |
internal-diagnostic_log |
Her Zamanlanmış SQL örneği tamamlandıktan sonra bir günlük oluşturulur. Zamanlanmış SQL operasyonel günlüklerini sorgulamak için sorgu ifadesinde |
|
|
Veri dönüştürme, veri içe aktarma ve veri taşıma işleri için operasyonel günlükler |
Günlükler her dakika oluşturulur, ancak yalnızca işin veri kaynağında veri bulunuyorsa. Bu operasyonel günlükleri sorgulamak için sorgu ifadesinde |
Ayrıntılı günlükler
Method alanına göre ayrıntılı günlükler; okuma işlemleri, yazma işlemleri ve kaynak işlemleri olarak üç kategoriye ayrılır.
|
Kategori |
İstek yöntemi |
|
Okuma işlemi |
Aşağıdaki API işlemlerini çağırdığınızda okuma işlemi günlükleri oluşturulur:
|
|
Yazma işlemi |
Aşağıdaki API işlemlerini çağırdığınızda yazma işlemi günlükleri oluşturulur:
|
|
Kaynak işlemi |
Diğer tüm API işlemleri kaynak işlemi günlükleri oluşturur. Örneğin, |
Ayrıntılı günlüklerdeki ortak alanlar
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
Okuma işlemi günlüklerine özgü alanlar
|
Parametre |
Açıklama |
Örnek |
|
BeginTime |
UNIX zaman damgası olarak temsil edilen isteğin başlangıç zamanı. |
1523868463 |
|
DataStatus |
Yanıtın veri durumu. Geçerli değerler arasında |
OK |
|
EndTime |
UNIX zaman damgası olarak temsil edilen isteğin bitiş zamanı. |
1523869363 |
|
Offset |
|
20 |
|
Query |
Orijinal sorgu ifadesi. |
UserAgent: [consumer-group-java]* |
|
RequestLines |
İstenen satır sayısı. |
100 |
|
ResponseLines |
Döndürülen satır sayısı. |
100 |
|
Reverse |
Günlüklerin zaman damgalarına göre döndürülme sırası.
|
0 |
|
TermUnit |
Belirteçlere ayrıldıktan sonra sorgu ifadesindeki sözcük sayısı. |
0 |
|
Topic |
Günlük konusu. |
topic-1 |
Yazma işlemi günlüklerine özgü alanlar
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
Tüketici grubu gecikme günlükleri
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
Logtail uyarı günlükleri
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
Logtail toplama günlükleri
Logtail toplama günlükleri, file_name alanına göre iki türe sınıflandırılır.
Tek bir günlük dosyası için toplama istatistikleri.
Bir Logstore için toplama istatistikleri; burada file_name alanı
logstore_statisticsolarak ayarlanır.
Bu tabloda Logtail toplama günlüklerinde bulunan alanlar açıklanmaktadır.
|
Parametre |
Açıklama |
Örnek |
|
Logstore |
Logstore'un adı. |
Logstore-1 |
|
config_name |
Logtail yapılandırmasının adı. Ad küresel olarak benzersizdir ve |
##1,0##project-1$LogStore-1 |
|
error_line |
Hataya neden olan ham günlük girişi. |
M_INFO_COL,all_status_monitor,T22380,0,2018-04-17 10:48:25,0,AY66K,AM5,2018-04-17 10:48:25,0,2018-04-17 10:48:30,561,i-23xebl5ni.1569395,715455,901,00789b |
|
file_dev |
Günlük dosyasının cihaz kimliği. Not
|
123 |
|
file_inode |
Günlük dosyasının inode'u. Not
|
124 |
|
file_name |
Günlük dosyasının tam yolu veya |
/abc/file_1 |
|
file_size |
Günlük dosyasının bayt cinsinden boyutu. |
12345 |
|
history_data_failures |
Birikimli veri işleme hatası sayısı. |
0 |
|
last_read_time |
Zaman penceresi içindeki en son okuma işleminin UNIX zaman damgası. |
1525346677 |
|
Project |
Project'in adı. |
project-1 |
|
logtail_version |
Logtail sürümü. |
0,14,2 |
|
os |
İşletim sistemi. |
Windows |
|
parse_failures |
Zaman penceresi içinde ayrıştırılamayan satır sayısı. |
12 |
|
read_avg_delay |
Zaman penceresi içindeki her okuma işlemi için dosya boyutu ile okuma ofseti arasındaki ortalama fark. |
65 |
|
read_count |
Zaman penceresi içindeki okuma işlemi sayısı. |
10 |
|
read_offset |
Dosyadaki mevcut okuma ofseti (bayt cinsinden). |
12345 |
|
regex_match_failures |
Normal ifade eşleştirme hatası sayısı. |
1 |
|
send_failures |
Zaman penceresi içinde başarısız olan gönderme işlemi sayısı. |
12 |
|
source_ip |
Logtail'in yüklü olduğu sunucunun IP adresi. |
47.100.. |
|
succeed_lines |
Başarıyla işlenen günlük satırı sayısı. |
123 |
|
time_format_failures |
Zaman biçimi eşleştirme hatası sayısı. |
122 |
|
total_bytes |
Okunan toplam bayt sayısı. |
12345 |
Aşağıdaki alanlar yalnızca file_name alanının logstore_statistics olarak ayarlandığı Logstore istatistiklerinde görünür.
|
Parametre |
Açıklama |
Örnek |
|
send_block_flag |
Zaman penceresinin sonunda gönderme kuyruğunun engellenip engellenmediğini gösterir. |
false |
|
send_discard_error |
Zaman penceresi içinde veri hataları veya yetersiz izinler nedeniyle atılan paket sayısı. |
0 |
|
send_network_error |
Zaman penceresi içinde ağ hataları nedeniyle gönderilemeyen paket sayısı. |
12 |
|
send_queue_size |
Zaman penceresinin sonunda gönderme kuyruğundaki gönderilmemiş paket sayısı. |
3 |
|
send_quota_error |
Zaman penceresi içinde kota aşıldığı için gönderilemeyen paket sayısı. |
0 |
|
send_success_count |
Zaman penceresi içinde başarıyla gönderilen paket sayısı. |
12345 |
|
sender_valid_flag |
Zaman penceresinin sonunda Logstore için gönderme işaretinin geçerli olup olmadığını gösterir. Geçerli değerler:
|
true |
|
max_send_success_time |
Zaman penceresi içindeki en son başarılı gönderme işleminin UNIX zaman damgası. |
1525342763 |
|
max_unsend_time |
Zaman penceresi içinde gönderme kuyruğundan gönderilemeyen en son paketin UNIX zaman damgası. Kuyruk boşsa değer 0'dır. |
1525342764 |
|
min_unsend_time |
Zaman penceresi içinde gönderme kuyruğundan gönderilemeyen en eski paketin UNIX zaman damgası. Kuyruk boşsa değer 0'dır. |
1525342764 |
Logtail durum günlükleri
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
detail_metric alanı aşağıdaki alanları içeren bir JSON nesnesidir.
|
Parametre |
Açıklama |
Örnek |
|
config_count |
Logtail yapılandırma sayısı. |
1 |
|
config_get_last_time |
Logtail yapılandırmasının en son alındığı zaman. |
2021-07-20 16:19:22 |
|
config_update_count |
Logtail başladıktan bu yana gerçekleşen Logtail yapılandırma güncelleme sayısı. |
1 |
|
config_update_item_count |
Logtail başladıktan bu yana güncellenen toplam Logtail yapılandırma öğesi sayısı. |
1 |
|
config_update_last_time |
Son Logtail yapılandırma güncellemesinin zaman damgası. |
2021-07-20 16:18:42 |
|
env_config |
Logtail yapılandırmasının ortam değişkenleri kullanılarak oluşturulup oluşturulmadığını gösterir. |
false |
|
event_tps |
Saniye başına olay sayısı (TPS). |
1 |
|
last_read_event_time |
Son okunan olayın zaman damgası. |
2021-07-20 16:18:42 |
|
last_send_time |
Verilerin en son gönderildiği zaman damgası. |
2021-07-20 16:18:42 |
|
multi_config |
Aynı dosyanın birden çok Logtail yapılandırması tarafından toplanıp toplanmadığını gösterir. |
false |
|
net_err_stat |
Son 1, 5 ve 15 dakika içinde meydana gelen ağ hatası sayısı. |
0,0,0 |
|
open_fd |
Şu anda açık olan dosya tanımlayıcı sayısı. |
1 |
|
plugin_enabled |
Eklenti işlevinin etkin olup olmadığını gösterir.
|
false |
|
poll_modify_size |
Değişiklik olayları için izlenen dosya sayısı. |
1 |
|
polling_dir_cache |
Anket önbelleğindeki dizin sayısı. |
1 |
|
polling_file_cache |
Anket önbelleğindeki dosya sayısı. |
1 |
|
process_bytes_ps |
Saniyede işlenen günlük hacmi (bayt cinsinden). |
1000 |
|
process_lines_ps |
Saniyede işlenen günlük satırı sayısı. |
1000 |
|
process_queue_full |
Dolu işlem kuyruğu sayısı. |
1 |
|
process_queue_total |
İşlem kuyruğu sayısı. |
10 |
|
process_tps |
Saniyedeki işlem işlemi sayısı (TPS). |
0 |
|
reader_count |
Şu anda okunmakta olan dosya sayısı. |
1 |
|
region |
Ana bilgisayar makinesinin bulunduğu bölge. |
cn-hangzhou |
|
register_handler |
İzleme için kaydedilen dizin sayısı. |
1 |
|
send_bytes_ps |
Saniyede gönderilen ham günlük hacmi (bayt cinsinden). |
11111 |
|
send_lines_ps |
Saniyede gönderilen günlük satırı sayısı. |
1000 |
|
send_net_bytes_ps |
Saniyede gönderilen ağ trafiği hacmi (bayt cinsinden). |
1000 |
|
send_queue_full |
Dolu gönderme kuyruğu sayısı. |
1 |
|
send_queue_total |
Gönderme kuyruğu sayısı. |
12 |
|
send_request_concurrency |
Maksimum eşzamanlı gönderme isteği sayısı. |
10 |
|
send_tps |
Saniyedeki gönderme işlemi sayısı (TPS). |
0,075 |
|
sender_invalid |
Hata durumunda olan gönderme kuyruğu sayısı. |
0 |
|
start_time |
Logtail işleminin başlatılma zamanı. |
2021-07-20 16:19:22 |
|
used_sending_concurrency |
Mevcut etkin gönderme isteği sayısı. |
0 |
Zamanlanmış SQL işi çalıştırma günlükleri
|
Alan |
Açıklama |
Örnek |
|
__topic__ |
Günlük konusu. Her zaman |
scheduled_sql_alert |
|
project |
Zamanlanmış SQL işini içeren proje. |
my-project-name |
|
job_name |
Zamanlanmış SQL işinin adı. |
sql-16xxxxxxx-xxxxxx |
|
schedule_id |
Zamanlama kimliği. |
77****ca |
|
job_type |
Zamanlanmış SQL işinin türü. Her zaman |
ScheduledSQL |
|
instance_id |
Örnek kimliği. |
7e****dc |
|
create_time |
Saniye cinsinden UNIX zaman damgası olarak ifade edilen örneğin oluşturma zamanı. |
1652343365 |
|
schedule_time |
Saniye cinsinden UNIX zaman damgası olarak ifade edilen örneğin planlanan zamanı. |
1652343360 |
|
trigger_time |
Saniye cinsinden UNIX zaman damgası olarak ifade edilen örneğin çalıştırılmak üzere tetiklenme zamanı. |
1652343365 |
|
__time__ |
Saniye cinsinden UNIX zaman damgası olarak ifade edilen örnek çalıştırmasının bitiş zamanı. |
1652343366 |
|
status |
Örneğin yürütme durumu. Olası değerler |
FAILED |
|
error_code |
Örnek çalıştırması başarısız olursa hata kodu. |
SQLFailed |
|
error_message |
Örnek çalıştırması başarısız olursa ayrıntılı hata mesajı. |
sql syntax error |
|
fallbehind |
|
85 |
|
succeed_lines |
|
100 |
ETL işleri için operasyonel günlükler
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
_etl_:connector_meta alanı aşağıdaki alt alanları içerir.
|
Parametre |
Açıklama |
Örnek |
|
action |
İşin gerçekleştirdiği işlem. Geçerli değerler:
|
ingest |
|
connector |
Veri kaynağının veya hedefinin türü.
|
oss |
|
instance |
Kaynak veya hedef örneğinin adı. |
my-oss-bucket |
|
task_id |
Görev kimliği. |
1669277 |
|
task_name |
Görev adı. |
1652765276578_task_0 |
|
task_type |
Görevin türü. Değer her zaman |
CONNECTOR |
_etl_:connector_metrics alanı aşağıdaki alt alanları içerir.
|
Parametre |
Açıklama |
Örnek |
|
state |
İşin operasyonel durumu.
|
0 |
|
error |
İşin hata mesajı. Bu alan yalnızca bir hata oluştuğunda mevcuttur. |
fail to pull logs, unauthorized |
|
lags |
İşin ilerleme durumu. lags alanı yalnızca veri okuma işleri için, yani action alanının değeri ingest olduğunda günlüklerde bulunur. Bu alanın değeri veri kaynağı türüne (connector alanı) bağlıdır.
|
0,813 |
|
desc |
Veri okuma işleri için, yani action alanı ingest olarak ayarlandığında, desc alanı günlükte bulunur. Bu alanın değeri veri kaynağı türüne (connector alanı) bağlıdır.
|
s |
|
events |
Raporlama aralığında işlenen veri girdisi sayısı. |
13245 |
|
failed |
Raporlama aralığında işlenemeyen veri girdisi sayısı. |
3 |
|
native_bytes |
Raporlama aralığında işlenen verinin bayt cinsinden ham boyutu. |
7539125 |
|
events_bytes |
Raporlama aralığında işlenen ayrıştırılmış verinin bayt cinsinden boyutu. |
13295475 |
|
pub_net_bytes |
Raporlama aralığında işlenen veriler tarafından oluşturulan İnternet trafiği (bayt cinsinden). |
45678 |
|
req_count |
Raporlama aralığında veri kaynağına veya hedefine gönderilen istek sayısı. |
89 |
|
rep_time |
Raporlama aralığında veri kaynağı veya hedefi için ortalama istek gecikme süresi. |
38 |
|
rate_limit_hits |
Raporlama aralığında veri kaynağı veya hedefindeki hız sınırı aşımı sayısı. |
1 |
|
extras |
Ek bilgiler. Bu alan yalnızca bir değer mevcut olduğunda dahil edilir. Bu alanın değeri veri kaynağı türüne (connector alanı) bağlıdır. |
{"events":"898","objectName":"shenzhen/2022/05/18/15/19_1652858350000000000_315eb857efeb9f00.snappy","objectSize":"212792"} |