Layanan Log Sederhana mendukung penyimpanan log yang dikirim ke Object Storage Service (OSS) dalam format CSV. Anda dapat mengonfigurasi delimiter, karakter escape, dan parameter CSV lainnya saat membuat pekerjaan pengiriman OSS.
Konfigurasi parameter
Saat membuat pekerjaan pengiriman OSS, atur Storage Format menjadi csv dan konfigurasikan parameter berikut.
Tabel berikut mencantumkan parameter tersebut. Untuk informasi lebih lanjut, lihat standar CSV dan dokumentasi CSV PostgreSQL.
|
Parameter |
Deskripsi |
|
CSV Keys |
Lihat field log pada tab Raw Logs dan masukkan nama field yang akan dikirim ke OSS sesuai urutan yang diinginkan. Layanan Log Sederhana juga menyediakan field terlestarikan seperti __time__, __topic__, dan __source__. Untuk informasi lebih lanjut tentang field terlestarikan, lihat Field terlestarikan. Catatan
|
|
Delimiter |
Karakter yang memisahkan field dalam entri log. Karakter yang didukung meliputi koma (,), bilah vertikal (|), spasi, dan tab. |
|
Quote |
Jika suatu field berisi delimiter, bungkus field tersebut dengan karakter escape untuk mencegah penguraian yang salah. |
|
Invalid Key Value |
Nilai placeholder untuk field yang ditentukan dalam CSV Keys tetapi tidak ada dalam log mentah. |
|
Shipping Field Name |
Jika diaktifkan, Layanan Log Sederhana menulis nama field sebagai baris pertama (header) file CSV. |
URL objek OSS
Objek OSS yang berisi log yang dikirim menggunakan struktur URL berikut.
-
Jika Anda menentukan sufiks objek kustom saat membuat pekerjaan pengiriman OSS, sufiks tersebut akan digunakan.
-
Jika tidak menentukan sufiks objek kustom, jenis kompresi akan menentukan sufiks tersebut.
|
Jenis kompresi |
Sufiks objek |
Contoh URL |
Deskripsi |
|
Tidak dikompresi |
Jika Anda menentukan sufiks objek kustom, seperti .suffix, nama objek diakhiri dengan sufiks tersebut. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix |
Anda dapat mengunduh file CSV yang tidak dikompresi dan membukanya dengan editor teks. |
|
Jika Anda tidak menentukan sufiks objek kustom, nama objek diakhiri dengan .csv. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.csv |
||
|
snappy |
Jika Anda menentukan sufiks objek kustom, seperti .suffix, nama objek diakhiri dengan sufiks tersebut. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix |
Untuk mempelajari cara membuka file terkompresi Snappy, lihat Buka file terkompresi Snappy. |
|
Jika Anda tidak menentukan sufiks objek kustom, nama objek diakhiri dengan .snappy.csv. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.snappy.csv |
||
|
gzip |
Jika Anda menentukan sufiks objek kustom, seperti .suffix, nama objek diakhiri dengan sufiks tersebut. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix |
Anda dapat mendekompresi file terkompresi Gzip dengan menggunakan perintah gzip. |
|
Jika Anda tidak menentukan sufiks objek kustom, nama objek diakhiri dengan .gz.csv. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.gz.csv |
||
|
zstd |
Jika Anda menentukan sufiks objek kustom, seperti .suffix, nama objek diakhiri dengan sufiks tersebut. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.suffix |
Anda dapat mendekompresi file terkompresi Zstandard dengan menggunakan perintah zstd. |
|
Jika Anda tidak menentukan sufiks objek kustom, nama objek diakhiri dengan .zst.csv. |
oss://oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.zst.csv |