Konfigurasikan penyimpanan IA dan penyimpanan Archive untuk mengurangi biaya penyimpanan log - Simple Log Service

Simple Log Service (SLS) menyediakan fitur penyimpanan tier cerdas yang memungkinkan Anda menyimpan data di tier penyimpanan hot, Infrequent Access (IA), atau Archive sesuai kebutuhan bisnis. Fitur ini membantu mengurangi biaya penyimpanan jangka panjang tanpa memengaruhi kemampuan terkait log, seperti kueri, analisis, visualisasi, alerting, shipping, dan transformasi. Topik ini menjelaskan manajemen lifecycle penyimpanan data yang didukung oleh SLS.

Pengenalan penyimpanan tier cerdas

Jenis penyimpanan

Jenis penyimpanan	Deskripsi
Hot storage	Hot storage adalah solusi penyimpanan data yang scalable dan highly available. Simpan data yang sering diakses di tier hot storage. Akses data secara real time serta lakukan kueri dan analisis dengan performa tinggi. Hot storage cocok untuk skenario yang melibatkan kueri dan analisis data berfrekuensi tinggi.
IA storage	IA storage, sebelumnya dikenal sebagai cold storage, dapat digunakan untuk mengurangi biaya penyimpanan jangka panjang sekaligus memastikan kemampuan terkait log tidak terpengaruh. Kemampuan tersebut mencakup kueri, analisis, visualisasi, alerting, shipping, dan transformasi. IA storage cocok untuk skenario yang melibatkan kueri dan analisis data berfrekuensi rendah serta pelacakan masalah (problem backtracking).
Archive storage	Archive storage adalah solusi penyimpanan data jangka panjang yang memungkinkan Anda melakukan kueri dan analisis data dengan biaya lebih rendah dibandingkan hot storage dan IA storage. Archive storage cocok untuk skenario penyimpanan data jangka panjang untuk keperluan audit.

Periode retensi data

Penting

Periode retensi data suatu logstore merupakan jumlah dari periode retensi data untuk tier hot storage, tier IA storage, dan tier Archive storage.
Jika Anda mengatur periode retensi data logstore menjadi 3.650 hari, data akan disimpan secara permanen di logstore tersebut. Data dalam logstore tersebut akan tetap disimpan di tier Archive storage bahkan setelah 3.650 hari berlalu. Untuk informasi selengkapnya, lihat Atur periode retensi data dan hapus log.

Periode retensi data kurang dari 3.650 hari
Skenario 1: Periode retensi data logstore adalah 90 hari. Periode retensi data untuk tier hot storage dan tier Archive storage masing-masing adalah 30 hari dan 60 hari. Data di tier hot storage secara otomatis dipindahkan ke tier Archive storage ketika periode retensi untuk tier hot storage berakhir. Data di tier Archive storage secara otomatis dihapus ketika periode retensi untuk tier Archive storage berakhir.
Skenario 2: Periode retensi data logstore adalah 97 hari. Periode retensi data untuk tier hot storage, tier IA storage, dan tier Archive storage masing-masing adalah 7 hari, 30 hari, dan 60 hari. Data di tier hot storage secara otomatis dipindahkan ke tier IA storage ketika periode retensi untuk tier hot storage berakhir. Data di tier IA storage secara otomatis dipindahkan ke tier Archive storage ketika periode retensi untuk tier IA storage berakhir. Data di tier Archive storage secara otomatis dihapus ketika periode retensi untuk tier Archive storage berakhir.
Periode retensi data 3.650 hari atau lebih
Skenario 3: Periode retensi data logstore adalah 3.650 hari. Periode retensi data untuk tier hot storage dan tier Archive storage masing-masing adalah 30 hari dan 3.620 hari. Data di tier hot storage secara otomatis dipindahkan ke tier Archive storage ketika periode retensi untuk tier hot storage berakhir. Periode retensi 3.650 hari menunjukkan bahwa data disimpan secara permanen di logstore. Dalam hal ini, data yang telah disimpan di tier Archive storage selama 3.620 hari akan tetap disimpan di tier Archive storage bahkan setelah periode retensi tersebut berakhir.
Skenario 4: Periode retensi data logstore adalah 3.650 hari. Periode retensi data untuk tier hot storage, tier IA storage, dan tier Archive storage masing-masing adalah 7 hari, 30 hari, dan 3.613 hari. Periode retensi 3.650 hari menunjukkan bahwa data disimpan secara permanen di logstore. Dalam hal ini, data yang telah disimpan di tier Archive storage selama 3.613 hari akan tetap disimpan di tier Archive storage bahkan setelah periode retensi tersebut berakhir.

Perbandingan jenis penyimpanan

Item		Hot storage	IA storage	Archive storage
Skenario		Kueri dan analisis berfrekuensi tinggi serta berkinerja-tinggi	Pelacakan masalah (problem backtracking)	Audit data
Biaya		USD 0,002875 per GB-hari	USD 0,000762 per GB-hari	USD 0,000259 per GB-hari
Performa	Latensi (miliar catatan data)	Puluhan hingga ratusan milidetik	Ratusan milidetik hingga detik	Menit
Performa	Konkurensi (proyek)	Permintaan kueri konkuren: 100 Permintaan analisis konkuren: 2	Permintaan kueri konkuren: 10 Permintaan analisis konkuren: 2	Permintaan kueri konkuren: 1 Permintaan analisis konkuren: 1
Keunggulan		Kueri dan analisis dengan konkurensi tinggi	Kueri dan analisis berfrekuensi rendah serta efektivitas biaya tinggi	Kueri dan analisis sesekali serta biaya rendah
Keunggulan		Data secara otomatis dipindahkan antar tier penyimpanan berdasarkan manajemen siklus hidup data. Gunakan penyimpanan tier cerdas setelah konfigurasi sederhana. Anda tidak perlu menulis skrip atau memindahkan data secara manual. Data yang disimpan di tier IA atau Archive storage dapat diakses secara real time. Anda tidak perlu mengambil data secara manual atau memodifikasi aplikasi. Anda tidak dikenai biaya untuk pengambilan data (data retrieval).
Batas periode retensi data	Pay-by-feature	Data di tier hot storage harus disimpan minimal 7 hari sebelum dapat dipindahkan ke tier IA storage. Data di tier hot storage harus disimpan minimal 30 hari sebelum dapat dipindahkan ke tier Archive storage.	Data di tier IA storage harus disimpan minimal 30 hari sebelum dapat dipindahkan ke tier Archive storage.	Periode retensi minimum untuk tier Archive storage adalah 60 hari.
Batas periode retensi data	Pay-by-ingested-data	Anda tidak dikenai biaya penyimpanan data di tier hot storage selama 30 hari.

Perpindahan data antar tier penyimpanan

Data yang disimpan di tier hot storage, tier IA storage, dan tier Archive storage dapat dipindahkan antar tier penyimpanan. Tabel berikut menjelaskan perpindahan tersebut.

No.	Deskripsi
1	Data di tier hot storage harus disimpan minimal 7 hari sebelum dapat dipindahkan ke tier IA storage.
2	Data di tier hot storage harus disimpan minimal 30 hari sebelum dapat dipindahkan ke tier Archive storage.
3	Data di tier IA storage harus disimpan minimal 30 hari sebelum dapat dipindahkan ke tier Archive storage.
4	Ubah periode retensi data untuk tier hot storage guna memindahkan data dari tier IA storage ke tier hot storage.
5	Ubah periode retensi data untuk tier IA storage guna memindahkan data dari tier Archive storage ke tier IA storage.
6	Ubah periode retensi data untuk tier hot storage guna memindahkan data dari tier Archive storage ke tier hot storage.

Kelola tier penyimpanan

Konsol

Masuk ke Konsol Simple Log Service.
Pada bagian Projects, klik proyek yang diinginkan.
Pada tab Log Storage > Logstores, klik ikon dari logstore yang ingin dikelola, lalu klik Modify.

Pada halaman Logstore Attributes, klik Modify. Aktifkan Intelligent Tiered Storage. Lalu, konfigurasikan parameter terkait sesuai gambar berikut dan klik Save.

Tabel berikut menjelaskan parameter yang digunakan untuk mengaktifkan fitur penyimpanan tier cerdas. Untuk informasi selengkapnya tentang parameter lainnya, lihat Buat logstore dasar.

Parameter	Deskripsi
Data Retention Period	Atur parameter Data Retention Period menjadi Specified Days atau Permanent Storage. Periode retensi data suatu logstore merupakan jumlah dari periode retensi data untuk tier hot storage, tier IA storage, dan tier Archive storage. Penting Setelah memperpendek periode retensi data, perubahan akan berlaku dalam waktu satu menit. Misalnya, jika periode retensi awal Anda adalah 5 hari dan Anda mengubahnya menjadi 1 hari, SLS akan menghapus data dari 4 hari sebelumnya. Namun, penghapusan aktual mungkin tertunda hingga 7 hari. Penting untuk dicatat bahwa data yang terkena penundaan ini tidak akan dikenai biaya atau dihitung dalam kapasitas penyimpanan Anda.
Intelligent Tiered Storage	Aktifkan Intelligent Tiered Storage untuk mengaktifkan fitur penyimpanan tier cerdas.
Storage Policy	Tentukan periode retensi data untuk setiap tier logstore.
Data retention period for the hot storage tier	Tentukan periode retensi data untuk tier hot storage. Jika ingin memindahkan data dari tier hot storage ke tier IA storage, atur periode retensi data untuk tier hot storage dalam rentang 7 hingga 3.650. Satuan: hari. Jika ingin memindahkan data dari tier hot storage ke tier Archive storage, atur periode retensi data untuk tier hot storage dalam rentang 30 hingga 3.650. Satuan: hari. Penting Setelah mengubah data retention period for the hot storage tier, SLS akan memindahkan data berdasarkan pengaturan baru dalam waktu sekitar 1 menit. Misalnya, jika Anda mengubah periode retensi data untuk tier hot storage dari 30 hari menjadi 40 hari, SLS akan mulai memindahkan data yang tersimpan di tier IA atau Archive storage ke tier hot storage dalam waktu sekitar 1 menit. data retention period for the hot storage tier harus lebih pendek daripada nilai parameter Data Retention Period.
Data retention period for the IA storage tier	Tentukan periode retensi data untuk tier IA storage. Jika ingin memindahkan data dari tier IA storage ke tier Archive storage, atur periode retensi data untuk tier IA storage dalam rentang 30 hingga 3.650. Satuan: hari. Penting Setelah mengubah data retention period for the IA storage tier, SLS akan memindahkan data berdasarkan pengaturan baru dalam waktu sekitar 1 menit. Misalnya, jika Anda mengubah periode retensi data untuk tier IA storage dari 30 hari menjadi 40 hari, SLS akan mulai memindahkan data yang tersimpan di tier Archive storage ke tier IA storage dalam waktu sekitar 1 menit. Nilai data retention period for the IA storage tier harus lebih kecil daripada nilai parameter Data Retention Period.
Data retention period for the Archive storage tier	Tentukan periode retensi data untuk tier Archive storage. Nilai yang valid: 60 hingga 3.650. Satuan: hari. Ketika data retention period for the Archive storage tier berakhir, data di tier Archive storage akan dihapus secara otomatis. Penting data retention period for the Archive storage tier harus lebih kecil dari nilai parameter Data Retention Period.

API

Saat memanggil operasi CreateLogStore untuk membuat logstore, konfigurasikan parameter ttl, hot_ttl, dan infrequentAccessTTL untuk menentukan kebijakan retensi penyimpanan tier. Parameter ttl, hot_ttl, dan infrequentAccessTTL masing-masing menentukan periode retensi data logstore, periode retensi data tier hot storage, dan periode retensi data tier IA storage. Untuk informasi selengkapnya, lihat CreateLogStore.
Untuk logstore yang sudah ada, panggil operasi UpdateLogStore untuk memodifikasi logstore dan ubah parameter ttl, hot_ttl, dan infrequentAccessTTL guna memodifikasi kebijakan retensi penyimpanan tier secara dinamis. Dengan demikian, kebutuhan Anda terkait retensi data dan pengendalian biaya dapat terpenuhi. Untuk informasi selengkapnya, lihat UpdateLogStore.

Referensi

Untuk informasi selengkapnya tentang cara mengelola logstore, lihat Kelola logstore.
Anda dikenai biaya penyimpanan data di berbagai tier berdasarkan penggunaan penyimpanan. Anda tidak dikenai biaya untuk perpindahan data. Untuk informasi selengkapnya, lihat Ikhtisar penagihan.
Dalam mode penagihan pay-by-ingested-data, Anda tidak dikenai biaya penyimpanan data dalam 30 hari setelah data ditulis ke SLS. Jika penyimpanan tier cerdas diaktifkan, Anda akan dikenai biaya berdasarkan periode retensi data dan tier penyimpanan. Untuk informasi selengkapnya, lihat Contoh penagihan.
Untuk informasi selengkapnya tentang mode penagihan pay-by-feature dan pay-by-ingested-data, lihat Pay-as-you-go.
SLS mendukung locally redundant storage (LRS) dan zone-redundant storage (ZRS). Untuk informasi selengkapnya, lihat Redundansi penyimpanan.