apa yang harus saya lakukan jika instans ECS mati dan muncul pesan error "Out of memory and no killable processes" -

Perbaiki crash instans ECS yang disebabkan oleh kernel panic Out of memory and no killable processes dengan memeriksa kebocoran memori dan menyesuaikan pengaturan OOM.

Gejala

Sebuah instans crash saat waktu proses dengan tumpukan panggilan (call stack) yang mirip dengan berikut:

[28663.625353] [ pid ]   uid  tgid total_vm      rss nr_ptes nr_pmds swapents oom_score_adj name
[28663.625363] [ 1799]     0  1799    26512      245      56       3        0         -1000 sshd
[28663.625367] [29219]     0 29219    10832      126      26       3        0         -1000 systemd-udevd
[28663.625375] Kernel panic - not syncing: Out of memory and no killable processes...
[28663.634374] CPU: 1 PID: 3578 Comm: kworker/u176:4 Tainted: G           OE   3.10.0-1062.9.1.el7.x86_64 #1
[28663.676873] Call Trace:
[28663.679312]  [<ffffffff8139f342>] dump_stack+0x63/0x81
[28663.684421]  [<ffffffff811b2245>] panic+0xf8/0x244
[28663.689184]  [<ffffffff811b98db>] out_of_memory+0x2eb/0x550
[28663.694726]  [<ffffffff811be254>] __alloc_pages_may_oom+0x114/0x1c0
[28663.700959]  [<ffffffff811bedb3>] __alloc_pages_slowpath+0x7d3/0xa40
[28663.707279]  [<ffffffff811bf229>] __alloc_pages_nodemask+0x209/0x260
[28663.713599]  [<ffffffff81216535>] alloc_pages_current+0x95/0x140
[28663.719573]  [<ffffffff811ba5ee>] __get_free_pages+0xe/0x40
[28663.725113]  [<ffffffff81075dae>] pgd_alloc+0x1e/0x160
[28663.730225]  [<ffffffff810875e4>] mm_init+0x184/0x240
[28663.735249]  [<ffffffff81088102>] mm_alloc+0x52/0x60
[28663.740186]  [<ffffffff81257640>] do_execveat_common.isra.37+0x250/0x780
[28663.759839]  [<ffffffff81257b9c>] do_execve+0x2c/0x30
[28663.764864]  [<ffffffff810a231b>] call_usermodehelper_exec_async+0xfb/0x150
[28663.777246]  [<ffffffff81741dd9>] ret_from_fork+0x39/0x50

Penyebab

Kernel gagal mengalokasikan memori dan tidak dapat kill proses apa pun untuk membebaskan memori, sehingga instans crash. Kemungkinan penyebabnya:

Kebocoran memori pada kernel menghabiskan memori yang tersedia.
Proses dengan nilai oom_score_adj diatur ke -1000 mengonsumsi memori secara berlebihan dan tidak dapat di-kill.

Catatan
oom_score_adj adalah bilangan bulat yang mengontrol prioritas pembunuhan oleh OOM. Nilai yang lebih rendah membuat suatu proses lebih kecil kemungkinannya untuk di-kill; nilai yang lebih tinggi membuatnya lebih besar kemungkinannya.

Solusi

Penting

Sebelum melanjutkan, buat Snapshot untuk mencadangkan data instans guna mencegah kehilangan data. Lihat Create snapshot manually.

Periksa adanya kebocoran memori pada kernel.

Lihat Apa yang Harus Dilakukan Jika Instans Memiliki Persentase Memori slab_unreclaimable yang Tinggi?
Verifikasi pengaturan oom_score_adj.
1. Dapatkan PID proses target menggunakan ps, top, atau pgrep:
```
ps aux | grep <Process name>
```
  Ganti <Process name> dengan nama proses sebenarnya.
2. Periksa nilai oom_score_adj:
```
cat /proc/<PID>/oom_score_adj
```
  Ganti <PID> dengan PID sebenarnya.
  
  Evaluasi apakah nilai oom_score_adj tersebut sesuai untuk lingkungan Anda. Proses dengan oom_score_adj diatur ke -1000 dikecualikan dari pembunuhan oleh OOM, yang dapat menyebabkan habisnya memori yang tersedia.