Size: a a a

Docker — русскоговорящее сообщество

2020 August 03

VP

Vladimir Popov in Docker — русскоговорящее сообщество
Aug  3 06:54:35 1108cc-qa kernel: [205968.096833] VM Thread invoked oom-killer: gfp_mask=0xcc0(GFP_KERNEL), order=0, oom_score_adj=0
Aug  3 06:54:35 1108cc-qa kernel: [205968.096839] CPU: 6 PID: 12040 Comm: VM Thread Not tainted 5.4.0-42-generic #46~18.04.1-Ubuntu
Aug  3 06:54:35 1108cc-qa kernel: [205968.096840] Hardware name: oVirt oVirt Node, BIOS 1.11.0-2.el7 04/01/2014
Aug  3 06:54:35 1108cc-qa kernel: [205968.096847] Call Trace:
Aug  3 06:54:35 1108cc-qa kernel: [205968.096943]  dump_stack+0x6d/0x95
Aug  3 06:54:35 1108cc-qa kernel: [205968.096983]  dump_header+0x4f/0x200
Aug  3 06:54:35 1108cc-qa kernel: [205968.096987]  oom_kill_process+0xe6/0x120
Aug  3 06:54:35 1108cc-qa kernel: [205968.096989]  out_of_memory+0x109/0x510
Aug  3 06:54:35 1108cc-qa kernel: [205968.097004]  mem_cgroup_out_of_memory+0xbb/0xd0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097009]  try_charge+0x79a/0x7d0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097026]  ? __alloc_pages_nodemask+0x153/0x320
Aug  3 06:54:35 1108cc-qa kernel: [205968.097030]  mem_cgroup_try_charge+0x75/0x190
Aug  3 06:54:35 1108cc-qa kernel: [205968.097032]  mem_cgroup_try_charge_delay+0x22/0x50
Aug  3 06:54:35 1108cc-qa kernel: [205968.097042]  __handle_mm_fault+0x910/0x12f0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097046]  handle_mm_fault+0xcb/0x210
Aug  3 06:54:35 1108cc-qa kernel: [205968.097070]  __do_page_fault+0x2a1/0x4d0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097074]  do_page_fault+0x2c/0xe0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097088]  do_async_page_fault+0x54/0x70
Aug  3 06:54:35 1108cc-qa kernel: [205968.097098]  async_page_fault+0x34/0x40
Aug  3 06:54:35 1108cc-qa kernel: [205968.097119] RIP: 0033:0x7f091e00ca23
Aug  3 06:54:35 1108cc-qa kernel: [205968.097123] Code: 47 10 f3 0f 7f 44 17 e0 f3 0f 7f 47 20 f3 0f 7f 44 17 d0 f3 0f 7f 47 30 f3 0f 7f 44 17 c0 48 01 fa 48 83 e2 c0 48 39 d1 74 c0 <66> 0f 7f 01 66 0f 7f 41 10 66 0f 7f 41 20 66 0f 7f 41 30 48 83 c1
Aug  3 06:54:35 1108cc-qa kernel: [205968.097124] RSP: 002b:00007f08e951e3a8 EFLAGS: 00010206
Aug  3 06:54:35 1108cc-qa kernel: [205968.097132] RAX: 00007f08fce4d000 RBX: 00000000000004ce RCX: 00007f08fce7d000
Aug  3 06:54:35 1108cc-qa kernel: [205968.097134] RDX: 00007f08fce81000 RSI: 0000000000000000 RDI: 00007f08fce4d000
Aug  3 06:54:35 1108cc-qa kernel: [205968.097135] RBP: 00007f08e951e410 R08: 00007f08fcbe6000 R09: 0000000004000000
Aug  3 06:54:35 1108cc-qa kernel: [205968.097136] R10: fffffffff8000000 R11: 0000000000000a68 R12: 0000000000000068
Aug  3 06:54:35 1108cc-qa kernel: [205968.097138] R13: 00007f0918042d60 R14: 00007f0918038ca8 R15: 00007f0918038ca8
Aug  3 06:54:35 1108cc-qa kernel: [205968.097147] memory: usage 2097152kB, limit 2097152kB, failcnt 240
Aug  3 06:54:35 1108cc-qa kernel: [205968.097149] memory+swap: usage 0kB, limit 9007199254740988kB, failcnt 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097150] kmem: usage 16336kB, limit 9007199254740988kB, failcnt 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097151] Memory cgroup stats for /docker/208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5:
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] anon 2130268160
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] file 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] kernel_stack 2469888
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] slab 8765440
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] sock 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] shmem 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] file_mapped 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] file_dirty 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] file_writeback 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] anon_thp 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] inactive_anon 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] active_anon 2130247680
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] inactive_file 32768
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] active_file 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] unevictable 0
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] slab_reclaimable 3829760
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] slab_unreclaimable 4935680
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgfault 589743
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgmajfault 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] workingset_refault 264
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] workingset_activate 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] workingset_nodereclaim 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgrefill 367
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgscan 448
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgsteal 342
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgactivate 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgdeactivate 327
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pglazyfree 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pglazyfreed 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097210] Tasks state (memory values in pages):
Aug  3 06:54:35 1108cc-qa kernel: [205968.097211] [  pid  ]   uid  tgid total_vm      rss pgtables_bytes swapents oom_score_adj name
Aug  3 06:54:35 1108cc-qa kernel: [205968.097220] [  11978]     2 11978  2175222   527756  5136384        0             0 java
Aug  3 06:54:35 1108cc-qa kernel: [205968.097229] oom-kill:constraint=CONSTRAINT_MEMCG,nodemask=(null),cpuset=208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5,mems_allowed=0,oom_memcg=/docker/208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5,task_memcg=/docker/208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5,task=java,pid=11978,uid=2
Aug  3 06:54:35 1108cc-qa kernel: [205968.097751] Memory cgroup out of memory: Killed process 11978 (java) total-vm:8700888kB, anon-rss:2064708kB, file-rss:46316kB, shmem-rss:0kB, UID:2 pgtables:5016kB oom_score_adj:0
Aug  3 06:54:35 1108cc-qa kernel: [205968.226761] oom_reaper: reaped process 11978 (java), now anon-rss:0kB, file-rss:0kB, shmem-rss:0kB
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
Vladimir Popov
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] slab_reclaimable 3829760
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] slab_unreclaimable 4935680
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgfault 589743
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgmajfault 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] workingset_refault 264
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] workingset_activate 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] workingset_nodereclaim 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgrefill 367
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgscan 448
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgsteal 342
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgactivate 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pgdeactivate 327
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pglazyfree 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097201] pglazyfreed 0
Aug  3 06:54:35 1108cc-qa kernel: [205968.097210] Tasks state (memory values in pages):
Aug  3 06:54:35 1108cc-qa kernel: [205968.097211] [  pid  ]   uid  tgid total_vm      rss pgtables_bytes swapents oom_score_adj name
Aug  3 06:54:35 1108cc-qa kernel: [205968.097220] [  11978]     2 11978  2175222   527756  5136384        0             0 java
Aug  3 06:54:35 1108cc-qa kernel: [205968.097229] oom-kill:constraint=CONSTRAINT_MEMCG,nodemask=(null),cpuset=208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5,mems_allowed=0,oom_memcg=/docker/208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5,task_memcg=/docker/208fbcff7baad662604c18aee7499c9d0c6c655ebd39e4e0f655a1eb15ef21b5,task=java,pid=11978,uid=2
Aug  3 06:54:35 1108cc-qa kernel: [205968.097751] Memory cgroup out of memory: Killed process 11978 (java) total-vm:8700888kB, anon-rss:2064708kB, file-rss:46316kB, shmem-rss:0kB, UID:2 pgtables:5016kB oom_score_adj:0
Aug  3 06:54:35 1108cc-qa kernel: [205968.226761] oom_reaper: reaped process 11978 (java), now anon-rss:0kB, file-rss:0kB, shmem-rss:0kB
и в чем проблема, мониторь память приложения и разбирайся почему столько ест
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
Sergey Trapeznikov
и в чем проблема, мониторь память приложения и разбирайся почему столько ест
в том то и дело что задаю mem_limit
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
лимит для чего
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
использования памяти
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
ясен пень не супа
памяти чего? где?
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
ну он тебе и убил потому что за лимиты вылез
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
в контейнере крутиться java приложуха для самого контейнера задаю mem_limit и в самом java api тоже задано
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
просто без докера таже приложуха работает с меньшим объемом памяти и все ок
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
🤔
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
без докера выделено под нее 600m с докером 2мб и приходит oom killer
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
600м?
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
600Mb
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
так, а для докера сколько лимит
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
2Gb
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
то опечатка сори
источник

ST

Sergey Trapeznikov in Docker — русскоговорящее сообщество
без лимита сколько сьедает?
источник

VP

Vladimir Popov in Docker — русскоговорящее сообщество
до 2Gb (1.8Gb с копейками)
источник

SL

S. L. in Docker — русскоговорящее сообщество
всем привет, в чем может быть проблема?
источник