« предыдущая тема   следующая тема »
Страницы: [1] 2 3

Автор Тема: куда убегает память? [РЕШЕНО]  (Прочитано 3558 раз)

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
куда убегает память? [РЕШЕНО]
« : 03.08.2016 18:43:53 »
Код: [Выделить]
[root@elpromsrv ~]# free -m
             total       used       free     shared    buffers     cached
Mem:         15748      15161        587          0         89       1173
-/+ buffers/cache:      13898       1850
Swap:        33918          0      33918
[root@elpromsrv ~]#
Собственно дистр кентавр 7.0.5 установлен в режиме сервера крутится там vnc и 1c
система инициализации sysvinit
недавно начала заканчиваться память free и после этого в логах сообщения:
"память закончилась, процесс бла бла бла завершён"
ну и все замирает, пока все процессы не завершаться. Причем swap не используется, почему, так и не понял.
подумал виновата 1С
сейчас завершил все процессы, перезапустил вручную практически все службы, выгнал всех пользователей, но картина как в начале поста - 13 гигов куда-то делось, и по чуть -чуть увеличивается.
Как посмотреть куда выделена память и кем.
« Последнее редактирование: 11.08.2016 10:32:33 от flint1975 »
Записан

Оффлайн ruslandh

  • Поспешай не торопясь !
  • Модератор глобальный
  • *****
  • Сообщений: 32 361
  • Учиться .... Телепатами не рождаются, ими ....
Re: куда убегает память?
« Ответ #1 : 03.08.2016 19:05:33 »
Смотрите top с некоторым интервалом.
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #2 : 03.08.2016 19:08:23 »
Так  в том и дело, что там практически пусто, я все службы остановил, оставил только самые необходимые типа sshd
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #3 : 03.08.2016 19:15:52 »
Вот, там ничего не запущено, куда утекает память непонятно:
Спойлер
Код: [Выделить]
top - 20:10:00 up  3:18,  2 users,  load average: 1,00, 1,01, 1,00
Tasks: 161 total,   1 running, 160 sleeping,   0 stopped,   0 zombie
%CPU(s):  0,0 us,  1,4 sy,  0,0 ni, 98,6 id,  0,0 wa,  0,0 hi,  0,0 si,  0,0 st
KiB Mem:  16126668 total, 15991708 used,   134960 free,    93156 buffers
KiB Swap: 34733052 total,        0 used, 34733052 free,  1531340 cached
Connection to elpromsrv closed by remote host.
Connection to elpromsrv closed.   RES    SHR S  %CPU  %MEM     TIME+ COMMAND                                                                                                       
[hachik@host30 ~]$ ssh admin@elpromsrv
14047 root      20   0   88556   5856   5012 S 0,000 0,036   0:00.00 sshd                                                                                                         
14277 root      20   0   88556   5788   4940 S 0,000 0,036   0:00.00 sshd                                                                                                         
 3518 openvpn   20   0   49012   5716   4832 S 0,000 0,035   0:00.49 openvpn                                                                                                       
 3915 _nslcd    20   0  425612   5304   3928 S 0,000 0,033   0:01.34 nslcd                                                                                                         
14283 admin     20   0   88556   4428   3580 S 0,000 0,027   0:00.29 sshd                                                                                                         
 5530 root      20   0   79544   4300   3156 S 0,000 0,027   0:00.00 krb5kdc                                                                                                       
14053 admin     20   0   88556   4112   3268 S 0,000 0,025   0:00.05 sshd                                                                                                         
  369 root      20   0   41072   3640   2648 S 0,000 0,023   0:00.11 systemd-udevd                                                                                                 
14092 root      20   0   64172   3312   2820 S 0,000 0,021   0:00.00 su                                                                                                           
14327 root      20   0   15316   3312   2776 S 0,000 0,021   0:00.08 bash                                                                                                         
14054 admin     20   0   15184   3304   2856 S 0,000 0,020   0:00.00 bash                                                                                                         
14097 root      20   0   15504   3300   2768 S 0,000 0,020   0:00.01 bash                                                                                                         
14284 admin     20   0   15184   3296   2848 S 0,000 0,020   0:00.00 bash                                                                                                         
14321 root      20   0   64172   3268   2776 S 0,000 0,020   0:00.00 su                                                                                                           
 3674 rpcuser   20   0   41780   3180   2572 S 0,000 0,020   0:00.00 rpc.statd                                                                                                     
 2668 message+  20   0   28472   2936   2408 S 0,000 0,018   0:00.07 dbus-daemon                                                                                                   
 6919 postfix   20   0   27108   2828   2560 S 0,000 0,018   0:00.00 qmgr                                                                                                         
12838 postfix   20   0   27064   2816   2560 S 0,000 0,017   0:00.00 pickup                                                                                                       
17163 root      20   0   15292   2764   2288 R 0,000 0,017   0:00.32 top                                                                                                           
 6913 root      20   0   15220   2444   2208 S 0,000 0,015   0:00.03 master                                                                                                       
15881 root      20   0   48596   2336   1724 S 0,000 0,014   0:00.00 sshd                                                                                                         
 5425 root      20   0   12964   2184   1840 S 0,000 0,014   0:00.00 smartd                                                                                                       
 5374 root      30  10   19272   2172   1996 S 0,000 0,013   0:00.00 crond                                                                                                         
 5965 root      20   0   42256   2140   1372 S 0,000 0,013   0:00.00 rpc.mountd                                                                                                   
 5735 root      20   0   10732   1940   1764 S 0,000 0,012   0:00.00 xinetd                                                                                                       
 3624 rpc       20   0   37396   1912   1532 S 0,000 0,012   0:00.01 rpcbind                                                                                                       
15768 syslogd   20   0    8500   1796   1600 S 0,000 0,011   0:00.02 syslogd                                                                                                       
 6989 ntpd      20   0   16664   1724   1420 S 0,000 0,011   0:00.01 ntpd                                                                                                         
    1 root      20   0   10828   1720   1584 S 0,000 0,011   0:00.51 init                                                                                                         
 5580 root      20   0   23160   1700   1468 S 0,000 0,011   0:00.45 lircd                                                                                                         
 2617 root      20   0    4284   1532   1404 S 0,000 0,009   0:00.17 acpid                                                                                                         
 6286 root      20   0   20656   1444   1352 S 0,000 0,009   0:00.18 aksusbd                                                                                                       
 8155 root      20   0    4252   1440   1352 S 0,000 0,009   0:00.00 mingetty                                                                                                     
14020 root      20   0    4252   1428   1336 S 0,000 0,009   0:00.00 mingetty                                                                                                     
 8153 root      20   0    4252   1384   1292 S 0,000 0,009   0:00.00 mingetty                                                                                                     
 6029 root      20   0   25432   1364   1148 S 0,000 0,008   0:00.00 rpc.idmapd                                                                                                   
 8156 root      20   0    4252   1348   1256 S 0,000 0,008   0:00.00 mingetty                                                                                                     
 8152 root      20   0    4252   1332   1244 S 0,000 0,008   0:00.00 mingetty                                                                                                     
 8154 root      20   0    4252   1332   1244 S 0,000 0,008   0:00.00 mingetty                                                                                                     
 4151 root      20   0    7408   1312   1204 S 0,000 0,008   0:00.18 gpm                                                                                                           
 6310 root      20   0    2032   1028    916 S 0,000 0,006   0:00.00 hasplm                                                                                                       
 6301 root      20   0    2136    984    876 S 0,000 0,006   0:00.00 winehasp                                                                                                     
 6992 root      20   0   22936    360      0 S 0,000 0,002   0:00.01 ntpd                                                                                                         
 7341 5001      20   0   17020    328      0 S 0,000 0,002   0:00.00 ssh-agent                                                                                                     
 8372 5000      20   0   17020    324      0 S 0,000 0,002   0:00.00 ssh-agent                                                                                                     
 5901 root      20   0   10636    140      0 S 0,000 0,001   0:00.00 rpc.rquotad                                                                                                   
 5623 root      20   0    4252     84      0 S 0,000 0,001   0:00.00 lircmd                                                                                                       
    2 root      20   0       0      0      0 S 0,000 0,000   0:00.00 kthreadd                                                                                                     
    3 root      20   0       0      0      0 S 0,000 0,000   0:00.15 ksoftirqd/0                                                                                                   
    5 root       0 -20       0      0      0 S 0,000 0,000   0:00.00 kworker/0:0H                                                                                                 
    7 root      -2   0       0      0      0 S 0,000 0,000   0:03.15 rcu_preempt                                                                                                   
    8 root      -2   0       0      0      0 S 0,000 0,000   0:00.00 rcu_sched                                                                                                     
    9 root      -2   0       0      0      0 S 0,000 0,000   0:00.00 rcu_bh                                                                                                       
   10 root      20   0       0      0      0 S 0,000 0,000   0:06.36 rcuop/0                                                                                                       
   11 root      20   0       0      0      0 S 0,000 0,000   0:00.00 rcuos/0  
Записан

Оффлайн Skull

  • Глобальный модератор
  • *****
  • Сообщений: 20 164
    • Домашняя страница
Re: куда убегает память?
« Ответ #4 : 03.08.2016 20:47:17 »
В буферы. Вас это тревожит?
Записан
Андрей Черепанов (cas@)

Оффлайн Speccyfighter

  • Мастер
  • ***
  • Сообщений: 10 259
Re: куда убегает память?
« Ответ #5 : 03.08.2016 23:18:10 »
Цитата: flint1975 от 03.08.2016 19:15:52
Вот, там ничего не запущено, куда утекает память непонятно:
Спойлер
Код: [Выделить]
top - 20:10:00 up  3:18,  2 users,  load average: 1,00, 1,01, 1,00
Tasks: 161 total,   1 running, 160 sleeping,   0 stopped,   0 zombie
%CPU(s):  0,0 us,  1,4 sy,  0,0 ni, 98,6 id,  0,0 wa,  0,0 hi,  0,0 si,  0,0 st
KiB Mem:  16126668 total, 15991708 used,   134960 free,    93156 buffers
KiB Swap: 34733052 total,        0 used, 34733052 free,  1531340 cached
Connection to elpromsrv closed by remote host.
Connection to elpromsrv closed.   RES    SHR S  %CPU  %MEM     TIME+ COMMAND                                                                                                       
[hachik@host30 ~]$ ssh admin@elpromsrv
14047 root      20   0   88556   5856   5012 S 0,000 0,036   0:00.00 sshd                                                                                                         
14277 root      20   0   88556   5788   4940 S 0,000 0,036   0:00.00 sshd                                                                                                         
 3518 openvpn   20   0   49012   5716   4832 S 0,000 0,035   0:00.49 openvpn                                                                                                       
 3915 _nslcd    20   0  425612   5304   3928 S 0,000 0,033   0:01.34 nslcd                                                                                                         
14283 admin     20   0   88556   4428   3580 S 0,000 0,027   0:00.29 sshd                                                                                                         
 5530 root      20   0   79544   4300   3156 S 0,000 0,027   0:00.00 krb5kdc                                                                                                       
14053 admin     20   0   88556   4112   3268 S 0,000 0,025   0:00.05 sshd                                                                                                         
  369 root      20   0   41072   3640   2648 S 0,000 0,023   0:00.11 systemd-udevd                                                                                                 
14092 root      20   0   64172   3312   2820 S 0,000 0,021   0:00.00 su                                                                                                           
14327 root      20   0   15316   3312   2776 S 0,000 0,021   0:00.08 bash                                                                                                         
14054 admin     20   0   15184   3304   2856 S 0,000 0,020   0:00.00 bash                                                                                                         
14097 root      20   0   15504   3300   2768 S 0,000 0,020   0:00.01 bash                                                                                                         
14284 admin     20   0   15184   3296   2848 S 0,000 0,020   0:00.00 bash                                                                                                         
14321 root      20   0   64172   3268   2776 S 0,000 0,020   0:00.00 su                                                                                                           
 3674 rpcuser   20   0   41780   3180   2572 S 0,000 0,020   0:00.00 rpc.statd                                                                                                     
 2668 message+  20   0   28472   2936   2408 S 0,000 0,018   0:00.07 dbus-daemon                                                                                                   
 6919 postfix   20   0   27108   2828   2560 S 0,000 0,018   0:00.00 qmgr                                                                                                         
12838 postfix   20   0   27064   2816   2560 S 0,000 0,017   0:00.00 pickup                                                                                                       
17163 root      20   0   15292   2764   2288 R 0,000 0,017   0:00.32 top                                                                                                           
 6913 root      20   0   15220   2444   2208 S 0,000 0,015   0:00.03 master                                                                                                       
15881 root      20   0   48596   2336   1724 S 0,000 0,014   0:00.00 sshd                                                                                                         
 5425 root      20   0   12964   2184   1840 S 0,000 0,014   0:00.00 smartd                                                                                                       
 5374 root      30  10   19272   2172   1996 S 0,000 0,013   0:00.00 crond                                                                                                         
 5965 root      20   0   42256   2140   1372 S 0,000 0,013   0:00.00 rpc.mountd                                                                                                   
 5735 root      20   0   10732   1940   1764 S 0,000 0,012   0:00.00 xinetd                                                                                                       
 3624 rpc       20   0   37396   1912   1532 S 0,000 0,012   0:00.01 rpcbind                                                                                                       
15768 syslogd   20   0    8500   1796   1600 S 0,000 0,011   0:00.02 syslogd                                                                                                       
 6989 ntpd      20   0   16664   1724   1420 S 0,000 0,011   0:00.01 ntpd                                                                                                         
    1 root      20   0   10828   1720   1584 S 0,000 0,011   0:00.51 init                                                                                                         
 5580 root      20   0   23160   1700   1468 S 0,000 0,011   0:00.45 lircd                                                                                                         
 2617 root      20   0    4284   1532   1404 S 0,000 0,009   0:00.17 acpid                                                                                                         
 6286 root      20   0   20656   1444   1352 S 0,000 0,009   0:00.18 aksusbd                                                                                                       
 8155 root      20   0    4252   1440   1352 S 0,000 0,009   0:00.00 mingetty                                                                                                     
14020 root      20   0    4252   1428   1336 S 0,000 0,009   0:00.00 mingetty                                                                                                     
 8153 root      20   0    4252   1384   1292 S 0,000 0,009   0:00.00 mingetty                                                                                                     
 6029 root      20   0   25432   1364   1148 S 0,000 0,008   0:00.00 rpc.idmapd                                                                                                   
 8156 root      20   0    4252   1348   1256 S 0,000 0,008   0:00.00 mingetty                                                                                                     
 8152 root      20   0    4252   1332   1244 S 0,000 0,008   0:00.00 mingetty                                                                                                     
 8154 root      20   0    4252   1332   1244 S 0,000 0,008   0:00.00 mingetty                                                                                                     
 4151 root      20   0    7408   1312   1204 S 0,000 0,008   0:00.18 gpm                                                                                                           
 6310 root      20   0    2032   1028    916 S 0,000 0,006   0:00.00 hasplm                                                                                                       
 6301 root      20   0    2136    984    876 S 0,000 0,006   0:00.00 winehasp                                                                                                     
 6992 root      20   0   22936    360      0 S 0,000 0,002   0:00.01 ntpd                                                                                                         
 7341 5001      20   0   17020    328      0 S 0,000 0,002   0:00.00 ssh-agent                                                                                                     
 8372 5000      20   0   17020    324      0 S 0,000 0,002   0:00.00 ssh-agent                                                                                                     
 5901 root      20   0   10636    140      0 S 0,000 0,001   0:00.00 rpc.rquotad                                                                                                   
 5623 root      20   0    4252     84      0 S 0,000 0,001   0:00.00 lircmd                                                                                                       
    2 root      20   0       0      0      0 S 0,000 0,000   0:00.00 kthreadd                                                                                                     
    3 root      20   0       0      0      0 S 0,000 0,000   0:00.15 ksoftirqd/0                                                                                                   
    5 root       0 -20       0      0      0 S 0,000 0,000   0:00.00 kworker/0:0H                                                                                                 
    7 root      -2   0       0      0      0 S 0,000 0,000   0:03.15 rcu_preempt                                                                                                   
    8 root      -2   0       0      0      0 S 0,000 0,000   0:00.00 rcu_sched                                                                                                     
    9 root      -2   0       0      0      0 S 0,000 0,000   0:00.00 rcu_bh                                                                                                       
   10 root      20   0       0      0      0 S 0,000 0,000   0:06.36 rcuop/0                                                                                                       
   11 root      20   0       0      0      0 S 0,000 0,000   0:00.00 rcuos/0  

Стрёмно это как-то...
В буферах и кеше где-то 1.6 гига.
Копипастим выброс процессов в файл 00.txt.
Пятое поле - vsz, шестое поле - rss.

Складываем vsz
Код: [Выделить]
$ awk 'BEGIN{sum=0}{sum+=$5}END{print sum}' 00.txt
1683624

Складываем rss
Код: [Выделить]
$ awk 'BEGIN{sum=0}{sum+=$6}END{print sum}' 00.txt
112692

Хороший вопрос.
Куда делись 12 с гаком гигов памяти?
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #6 : 04.08.2016 09:11:49 »
более того, когда free приближается к 40-50 мб swap не начинает использоваться а в лог валятся ошибки не хватает памяти, и помогает только reset.
Но память я вчера победил выполнив:
1. в cron отключил atop, mdadm
2. остановил службы squid, srv1cv83 (остановка одной службы srv1cv83 - не помогала)

Однако сегодня через 40 мин работы в 1с с утра 3-х пользователей 1с зависла и одно ядро загружено на 100 % по информации atop, htop, но нет ни одного процесса с загрузкой более чем 2-3%
кто грузит проц?
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #7 : 04.08.2016 09:14:27 »
Есть подозрения - ядро
Код: [Выделить]
[root@elpromsrv ~]# uname -a
Linux elpromsrv.elprom 3.14.74-std-def-alt0.M70P.1 #1 SMP Thu Jul 28 01:23:29 UTC 2016 x86_64 GNU/Linux
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #8 : 04.08.2016 09:22:32 »
причем в таком состоянии:
Код: [Выделить]
[root@elpromsrv ~]# apt-get remove atop
Чтение списков пакетов... Завершено
Построение дерева зависимостей... Завершено
Следующие пакеты будут УДАЛЕНЫ:
  atop
0 будет обновлено, 0 новых установлено, 1 пакетов будет удалено и 0 не будет обновлено.
Необходимо получить 0B архивов.
После распаковки будет освобождено 223kB дискового пространства.
Продолжить? [Y/n] y
Совершаем изменения...
дальше только Ctrl+C
иначе ничего не делает
И вот что в messages валится:
Спойлер
tail -f /var/log/messages
Aug  4 10:17:45 elpromsrv kernel: [48057.425217]  ffff8804006f9b80 ffff8800c8b9dea8 ffffffff8152fda3 ffff8800c8b9de74
Aug  4 10:17:45 elpromsrv kernel: [48057.425218]  ffffffff8185c500 0000000000000000 0000002700000000 ffffffff810a1046
Aug  4 10:17:45 elpromsrv kernel: [48057.425219] Call Trace:
Aug  4 10:17:45 elpromsrv kernel: [48057.425223]  [<ffffffff8152e0e0>] ? unix_state_double_lock+0x60/0x70
Aug  4 10:17:45 elpromsrv kernel: [48057.425225]  [<ffffffff8152fda3>] unix_dgram_connect+0x93/0x200
Aug  4 10:17:45 elpromsrv kernel: [48057.425228]  [<ffffffff810a1046>] ? account_system_time+0xc6/0x180
Aug  4 10:17:45 elpromsrv kernel: [48057.425230]  [<ffffffff8147e40b>] SYSC_connect+0xdb/0x100
Aug  4 10:17:45 elpromsrv kernel: [48057.425232]  [<ffffffff8147e889>] SyS_connect+0x9/0x10
Aug  4 10:17:45 elpromsrv kernel: [48057.425234]  [<ffffffff81562da7>] tracesys+0xdd/0xe2
Aug  4 10:17:45 elpromsrv kernel: [48057.425235] Code: 00 b8 00 02 00 00 f0 66 0f c1 07 0f b6 d4 38 c2 75 01 c3 83 e2 fe 0f b6 f2 b8 00 80 00 00 eb 08 90 f3 90 83 e8 01 74 0a 0f b6 0f <38> ca 75 f2 66 90 c3 48 83 3d 37 9b 2a 00 00 74 09 0f 1f 80 00
Aug  4 10:17:49 elpromsrv sshd[7956]: Accepted publickey for sklad from 192.168.207.27 port 41656 ssh2: DSA e4:f5:73:9e:37:9a:8e:17:ba:f7:a7:d8:80:cd:b6:d2
Aug  4 10:17:54 elpromsrv sshd[7960]: Received disconnect from 192.168.207.27: 11: disconnected by user
Aug  4 10:18:13 elpromsrv kernel: [48085.386372] BUG: soft lockup - CPU#0 stuck for 23s! [smbd:7686]
Aug  4 10:18:13 elpromsrv kernel: [48085.386375] Modules linked in: arc4 ecb md4 lp af_packet nfsd auth_rpcgss oid_registry nfs_acl lockd autofs4 cifs dns_resolver fscache sunrpc xt_physdev xt_conntrack ipt_ULOG ipt_MASQUERADE ipv6 xt_nat xt_tcpudp iptable_nat nf_conntrack_ipv4 nf_defrag_ipv4 nf_nat_ipv4 nf_nat nf_conntrack_ftp nf_conntrack iptable_filter ip_tables x_tables nls_utf8 isofs dm_multipath scsi_dh hid_generic usbhid hid eeepc_wmi asus_wmi sparse_keymap rfkill snd_hda_codec_hdmi hwmon iTCO_wdt ppdev iTCO_vendor_support snd_hda_codec_realtek snd_hda_codec_generic dm_mod sr_mod i915 pcspkr i2c_i801 cdrom r8169 mii thermal drm_kms_helper fan snd_hda_intel drm snd_hda_codec ehci_pci xhci_hcd ehci_hcd intel_gtt parport_pc battery snd_hwdep i2c_algo_bit parport i2c_core snd_pcm tpm_infineon snd_timer usbcore video snd wmi lpc_ich soundcore usb_common processor button tun ext4 crc16 mbcache jbd2 sd_mod crc_t10dif crct10dif_common ahci libahci libata evdev scsi_mod
Aug  4 10:18:13 elpromsrv kernel: [48085.386418] CPU: 0 PID: 7686 Comm: smbd Tainted: G        W    3.14.74-std-def-alt0.M70P.1 #1
Aug  4 10:18:13 elpromsrv kernel: [48085.386419] Hardware name: System manufacturer System Product Name/P8H77-M, BIOS 0804 10/15/2012
Aug  4 10:18:13 elpromsrv kernel: [48085.386420] task: ffff880403896050 ti: ffff8800c8b9c000 task.ti: ffff8800c8b9c000
Aug  4 10:18:13 elpromsrv kernel: [48085.386421] RIP: 0010:[<ffffffff81559ed2>]  [<ffffffff81559ed2>] _raw_spin_lock+0x22/0x50
Aug  4 10:18:13 elpromsrv kernel: [48085.386425] RSP: 0018:ffff8800c8b9de20  EFLAGS: 00000287
Aug  4 10:18:13 elpromsrv kernel: [48085.386426] RAX: 0000000000004075 RBX: ffffffff811cf48c RCX: 0000000000000062
Aug  4 10:18:13 elpromsrv kernel: [48085.386426] RDX: 0000000000000058 RSI: 0000000000000058 RDI: ffff88040a7b7e88
Aug  4 10:18:13 elpromsrv kernel: [48085.386427] RBP: ffff8800c8b9de48 R08: 0000000057a2d271 R09: ffff8800c8b9dbe4
Aug  4 10:18:13 elpromsrv kernel: [48085.386428] R10: ffff8800c8b9dee2 R11: 0000000000000004 R12: ffff8804019d3950
Aug  4 10:18:13 elpromsrv kernel: [48085.386429] R13: 0000000000000002 R14: ffff8800c87194c0 R15: 0000000400000001
Aug  4 10:18:13 elpromsrv kernel: [48085.386430] FS:  00007f7747bf27c0(0000) GS:ffff88041fa00000(0000) knlGS:0000000000000000
Aug  4 10:18:13 elpromsrv kernel: [48085.386431] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
Aug  4 10:18:13 elpromsrv kernel: [48085.386431] CR2: 00007faa30023000 CR3: 00000000cc48c000 CR4: 00000000001407f0
Aug  4 10:18:13 elpromsrv kernel: [48085.386432] Stack:
Aug  4 10:18:13 elpromsrv kernel: [48085.386433]  ffffffff8152e0e0 ffff8804006f9b80 ffff88040a7b7b80 ffff8800c8b9dec0
Aug  4 10:18:13 elpromsrv kernel: [48085.386435]  ffff8804006f9b80 ffff8800c8b9dea8 ffffffff8152fda3 ffff8800c8b9de74
Aug  4 10:18:13 elpromsrv kernel: [48085.386436]  ffffffff8185c500 0000000000000000 0000002700000000 ffffffff810a1046
Aug  4 10:18:13 elpromsrv kernel: [48085.386437] Call Trace:
Aug  4 10:18:13 elpromsrv kernel: [48085.386442]  [<ffffffff8152e0e0>] ? unix_state_double_lock+0x60/0x70
Aug  4 10:18:13 elpromsrv kernel: [48085.386444]  [<ffffffff8152fda3>] unix_dgram_connect+0x93/0x200
Aug  4 10:18:13 elpromsrv kernel: [48085.386446]  [<ffffffff810a1046>] ? account_system_time+0xc6/0x180
Aug  4 10:18:13 elpromsrv kernel: [48085.386449]  [<ffffffff8147e40b>] SYSC_connect+0xdb/0x100
Aug  4 10:18:13 elpromsrv kernel: [48085.386451]  [<ffffffff8147e889>] SyS_connect+0x9/0x10
Aug  4 10:18:13 elpromsrv kernel: [48085.386453]  [<ffffffff81562da7>] tracesys+0xdd/0xe2
Aug  4 10:18:13 elpromsrv kernel: [48085.386453] Code: c3 0f 1f 84 00 00 00 00 00 b8 00 02 00 00 f0 66 0f c1 07 0f b6 d4 38 c2 75 01 c3 83 e2 fe 0f b6 f2 b8 00 80 00 00 eb 08 90 f3 90 <83> e8 01 74 0a 0f b6 0f 38 ca 75 f2 66 90 c3 48 83 3d 37 9b 2a
Aug  4 10:18:16 elpromsrv dbus[2675]: [system] Failed to activate service 'org.freedesktop.Avahi': timed out
Aug  4 10:18:41 elpromsrv kernel: [48113.347599] BUG: soft lockup - CPU#0 stuck for 23s! [smbd:7686]
Aug  4 10:18:41 elpromsrv kernel: [48113.347602] Modules linked in: arc4 ecb md4 lp af_packet nfsd auth_rpcgss oid_registry nfs_acl lockd autofs4 cifs dns_resolver fscache sunrpc xt_physdev xt_conntrack ipt_ULOG ipt_MASQUERADE ipv6 xt_nat xt_tcpudp iptable_nat nf_conntrack_ipv4 nf_defrag_ipv4 nf_nat_ipv4 nf_nat nf_conntrack_ftp nf_conntrack iptable_filter ip_tables x_tables nls_utf8 isofs dm_multipath scsi_dh hid_generic usbhid hid eeepc_wmi asus_wmi sparse_keymap rfkill snd_hda_codec_hdmi hwmon iTCO_wdt ppdev iTCO_vendor_support snd_hda_codec_realtek snd_hda_codec_generic dm_mod sr_mod i915 pcspkr i2c_i801 cdrom r8169 mii thermal drm_kms_helper fan snd_hda_intel drm snd_hda_codec ehci_pci xhci_hcd ehci_hcd intel_gtt parport_pc battery snd_hwdep i2c_algo_bit parport i2c_core snd_pcm tpm_infineon snd_timer usbcore video snd wmi lpc_ich soundcore usb_common processor button tun ext4 crc16 mbcache jbd2 sd_mod crc_t10dif crct10dif_common ahci libahci libata evdev scsi_mod
Aug  4 10:18:41 elpromsrv kernel: [48113.347644] CPU: 0 PID: 7686 Comm: smbd Tainted: G        W    3.14.74-std-def-alt0.M70P.1 #1
Aug  4 10:18:41 elpromsrv kernel: [48113.347645] Hardware name: System manufacturer System Product Name/P8H77-M, BIOS 0804 10/15/2012
Aug  4 10:18:41 elpromsrv kernel: [48113.347646] task: ffff880403896050 ti: ffff8800c8b9c000 task.ti: ffff8800c8b9c000
Aug  4 10:18:41 elpromsrv kernel: [48113.347647] RIP: 0010:[<ffffffff81559ed7>]  [<ffffffff81559ed7>] _raw_spin_lock+0x27/0x50
Aug  4 10:18:41 elpromsrv kernel: [48113.347652] RSP: 0018:ffff8800c8b9de20  EFLAGS: 00000206
Aug  4 10:18:41 elpromsrv kernel: [48113.347653] RAX: 000000000000171e RBX: ffffffff811cf48c RCX: 0000000000000062
Aug  4 10:18:41 elpromsrv kernel: [48113.347653] RDX: 0000000000000058 RSI: 0000000000000058 RDI: ffff88040a7b7e88
Aug  4 10:18:41 elpromsrv kernel: [48113.347654] RBP: ffff8800c8b9de48 R08: 0000000057a2d271 R09: ffff8800c8b9dbe4
Aug  4 10:18:41 elpromsrv kernel: [48113.347655] R10: ffff8800c8b9dee2 R11: 0000000000000004 R12: ffff8804019d3950
Aug  4 10:18:41 elpromsrv kernel: [48113.347655] R13: 0000000000000002 R14: ffff8800c87194c0 R15: 0000000400000001
Aug  4 10:18:41 elpromsrv kernel: [48113.347657] FS:  00007f7747bf27c0(0000) GS:ffff88041fa00000(0000) knlGS:0000000000000000
Aug  4 10:18:41 elpromsrv kernel: [48113.347657] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
Aug  4 10:18:41 elpromsrv kernel: [48113.347658] CR2: 00007faa30023000 CR3: 00000000cc48c000 CR4: 00000000001407f0
Aug  4 10:18:41 elpromsrv kernel: [48113.347659] Stack:
Aug  4 10:18:41 elpromsrv kernel: [48113.347660]  ffffffff8152e0e0 ffff8804006f9b80 ffff88040a7b7b80 ffff8800c8b9dec0
Aug  4 10:18:41 elpromsrv kernel: [48113.347661]  ffff8804006f9b80 ffff8800c8b9dea8 ffffffff8152fda3 ffff8800c8b9de74
Aug  4 10:18:41 elpromsrv kernel: [48113.347662]  ffffffff8185c500 0000000000000000 0000002700000000 ffffffff810a1046
Aug  4 10:18:41 elpromsrv kernel: [48113.347664] Call Trace:
Aug  4 10:18:41 elpromsrv kernel: [48113.347668]  [<ffffffff8152e0e0>] ? unix_state_double_lock+0x60/0x70
Aug  4 10:18:41 elpromsrv kernel: [48113.347670]  [<ffffffff8152fda3>] unix_dgram_connect+0x93/0x200
Aug  4 10:18:41 elpromsrv kernel: [48113.347673]  [<ffffffff810a1046>] ? account_system_time+0xc6/0x180
Aug  4 10:18:41 elpromsrv kernel: [48113.347675]  [<ffffffff8147e40b>] SYSC_connect+0xdb/0x100
Aug  4 10:18:41 elpromsrv kernel: [48113.347677]  [<ffffffff8147e889>] SyS_connect+0x9/0x10
Aug  4 10:18:41 elpromsrv kernel: [48113.347679]  [<ffffffff81562da7>] tracesys+0xdd/0xe2
Aug  4 10:18:41 elpromsrv kernel: [48113.347680] Code: 00 00 00 00 b8 00 02 00 00 f0 66 0f c1 07 0f b6 d4 38 c2 75 01 c3 83 e2 fe 0f b6 f2 b8 00 80 00 00 eb 08 90 f3 90 83 e8 01 74 0a <0f> b6 0f 38 ca 75 f2 66 90 c3 48 83 3d 37 9b 2a 00 00 74 09 0f
Aug  4 10:18:42 elpromsrv kernel: [48114.851542] CIFS VFS: Server localhost has not responded in 120 seconds. Reconnecting...
Aug  4 10:18:42 elpromsrv kernel: [48114.852624] CIFS VFS: Send error in SETFSUnixInfo = -11
Aug  4 10:18:42 elpromsrv smbd[8052]: [2016/08/04 10:18:42.802234,  0] ../lib/param/loadparm.c:1668(lpcfg_do_service_parameter)
Aug  4 10:18:42 elpromsrv smbd[8052]:   Global parameter security found in service section!
Aug  4 10:18:42 elpromsrv smbd[8052]: [2016/08/04 10:18:42.802289,  0] ../lib/param/loadparm.c:1668(lpcfg_do_service_parameter)
Aug  4 10:18:42 elpromsrv smbd[8052]:   Global parameter guest account found in service section!
Aug  4 10:19:09 elpromsrv kernel: [48141.308828] BUG: soft lockup - CPU#0 stuck for 23s! [smbd:7686]
Aug  4 10:19:09 elpromsrv kernel: [48141.308831] Modules linked in: arc4 ecb md4 lp af_packet nfsd auth_rpcgss oid_registry nfs_acl lockd autofs4 cifs dns_resolver fscache sunrpc xt_physdev xt_conntrack ipt_ULOG ipt_MASQUERADE ipv6 xt_nat xt_tcpudp iptable_nat nf_conntrack_ipv4 nf_defrag_ipv4 nf_nat_ipv4 nf_nat nf_conntrack_ftp nf_conntrack iptable_filter ip_tables x_tables nls_utf8 isofs dm_multipath scsi_dh hid_generic usbhid hid eeepc_wmi asus_wmi sparse_keymap rfkill snd_hda_codec_hdmi hwmon iTCO_wdt ppdev iTCO_vendor_support snd_hda_codec_realtek snd_hda_codec_generic dm_mod sr_mod i915 pcspkr i2c_i801 cdrom r8169 mii thermal drm_kms_helper fan snd_hda_intel drm snd_hda_codec ehci_pci xhci_hcd ehci_hcd intel_gtt parport_pc battery snd_hwdep i2c_algo_bit parport i2c_core snd_pcm tpm_infineon snd_timer usbcore video snd wmi lpc_ich soundcore usb_common processor button tun ext4 crc16 mbcache jbd2 sd_mod crc_t10dif crct10dif_common ahci libahci libata evdev scsi_mod
Aug  4 10:19:09 elpromsrv kernel: [48141.308890] CPU: 0 PID: 7686 Comm: smbd Tainted: G        W    3.14.74-std-def-alt0.M70P.1 #1
Aug  4 10:19:09 elpromsrv kernel: [48141.308891] Hardware name: System manufacturer System Product Name/P8H77-M, BIOS 0804 10/15/2012
Aug  4 10:19:09 elpromsrv kernel: [48141.308892] task: ffff880403896050 ti: ffff8800c8b9c000 task.ti: ffff8800c8b9c000
Aug  4 10:19:09 elpromsrv kernel: [48141.308893] RIP: 0010:[<ffffffff81559eda>]  [<ffffffff81559eda>] _raw_spin_lock+0x2a/0x50
Aug  4 10:19:09 elpromsrv kernel: [48141.308898] RSP: 0018:ffff8800c8b9de20  EFLAGS: 00000202
Aug  4 10:19:09 elpromsrv kernel: [48141.308899] RAX: 0000000000006097 RBX: ffffffff811cf48c RCX: 0000000000000062
Aug  4 10:19:09 elpromsrv kernel: [48141.308899] RDX: 0000000000000058 RSI: 0000000000000058 RDI: ffff88040a7b7e88
Aug  4 10:19:09 elpromsrv kernel: [48141.308900] RBP: ffff8800c8b9de48 R08: 0000000057a2d271 R09: ffff8800c8b9dbe4
Aug  4 10:19:09 elpromsrv kernel: [48141.308901] R10: ffff8800c8b9dee2 R11: 0000000000000004 R12: ffff8804019d3950
Aug  4 10:19:09 elpromsrv kernel: [48141.308901] R13: 0000000000000002 R14: ffff8800c87194c0 R15: 0000000400000001
Aug  4 10:19:09 elpromsrv kernel: [48141.308903] FS:  00007f7747bf27c0(0000) GS:ffff88041fa00000(0000) knlGS:0000000000000000
Aug  4 10:19:09 elpromsrv kernel: [48141.308903] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
Aug  4 10:19:09 elpromsrv kernel: [48141.308904] CR2: 00007faa30023000 CR3: 00000000cc48c000 CR4: 00000000001407f0
Aug  4 10:19:09 elpromsrv kernel: [48141.308905] Stack:
Aug  4 10:19:09 elpromsrv kernel: [48141.308906]  ffffffff8152e0e0 ffff8804006f9b80 ffff88040a7b7b80 ffff8800c8b9dec0
Aug  4 10:19:09 elpromsrv kernel: [48141.308907]  ffff8804006f9b80 ffff8800c8b9dea8 ffffffff8152fda3 ffff8800c8b9de74
Aug  4 10:19:09 elpromsrv kernel: [48141.308908]  ffffffff8185c500 0000000000000000 0000002700000000 ffffffff810a1046
Aug  4 10:19:09 elpromsrv kernel: [48141.308910] Call Trace:
Aug  4 10:19:09 elpromsrv kernel: [48141.308913]  [<ffffffff8152e0e0>] ? unix_state_double_lock+0x60/0x70
Aug  4 10:19:09 elpromsrv kernel: [48141.308916]  [<ffffffff8152fda3>] unix_dgram_connect+0x93/0x200
Aug  4 10:19:09 elpromsrv kernel: [48141.308918]  [<ffffffff810a1046>] ? account_system_time+0xc6/0x180
Aug  4 10:19:09 elpromsrv kernel: [48141.308921]  [<ffffffff8147e40b>] SYSC_connect+0xdb/0x100
Aug  4 10:19:09 elpromsrv kernel: [48141.308923]  [<ffffffff8147e889>] SyS_connect+0x9/0x10
Aug  4 10:19:09 elpromsrv kernel: [48141.308925]  [<ffffffff81562da7>] tracesys+0xdd/0xe2
Aug  4 10:19:09 elpromsrv kernel: [48141.308926] Code: 00 b8 00 02 00 00 f0 66 0f c1 07 0f b6 d4 38 c2 75 01 c3 83 e2 fe 0f b6 f2 b8 00 80 00 00 eb 08 90 f3 90 83 e8 01 74 0a 0f b6 0f <38> ca 75 f2 66 90 c3 48 83 3d 37 9b 2a 00 00 74 09 0f 1f 80 00
Aug  4 10:19:37 elpromsrv kernel: [48169.270052] BUG: soft lockup - CPU#0 stuck for 23s! [smbd:7686]
Aug  4 10:19:37 elpromsrv kernel: [48169.270055] Modules linked in: arc4 ecb md4 lp af_packet nfsd auth_rpcgss oid_registry nfs_acl lockd autofs4 cifs dns_resolver fscache sunrpc xt_physdev xt_conntrack ipt_ULOG ipt_MASQUERADE ipv6 xt_nat xt_tcpudp iptable_nat nf_conntrack_ipv4 nf_defrag_ipv4 nf_nat_ipv4 nf_nat nf_conntrack_ftp nf_conntrack iptable_filter ip_tables x_tables nls_utf8 isofs dm_multipath scsi_dh hid_generic usbhid hid eeepc_wmi asus_wmi sparse_keymap rfkill snd_hda_codec_hdmi hwmon iTCO_wdt ppdev iTCO_vendor_support snd_hda_codec_realtek snd_hda_codec_generic dm_mod sr_mod i915 pcspkr i2c_i801 cdrom r8169 mii thermal drm_kms_helper fan snd_hda_intel drm snd_hda_codec ehci_pci xhci_hcd ehci_hcd intel_gtt parport_pc battery snd_hwdep i2c_algo_bit parport i2c_core snd_pcm tpm_infineon snd_timer usbcore video snd wmi lpc_ich soundcore usb_common processor button tun ext4 crc16 mbcache jbd2 sd_mod crc_t10dif crct10dif_common ahci libahci libata evdev scsi_mod
Aug  4 10:19:37 elpromsrv kernel: [48169.270097] CPU: 0 PID: 7686 Comm: smbd Tainted: G        W    3.14.74-std-def-alt0.M70P.1 #1
Aug  4 10:19:37 elpromsrv kernel: [48169.270098] Hardware name: System manufacturer System Product Name/P8H77-M, BIOS 0804 10/15/2012
Aug  4 10:19:37 elpromsrv kernel: [48169.270099] task: ffff880403896050 ti: ffff8800c8b9c000 task.ti: ffff8800c8b9c000
Aug  4 10:19:37 elpromsrv kernel: [48169.270100] RIP: 0010:[<ffffffff81559ed0>]  [<ffffffff81559ed0>] _raw_spin_lock+0x20/0x50
Aug  4 10:19:37 elpromsrv kernel: [48169.270105] RSP: 0018:ffff8800c8b9de20  EFLAGS: 00000287
Aug  4 10:19:37 elpromsrv kernel: [48169.270105] RAX: 000000000000034d RBX: ffffffff811cf48c RCX: 0000000000000062
Aug  4 10:19:37 elpromsrv kernel: [48169.270106] RDX: 0000000000000058 RSI: 0000000000000058 RDI: ffff88040a7b7e88
Aug  4 10:19:37 elpromsrv kernel: [48169.270107] RBP: ffff8800c8b9de48 R08: 0000000057a2d271 R09: ffff8800c8b9dbe4
Aug  4 10:19:37 elpromsrv kernel: [48169.270108] R10: ffff8800c8b9dee2 R11: 0000000000000004 R12: ffff8804019d3950
Aug  4 10:19:37 elpromsrv kernel: [48169.270108] R13: 0000000000000002 R14: ffff8800c87194c0 R15: 0000000400000001
Aug  4 10:19:37 elpromsrv kernel: [48169.270109] FS:  00007f7747bf27c0(0000) GS:ffff88041fa00000(0000) knlGS:0000000000000000
Aug  4 10:19:37 elpromsrv kernel: [48169.270110] CS:  0010 DS: 0000 ES: 0000 CR0: 0000000080050033
Aug  4 10:19:37 elpromsrv kernel: [48169.270111] CR2: 00007faa30023000 CR3: 00000000cc48c000 CR4: 00000000001407f0
Aug  4 10:19:37 elpromsrv kernel: [48169.270112] Stack:
Aug  4 10:19:37 elpromsrv kernel: [48169.270112]  ffffffff8152e0e0 ffff8804006f9b80 ffff88040a7b7b80 ffff8800c8b9dec0
Aug  4 10:19:37 elpromsrv kernel: [48169.270114]  ffff8804006f9b80 ffff8800c8b9dea8 ffffffff8152fda3 ffff8800c8b9de74
Aug  4 10:19:37 elpromsrv kernel: [48169.270115]  ffffffff8185c500 0000000000000000 0000002700000000 ffffffff810a1046
Aug  4 10:19:37 elpromsrv kernel: [48169.270117] Call Trace:
Aug  4 10:19:37 elpromsrv kernel: [48169.270120]  [<ffffffff8152e0e0>] ? unix_state_double_lock+0x60/0x70
Aug  4 10:19:37 elpromsrv kernel: [48169.270122]  [<ffffffff8152fda3>] unix_dgram_connect+0x93/0x200
Aug  4 10:19:37 elpromsrv kernel: [48169.270125]  [<ffffffff810a1046>] ? account_system_time+0xc6/0x180
Aug  4 10:19:37 elpromsrv kernel: [48169.270127]  [<ffffffff8147e40b>] SYSC_connect+0xdb/0x100
Aug  4 10:19:37 elpromsrv kernel: [48169.270129]  [<ffffffff8147e889>] SyS_connect+0x9/0x10
Aug  4 10:19:37 elpromsrv kernel: [48169.270131]  [<ffffffff81562da7>] tracesys+0xdd/0xe2
Aug  4 10:19:37 elpromsrv kernel: [48169.270132] Code: ff 5d c3 0f 1f 84 00 00 00 00 00 b8 00 02 00 00 f0 66 0f c1 07 0f b6 d4 38 c2 75 01 c3 83 e2 fe 0f b6 f2 b8 00 80 00 00 eb 08 90 <f3> 90 83 e8 01 74 0a 0f b6 0f 38 ca 75 f2 66 90 c3 48 83 3d 37
^C
[root@elpromsrv ~]#
Вижу что вроде самба виновата - но до сих пор работало?
Записан

Оффлайн ruslandh

  • Поспешай не торопясь !
  • Модератор глобальный
  • *****
  • Сообщений: 32 361
  • Учиться .... Телепатами не рождаются, ими ....
Re: куда убегает память?
« Ответ #9 : 04.08.2016 09:36:03 »
Цитата: flint1975 от 04.08.2016 09:22:32
Aug  4 10:17:45 elpromsrv kernel: [48057.425217]  ffff8804006f9b80 ffff8800c8b9dea8 ffffffff8152fda3 ffff8800c8b9de74
Aug  4 10:17:45 elpromsrv kernel: [48057.425218]  ffffffff8185c500 0000000000000000 0000002700000000 ffffffff810a1046
Aug  4 10:17:45 elpromsrv kernel: [48057.425219] Call Trace:
Aug  4 10:17:45 elpromsrv kernel: [48057.425223]  [<ffffffff8152e0e0>] ? unix_state_double_lock+0x60/0x70
Aug  4 10:17:45 elpromsrv kernel: [48057.425225]  [<ffffffff8152fda3>] unix_dgram_connect+0x93/0x200
Aug  4 10:17:45 elpromsrv kernel: [48057.425228]  [<ffffffff810a1046>] ? account_system_time+0xc6/0x180
Aug  4 10:17:45 elpromsrv kernel: [48057.425230]  [<ffffffff8147e40b>] SYSC_connect+0xdb/0x100
Aug  4 10:17:45 elpromsrv kernel: [48057.425232]  [<ffffffff8147e889>] SyS_connect+0x9/0x10
Aug  4 10:17:45 elpromsrv kernel: [48057.425234]  [<ffffffff81562da7>] tracesys+0xdd/0xe2
Aug  4 10:17:45 elpromsrv kernel: [48057.425235] Code: 00 b8 00 02 00 00 f0 66 0f c1 07 0f b6 d4 38 c2 75 01 c3 83 e2 fe 0f b6 f2 b8 00 80 00 00 eb 08 90 f3 90 83 e8 01 74 0a 0f b6 0f <38> ca 75 f2 66 90 c3 48 83 3d 37 9b 2a 00 00 74 09 0f 1f 80 00
Ну вот, какой-то модуль ядра упал. Так-что утечка памяти не при чём.
Записан

Оффлайн ruslandh

  • Поспешай не торопясь !
  • Модератор глобальный
  • *****
  • Сообщений: 32 361
  • Учиться .... Телепатами не рождаются, ими ....
Re: куда убегает память?
« Ответ #10 : 04.08.2016 09:37:57 »
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #11 : 04.08.2016 10:17:37 »
Спасибо, но я уже нашёл.
Ядро обновил, Сейчас наблюдаю.
Вчерашние косяки с памятью и такой же загрузкой проца воспроизводились на любом ядре
Записан

Оффлайн flint1975

  • Участник
  • *
  • Сообщений: 1 443
Re: куда убегает память?
« Ответ #12 : 04.08.2016 10:27:33 »
да, ядро un-def избавляет от одной проблемы, но возвращает проблему с утечкой памяти:
Записан

Оффлайн ruslandh

  • Поспешай не торопясь !
  • Модератор глобальный
  • *****
  • Сообщений: 32 361
  • Учиться .... Телепатами не рождаются, ими ....
Re: куда убегает память?
« Ответ #13 : 04.08.2016 10:43:52 »
А по объёму используемой памяти нельзя отсортировать?
Записан

Оффлайн ruslandh

  • Поспешай не торопясь !
  • Модератор глобальный
  • *****
  • Сообщений: 32 361
  • Учиться .... Телепатами не рождаются, ими ....
Re: куда убегает память?
« Ответ #14 : 04.08.2016 10:46:18 »
Дайте два снимка, отсортированные по объёму используемой памяти, например:
Через полчаса после начала работы и через 3.5 часа.
Записан
Страницы: [1] 2 3
« предыдущая тема   следующая тема »