如何排查与解决内存使用率过高的问题

lgatuk

rx6600

CPU info:
  4 Intel(R) Itanium 2 9100 series processors (1.59 GHz, 24 MB)
          532 MT/s bus, CPU version A1
          8 logical processors (2 per socket)

Memory: 32737 MB (31.97 GB)

只跑了oracle数据库，原来还正常，现在内存使用率极高
System Page Size: 4Kbytes
Memory: 16087292K (9318072K) real, 22097268K (13493008K) virtual, 343608K free

cstm检查了内存无报错，请问如何再继续排查？

lbseraph

最理想的状态是内存都用光而没有大量page in/out的问题，所以你这样看内存使用率没意义的。如果你Oracle数据库没性能问题，就可以暂时不管；但如果发现可用内存越来越少和有大量page in/out的情况，就看是否有内存瓶颈了。对内存调优这块接触不多，HP一般用kmeminfo来看，我也不懂看那个结果。

lgatuk

回复 2# lbseraph

1. # swapinfo -atm
   
2.              Mb      Mb      Mb   PCT  START/      Mb
   
3. TYPE      AVAIL    USED    FREE  USED   LIMIT RESERVE  PRI  NAME
   
4. dev        8192      30    8162    0%       0       -    1  /dev/vg00/lvol2
   
5. reserve       -    8162   -8162
   
6. memory    31137   18076   13061   58%
   
7. total     39329   26268   13061   67%       -       0    -

复制代码

师傅 哪里看page in/out，是不是看vhand进程的繁忙程度？

1. CPU TTY    PID USERNAME PRI NI   SIZE    RES STATE    TIME %WCPU  %CPU COMMAND
   
2. 6   ?   11138 soaapp1  152 20  8179M  6675M run    554:08  6.88  6.86 java
   
3. 0 pts/0 16094 root     179 20 12016K  2760K run      0:00  1.57  1.24 top  
   
4. 10   ?    1477 root     154 20 11012K  1016K sleep  752:42  0.88  0.88 sendmail:
   
5. 4   ?    2064 root     168 20 16112K  1704K sleep 1202:17  0.83  0.82 utild
   
6. 0   ?   16005 root     154 20 22728K  1720K sleep    0:00  0.34  0.29 sshd:
   
7. 12   ?   15989 root     154 20 22728K  1720K sleep    0:00  0.32  0.28 sshd:
   
8. 2   ?    1707 root     152 20 44052K  1436K run   1368:26  0.18  0.18 cimprovagt
   
9. 2   ?      84 root     152 20   648K   576K run    165:41  0.13  0.13 pm_schedcpu
   
10. 14   ?    6862 soadb    154 20  4531M  5924K sleep    0:55  0.12  0.12 oraclesoadb1
    
11. 8   ?       2 root     128 20    72K    64K sleep   89:46  0.11  0.11 vhand

复制代码

或者vmstat？

1. # vmstat 2 5
   
2.          procs           memory                   page                              faults       cpu
   
3.     r     b     w      avm    free   re   at    pi   po    fr   de    sr     in     sy    cs  us sy id
   
4.     1     0     0  3562567   85181    0    0     0    0     0    0     0   2360  28611  1064   1  0 98
   
5.     1     0     0  3562567   85091    0    0     0    0     0    0     0   2459  58649  1359   7  2 92
   
6.     1     0     0  3562567   84663    0    0     0    0     0    0     0   4020  66601  1450  11  0 88
   
7.     1     1     0  3702729   84662    0    0     0    0     0    0     0   3451  61442  1432   1  0 98
   
8.     1     1     0  3702729   84659    0    0     0    0     0    0     0   3110  75695  1463   8  0 91

复制代码

我看老三篇说

只要可用内存不低于该被称为lotsfree的阀值，就不会发生页面切换。

能不能通过判断free内存的大小和lotsfree大小来判断是否有page in/out?如果可以，这个lotsfree如何看？

lbseraph

回复 3# lgatuk

你的swap都没用，应该没有page out；vmstat的pi、po就是。另外lotsfree的话，参考下面的链接：
http://h30499.www3.hp.com/t5/Sys ... 096253#.Uw8BN_mSxr0
   

lgatuk

回复 4# lbseraph


    师傅 我上面写得看vhand swapinfo vmstat是不是就很全了  这样即使我的内存free很小 也不必担心？

lbseraph

目前的数据看应该不用担心，vhand也没怎么活动。

lgatuk

回复 6# lbseraph

1. # vmstat 2 10
   
2.          procs           memory                   page                              faults       cpu
   
3.     r     b     w      avm    free   re   at    pi   po    fr   de    sr     in     sy    cs  us sy id
   
4.     1     0     0  3375415   42023    0    0     1    0     0    0     0   2357  28403  1062   1  0 98
   
5.     1     0     0  3375415   41934    0    0     0    0     0    0     0   2234  20761   991   1  0 99
   
6.     1     0     0  3375415   48454    0    0    11    0     0    0     0   2279  38675  1058   1  1 98
   
7.     1     0     0  3375415   48453    0    0     6    0     0    0     0   2260  32925  1020   0  0 100
   
8.     1     0     0  3375415   48864    0    0     4    0     0    0     0   2249  25804   979   0  0 100
   
9.     1     0     0  3356091   48865    0    0     2    0     0    0     0   2239  21271   960   0  0 100
   
10.     1     0     0  3356091   48468    0    0     4    0     0    0     0   2255  21635  1009   1  2 98
    
11.     1     0     0  3356091   48444    0    0     6    0     0    0     0   2253  19360   999   0  0 99
    
12.     1     0     0  3356091   48448    0    0     3    0     0    0     0   2249  17178   972   0  0 100
    
13.     1     0     0  3356091   48604    0    0     1    0     0    0     0   2244  16226   982   0  0 100

复制代码

师傅 有page in了 这说明内存不够用了么？