我的RAM去了哪里？

注意：在您跳得太快之前，是的，我阅读了linuxatemyram.com！

我有一台具有64GB RAM的服务器。

free -m 说我的RAM已满，这不是因为磁盘缓存：

             total       used       free     shared    buffers     cached
Mem:         64458      64117        340        201         67        331
-/+ buffers/cache:      63719        739
Swap:         1532        383       1149

但是，top按内存使用情况排序的总和不等于64GB：

KiB Mem:  66005116 total, 65652464 used,   352652 free,    67512 buffers
KiB Swap:  1569780 total,   392656 used,  1177124 free.   337464 cached Mem

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND
 6258 mysql     20   0 38.665g 0.033t   4924 S   1.3 54.3 482:26.21 mysqld
 2293 root      20   0  165896 102116 101964 S   0.0  0.2   0:43.53 systemd-journal
 4909 root      20   0  377548  57840  57548 S   0.0  0.1   0:18.47 rsyslogd
26639 www       20   0  650076  53348  32968 S   0.0  0.1  11:32.27 php-fpm
26640 www       20   0  648344  51912  32984 S   0.0  0.1  11:37.43 php-fpm
26642 www       20   0  648600  51472  32580 S   0.0  0.1  11:37.16 php-fpm
26669 www       20   0  648148  50696  31988 S   0.0  0.1  11:35.24 php-fpm
26643 www       20   0  648452  50616  31628 S   0.0  0.1  11:36.19 php-fpm
26641 www       20   0  648620  50496  31340 S   0.0  0.1  11:36.51 php-fpm
28121 www       20   0  648620  48820  29660 S   0.0  0.1  11:35.75 php-fpm
27231 www       20   0  647508  48804  30760 S   0.0  0.1  11:35.61 php-fpm
28029 www       20   0  648044  48752  30172 S   0.0  0.1  11:37.20 php-fpm
28117 www       20   0  647868  48700  30296 S   0.0  0.1  11:36.45 php-fpm
28122 www       20   0  648340  48568  29676 S   0.0  0.1  11:35.73 php-fpm
 8569 www       20   0  649028  40268  20704 S   0.0  0.1  11:31.50 php-fpm
10126 www       20   0  648432  39420  20700 S   0.0  0.1   9:58.52 php-fpm
22386 www       20   0  647996  39400  20868 S   0.0  0.1  11:25.00 php-fpm
 9643 www       20   0  647976  39220  20704 S   0.0  0.1  11:29.23 php-fpm
23077 www       20   0  647852  39084  20692 S   0.0  0.1  11:11.80 php-fpm
10139 www       20   0  647580  38808  20692 S   0.0  0.1   9:59.94 php-fpm
 6326 www       20   0  647368  38396  20696 S   0.7  0.1   8:32.34 php-fpm
 4727 www       20   0  646128  37304  20692 S   0.0  0.1   8:30.20 php-fpm
 5459 www       20   0  645988  37156  20688 S   0.0  0.1   7:15.13 php-fpm
 2173 www       20   0  645240  36408  20684 S   0.0  0.1   4:39.13 php-fpm
20752 www       20   0  644536  35428  20680 S   0.0  0.1   4:29.78 php-fpm
 5396 www       20   0  644468  35324  20692 S   0.0  0.1   4:14.65 php-fpm
17558 www       20   0  642668  33816  20740 S   0.0  0.1   1:28.34 php-fpm
28133 www       20   0  642780  33636  20704 S   0.0  0.1   0:49.88 php-fpm
10925 www       20   0  479584  29264  11212 S   3.0  0.0   0:00.09 php
26632 root      20   0  552136  26072  19468 S   0.0  0.0   0:37.74 php-fpm
 4946 named     20   0  697996  18748   2104 S   0.0  0.0   3:46.96 named
15609 apache    20   0 2137056   8120   1592 S   0.0  0.0   0:56.18 httpd
 8584 root      20   0  133432   4864   3700 S   0.0  0.0   0:00.08 sshd

MySQL使用54.3％独自一人，这是完全正常的，因为它有一个innodb_buffer_pool_size的32G。其他进程的内存使用量总计约占2.8％，总计57.1％。

剩下的32％在哪里？

编辑：的内容/proc/meminfo：

MemTotal:       66005116 kB
MemFree:          353272 kB
Buffers:           66328 kB
Cached:           736620 kB
SwapCached:        11348 kB
Active:         34396680 kB
Inactive:        2651132 kB
Active(anon):   34223240 kB
Inactive(anon):  2228020 kB
Active(file):     173440 kB
Inactive(file):   423112 kB
Unevictable:           0 kB
Mlocked:               0 kB
SwapTotal:       1569780 kB
SwapFree:        1177448 kB
Dirty:               328 kB
Writeback:             0 kB
AnonPages:      36234364 kB
Mapped:           125208 kB
Shmem:            206396 kB
Slab:           28058904 kB
SReclaimable:   28010224 kB
SUnreclaim:        48680 kB
KernelStack:        2760 kB
PageTables:        94780 kB
NFS_Unstable:          0 kB
Bounce:                0 kB
WritebackTmp:          0 kB
CommitLimit:    34572336 kB
Committed_AS:   38572348 kB
VmallocTotal:   34359738367 kB
VmallocUsed:      382304 kB
VmallocChunk:   34359353572 kB
HardwareCorrupted:     0 kB
DirectMap4k:        9000 kB
DirectMap2M:     2054144 kB
DirectMap1G:    67108864 kB

输出slabtop：

 Active / Total Objects (% used)    : 147380425 / 147413026 (100.0%)
 Active / Total Slabs (% used)      : 7005839 / 7005839 (100.0%)
 Active / Total Caches (% used)     : 71 / 144 (49.3%)
 Active / Total Size (% used)       : 27615020.12K / 27627490.91K (100.0%)
 Minimum / Average / Maximum Object : 0.01K / 0.19K / 16.12K

  OBJS ACTIVE  USE OBJ SIZE  SLABS OBJ/SLAB CACHE SIZE NAME
146851887 146851887  12%    0.19K 6992947       21  27971788K dentry
124936 124936 100%    0.07K   2231       56      8924K Acpi-ParseExt
105144 105144 100%    0.10K   2696       39     10784K buffer_head
 49920  49172  98%    0.06K    780       64      3120K kmalloc-64
 29916  29916 100%    0.11K    831       36      3324K sysfs_dir_cache
 29856  29661  99%    0.12K    933       32      3732K kmalloc-128
 21450  21128  98%    0.18K    975       22      3900K vm_area_struct
 19328  19328 100%    0.03K    151      128       604K kmalloc-32
 18258  13383  73%    0.93K    537       34     17184K ext4_inode_cache
 17952  11651  64%    0.04K    176      102       704K ext4_extent_status
 16828   6513  38%    0.55K    601       28      9616K radix_tree_node
 14400  13996  97%    0.06K    225       64       900K anon_vma
 11645   7903  67%    0.05K    137       85       548K shared_policy_node
 10710   7006  65%    0.19K    510       21      2040K kmalloc-192
 10608  10608 100%    0.04K    104      102       416K Acpi-Namespace
  9728   9728 100%    0.01K     19      512        76K kmalloc-8
...

linux memory memory-usage

— 本杰明
source

再次阅读linuxatemyram.com。然后阅读kernel.org/doc/gorman/html/understand

— symcbean 2015年

我再读一遍，最后以建议这free -m是真正获得内存使用率的方式。另外，交换使用率不为0的事实使我有些怀疑。我已经检查了您的链接，但是要读取的数据太多，以至于我暂时无法处理所有这些数据。

— 本杰明

这是物理服务器吗？

— Optichip 2015年

@Optichip这是一台物理服务器。

— 本杰明

@AndrewSchulman我不认为这是一个重复的问题。这个问题是关于平板的内存。另一个问题根本没有提到平板。

— kasperd 2015年

Answers:

  OBJS ACTIVE  USE OBJ SIZE  SLABS OBJ/SLAB CACHE SIZE NAME
146851887 146851887  12%    0.19K 6992947       21  27971788K dentry

您说的不是因为磁盘缓存，而是因为。

我敢打赌，您拥有可以对不存在的文件进行大量提取的代码，并且会得到大量的负缓存。如果内存不足，Linux会删除这些条目，因此不必担心。例如，在本NSS问题中。

— 大卫·施瓦兹
source

嗯，这可以解释这一点。请原谅我的无知，我认为free -m仅此一项就可以表明是否由于磁盘缓存而耗尽了内存。我也不知道“负缓存”，了解什么试图找到不存在的文件真的很有趣。出于好奇我知道如何进行调查吗？这是最近安装的，只有一个数据库+ Web应用程序，因此我真的很惊讶地看到这种行为。

— 本杰明2015年

@Benjamin单击我的链接以获取有关如何发生这种情况的一个示例。另外，请查看Web应用程序实际在做什么。

— David Schwartz

实际上，我确实使用了很多libcurl，更确切地说是它的PHP绑定。我的Web服务器下载并处理了许多图像：将它们下载到内存中，进行处理，然后上传到S3，从不打文件系统。因此，我不得不承认我忽略了您的链接，因为乍看之下它的位置过于局限而无法影响我，但这很可能是这个确切的问题：我的运行方式与strace curl小伙子一样，发现它为单个链接生成了7421 ENOENT (No such file or directory)查询！一定是这样。非常感谢！

— 本杰明

您可能想要查看linux-mm.org/Drop_Caches并进行echo 2 > /proc/sys/vm/drop_caches无损删除dentry和inode缓存的操作，并查看RAM是否返回。显然最好在安静的时间完成。

— 2015年

Linux承受压力时会删除这些条目的额外确认来自以下事实：大部分活动slab（Slab位于中/proc/meminfo）SReclaimable（如其名称所说明，可以根据需要回收）。

— Marco Leogrande，2015年

可能仍然是一些内部内核结构和文件系统/目录相关的东西。即使令人困惑，这也是完全正常的。尝试查看slabtop和的输出是什么cat /proc/meminfo。

— 珍妮·皮卡兰宁
source

我将这些命令的输出添加到我的问题中，请您看看吗？

— 本杰明

好了，内核似乎消耗了大约27 GB的RAM，其中大部分用于dentry目录条目。我猜您的文件系统中有很多文件。这些实际上只是缓存的内容，以防万一某些进程确实需要内存，将以与通常在顶部输出中看到的普通缓冲区/缓存相同的方式释放内存。

— Janne Pikkarainen 2015年

很高兴知道，谢谢。不过，我只是感到惊讶，因为我在文件系统上没有很多文件：find / | wc -lreturn 134578，而不是dentry建议的数百万个。您有什么想法吗？

— 本杰明

多亏了大卫·施瓦兹（David Schwartz）的回答，才有可能找到了造成这些垃圾目录条目的原因。还是要谢谢你的帮助！

— 本杰明