内存cached占用分析

最近在进行项目压测，并发压力8000，在测试的过程中发现内存一直在减少，开始也没觉得是大问题，但是压力测试进行几天之后，再看内存，15G内存的服务器只剩下100来M了。但此时服务器并没有崩溃，统计来看内存减少至约160M时会自动释放一些，但不会释放很多（基本不超过180）。见下图：

    可见linux服务器会自动释放内存，保障系统运行，但只会释放够用的内存，而不会去释放更多的内存，现在的问题有1.是什么东西占了这么多内存？查看进程根本没有几个进程占用多少内存。2.linux内存释放时也不释放这些内存是为什么？3.为什么减至160M后才开始释放？

使用命令：cat /proc/meminfo 查看内存占用情况时发现内存占用很大时，是Cached值非常大，基本快接近总内存值15G了。

（上图是问题解决后的图，此时Cached已经释放）

    cached是什么？cached是作为page cache的内存, 文件系统的cache。主要负责缓存文件使用, 日志文件过大造成cached区内存增大把内存占用完，如果 cache 的值很大，说明cache住的文件占用很大。可我服务器上的程序里基本没有对磁盘进行读写操作，为什么会这么大呢？这时才突然想起来nginx的访问日志，因为是写到一个access.log里，这个文件一直在增加，且nginx每次请求都会写入，是极有可能是这个问题。于是我对nginx日志的文件进行清空：echo > access.log。在执行此操作前后对比发现内存被释放了，基本Cached完全释放出来（最终我通过将nginx日志分时处理解决了这个内存问题）。

    手动释放，将内存释放出来了，实际也是释放的Cached，这是Linux内核的策略：最大程度的利用内存cache 文件系统的数据，以提高IO速度。所以可以是因为nginx一直要写这个access.log.而这个文件可能在压测几天后慢慢地超过了内存的大小，使得它快占用完整个内存。而在linux服务器自动释放内存时又会尽量不释放Cached这块内存，使得内存越来越小。所以内存一直在减少-Cached占用很大时可以排查一下有没有很大很多的文件在读写，
   可以配置系统 开始回收内存的阀值：/proc/sys/vm/min_free_kbytes。通过查看我服务器配置的是：67584 。约66M，但不知为何通过测试发现我这里是到160M左右就开始释放的。先放着也许哪天就顺手解决了。