为何我的java项目运行一段时间后，物理内存使用越来越高？

Question

公司的一个运行在tomcat上的java ee项目，主要功能上是作为接口服务器。服务器上物理内存8G，tomcat启动时jvm初始堆内存以及最大堆内存都设置为1400M，项目运行起来后，物理内存还剩快2G的样子。但是慢慢运行几天后，用top命令看内存使用情况，java进程占用的内存越来越多，最后把物理内存用满了，但是之后就不会在增加（不会去用swap），同时，tomcat性能上感觉没有什么影响，也不会抛出OOM什么的,负载低的时候cpu使用率也不超过10%。

后来针对这个项目有做过接口的压力测试，接口内部处理逻辑就是接受请求报文后保存到数据库，压测30分钟，机子的物理内存也是越用越多，到最后用满，但是接口的响应速度没有什么影响。整个压测过程，我用visualVM观察jvm的情况，发现堆内存基本上只用了500多M，还没达到最大值（项目启动时给虚拟机分配的初始值和最大值是1400M）。压测结束后，有50多个线程是live状态（tomcat配置的最大线程数300），看了下ThreadDump 貌似都是http请求相关的线程。

我想请教下，这种情况是否正常？既然分配的堆内存都没用完，那些后来慢慢增长的物理内存用在哪些地方了（难道是线程的栈内存？），为什么随着负载降低，这些物理内存没被释放掉呢。 

这里贴下项目的JVM启动参数和tomcat server.xml设置的一些参数：

export JAVA_OPTS="-server -Xms1400M -Xmx1400M -Xss512k -XX:+AggressiveOpts -XX:+UseBiasedLocking -XX:PermSize=128M -XX:MaxPermSize=256M -XX:+DisableExplicitGC -XX:MaxTenuringThreshold=31 -XX:+UseConcMarkSweepGC -XX:+UseParNewGC  -XX:+CMSParallelRemarkEnabled -XX:+UseCMSCompactAtFullCollection -XX:LargePageSizeInBytes=128m  -XX:+UseFastAccessorMethods -XX:+UseCMSInitiatingOccupancyOnly -Djava.awt.headless=true "

<Connector port="9010" protocol="HTTP/1.1"
IEncoding="UTF-8"  minSpareThreads="25" maxSpareThreads="75"
disableUploadTimeout="true"
acceptCount="300"  maxThreads="300" maxProcessors="1000" minProcessors="5"
useURIValidationHack="false"
compressableMimeType="text/html,text/xml,text/javascript,text/css,text/plain"
URIEncoding="UTF-8" />

小弟对JVM优化的经验基本为零，各位大大能解惑的话，不胜感激，顺便跪求JVM优化相关的书籍？T_T

Answer 1

用perftools看是不是堆外内存泄露