猿问
下载APP

请问该如何调高linux单进程使用的内存上限?

如何调高linux单进程使用的内存上限


呼如林
浏览 46回答 4
4回答

慕雪9262066

修改/etc/security/limits.conf可以调整进程内存上限, 具体看 man limits.conf但是我觉得你的问题可能在于java,一个是java版本,我估计32位版本可能只能用4GB,若是64位的版本就不会另一个是 java 参数 -Xmx 你先看看现在的设置然后尝试调高,看看是否有效

呼唤远方

有限制,你首先需要分清,物理内存和虚拟内存的概念。然后你需要知道什么是“虚空间”。物理内存到虚拟内存的转换因不同 CPU 和操作系统的不同而不同,而且机制过于复杂,不说了。首先,不是说你的机器有 1.5G 的物理内存就可以分配到内存。为什么呢?因为操作系统对进程的内存管理首先是分配给进程一个“虚空间”,用户根本看不见物理内存,它所有的内存都从“虚空间”种分配。比如 Windows 在 X86 上分配给每个进程 4G 的虚空间,这个虚空间需要软件和硬件共同实现,同样,机制过于复杂,不说了。其中 Windows 系统占用 2G,分配给用户 2G。另外 Windows 会把这个空间划分成若干个区域,malloc 的内存就来自其中的 heap 区,加入系统给你的 heap 区域是 500M,那么你只能申请总共小于 500M 的虚拟内存,而不管你的物理内存大于 500M;同样你即使只有 10M 的物理内存剩余了,一个新创建的进程照样可以分配到 500M 的虚拟空间(只要你的硬盘足够大,这个涉及到交换技术,过于复杂,不说了)。

吃鸡游戏

进程最大打开文件描述符数:user limit中nofile的soft limita. 查看$ ulimit -n17000002. 设置a. 临时性:通过ulimit -Sn设置最大打开文件描述符数的soft limit,注意soft limit不能大于hard limit(ulimit -Hn可查看hard limit),另外ulimit -n默认查看的是soft limit,但是ulimit -n 1800000则是同时设置soft limit和hard limit。对于非root用户只能设置比原来小的hard limit。查看hard limit:$ ulimit -Hn1700000设置soft limit,必须小于hard limit:$ ulimit -Sn 16000002. 永久性:上面的方法只是临时性的,注销重新登录就失效了,而且不能增大hard limit,只能在hard limit范围内修改soft limit。若要使修改永久有效,则需要在/etc/security/limits.conf中进行设置(需要root权限),可添加如下两行,表示用户chanon最大打开文件描述符数的soft limit为1800000,hard limit为2000000。以下设置需要注销之后重新登录才能生效:chanon soft nofile 1800000chanon hard nofile 2000000设置nofile的hard limit还有一点要注意的就是hard limit不能大于/proc/sys/fs/nr_open,假如hard limit大于nr_open,注销后无法正常登录。可以修改nr_open的值:# echo 2000000 > /proc/sys/fs/nr_open

当年话下

修改文件句柄数在Linux下,我们使用ulimit -n 命令可以看到单个进程能够打开的最大文件句柄数量(socket连接也算在里面)。系统默认值1024。对于一般的应用来说(象Apache、系统进程)1024完全足够使用。但是如何象squid、mysql、java等单进程处理大量请求的应用来说就有点捉襟见肘了。如果单个进程打开的文件句柄数量超过了系统定义的值,就会提到“too many filesopen”的错误提示。如何知道当前进程打开了多少个文件句柄呢?下面一段小脚本可以帮你查看:1.lsof -n |awk '{print $2}'|sort|uniq -c |sort -nr|more在系统访问高峰时间以root用户执行上面的脚本,可能出现的结果如下:1.# lsof -n|awk '{print $2}'|sort|uniq -c |sort -nr|more2. 131 242043. 57 242444. 57 242315. 56 24264其中第一行是打开的文件句柄数量,第二行是进程号。得到进程号后,我们可以通过ps命令得到进程的详细内容。1.ps -aef|grep 242042.mysql 24204 24162 99 16:15 ? 00:24:25 /usr/sbin/mysqld哦,原来是mysql进程打开最多文件句柄数量。但是他目前只打开了131个文件句柄数量,远远底于系统默认值1024。但是如果系统并发特别大,尤其是squid服务器,很有可能会超过1024。这时候就必须要调整系统参数,以适应应用变化。Linux有硬性限制和软性限制。可以通过ulimit来设定这两个参数。方法如下,以root用户运行以下命令:1.ulimit -HSn 4096以上命令中,H指定了硬性大小,S指定了软性大小,n表示设定单个进程最大的打开文件句柄数量。个人觉得最好不要超过4096,毕竟打开的文件句柄数越多响应时间肯定会越慢。设定句柄数量后,系统重启后,又会恢复默认值。如果想永久保存下来,,可以修改 /etc/profile把上面命令加到最后。(findsun提出的办法比较合理)/////////////////////////////////////////////////////////////////////////////在 Linux下面部署应用的时候,有时候会遇上Socket/File: Can't open so manyfiles的问题,其实Linux是有文件句柄限制的(就像WinXP?),而且默认不是很高,一般都是1024,作为一台生产服务器,其实很容易就达到这个数量,因此我们需要把这个值改大一些。大概知道ulimit这个命令是相关的,上Google搜索了一下,大多数说的很含糊,也没有统一说一下,经过两个小时看了不少文章终于弄清楚ulimit相关的一些配置问题。我们可以用ulimit -a来查看所有限制值,我只关心文件句柄数量的问题open files (-n) 1024这个就是限制数量这里,有很多ulimit的文章都说的很含糊,究竟这个1024是系统的限制,还是用户的限制呢。其实,这个是用户限制来的,完整的说法,应该是当前用户准备要运行的程序的限制。1、这个限制是针对单个程序的限制2、这个限制不会改变之前已经运行了的程序的限制3、对这个值的修改,退出了当前的shell就会消失比如说,我先运行了一个程序A,然后通过ulimit修改了限制为2048,然后运行B,然后退出了shell再登录,然后运行C。那就只有B可以打开2048个句柄。如果我们需要改变整体的限制值,或者我们运行的程序是系统启动的,应该怎么处理呢其中一个方法,是想ulimit修改命令放入/etc/profile里面,但是这个做法并不好正确的做法,应该是修改/etc/security/limits.conf里面有很详细的注释,比如* soft nofile 2048* hard nofile 32768就可以将文件句柄限制统一改成软2048,硬32768这里涉及另外一个问题,什么是软限制,什么是硬限制硬限制是实际的限制,而软限制,是warnning限制,只会做出warning其实ulimit命令本身就有分软硬设置,加-H就是硬,加-S就是软默认显示的是软限制,如果修改的时候没有加上的话,就是两个一起改配置文件最前面的一位是domain,设置为星号代表全局,另外你也可以针对不同的用户做出不同的限制修改了,重新登录用ulimit一开就立刻生效了,不过之前启动过的程序要重新启动才能使用新的值。我用的是CentOS,似乎有些系统需要重启才能生效。ulimit其实就是对单一程序的限制那系统总限制呢其实是在这里,/proc/sys/fs/file-max可以通过cat查看目前的值,echo来立刻修改另外还有一个,/proc/sys/fs/file-nr只读,可以看到整个系统目前使用的文件句柄数量查找文件句柄问题的时候,还有一个很实用的程序lsof可以很方便看到某个进程开了那些句柄也可以看到某个文件/目录被什么进程占用了。
打开App,查看更多内容
随时随地看视频慕课网APP
我要回答