请问linux怎么增大socket连接上限?

作者&投稿:籍沈 (若有异议请与网页底部的电邮联系)
Linux(Centos)支持最大的SOCKET连接数量是多少?~

并发socket连接数的多少决定于系统资源的多少,没有一个常值的.在实际开发或者linux系统管理中也会根据需要进行相应的设置.

1.一般来说每一个网络连接,都会建立相应的socket句柄,同时每个连接也会有标准输入输出等基本的文件文件句柄,而且每一个socket连接都是进行文件操作的,因此连接数决定于系统资源.

2.Linux上一般可以通过ulimit来进行相应的资源限制,默认能打开的文件描述符自己可以查看.如下图所示:


3.ulimit的命令格式:ulimit [-acdfHlmnpsStvw] [size]
参数说明:
-H 设置硬资源限制.
-S 设置软资源限制.
-a 显示当前所有的资源限制.
-c size:设置core文件的最大值.单位:blocks
-d size:设置数据段的最大值.单位:kbytes
-f size:设置创建文件的最大值.单位:blocks
-l size:设置在内存中锁定进程的最大值.单位:kbytes
-m size:设置可以使用的常驻内存的最大值.单位:kbytes
-n size:设置内核可以同时打开的文件描述符的最大值.单位:n
-p size:设置管道缓冲区的最大值.单位:kbytes
-s size:设置堆栈的最大值.单位:kbytes
-t size:设置CPU使用时间的最大上限.单位:seconds
-v size:设置虚拟内存的最大值.单位:kbytes
-u  用户最多可开启的程序数目

并发socket连接数的多少决定于系统资源的多少,没有一个常值的.在实际开发或者linux系统管理中也会根据需要进行相应的设置.

1.一般来说每一个网络连接,都会建立相应的socket句柄,同时每个连接也会有标准输入输出等基本的文件文件句柄,而且每一个socket连接都是进行文件操作的,因此连接数决定于系统资源.

2.Linux上一般可以通过ulimit来进行相应的资源限制,默认能打开的文件描述符自己可以查看.如下图所示:


3.ulimit的命令格式:ulimit [-acdfHlmnpsStvw] [size]
参数说明:
-H 设置硬资源限制.
-S 设置软资源限制.
-a 显示当前所有的资源限制.
-c size:设置core文件的最大值.单位:blocks
-d size:设置数据段的最大值.单位:kbytes
-f size:设置创建文件的最大值.单位:blocks
-l size:设置在内存中锁定进程的最大值.单位:kbytes
-m size:设置可以使用的常驻内存的最大值.单位:kbytes
-n size:设置内核可以同时打开的文件描述符的最大值.单位:n
-p size:设置管道缓冲区的最大值.单位:kbytes
-s size:设置堆栈的最大值.单位:kbytes
-t size:设置CPU使用时间的最大上限.单位:seconds
-v size:设置虚拟内存的最大值.单位:kbytes
-u  用户最多可开启的程序数目

1、修改用户进程可打开文件数限制
在Linux平台上,无论编写客户端程序还是服务端程序,在进行高并发TCP连接处理时,
最高的并发数量都要受到系统对用户单一进程同时可打开文件数量的限制(这是因为系统
为每个TCP连接都要创建一个socket句柄,每个socket句柄同时也是一个文件句柄)。
可使用ulimit命令查看系统允许当前用户进程打开的文件数限制:
[speng@as4 ~]$ ulimit -n
1024
这表示当前用户的每个进程最多允许同时打开1024个文件,这1024个文件中还得除去
每个进程必然打开的标准输入,标准输出,标准错误,服务器监听 socket,
进程间通讯的unix域socket等文件,那么剩下的可用于客户端socket连接的文件数就
只有大概1024-10=1014个左右。也就是说缺省情况下,基于Linux的通讯程序最多允许
同时1014个TCP并发连接。
对于想支持更高数量的TCP并发连接的通讯处理程序,就必须修改Linux对当前用户的
进程同时打开的文件数量的软限制(soft limit)和硬限制(hardlimit)。其中软限制
是指Linux在当前系统能够承受的范围内进一步限制用户同时打开的文件数;硬限制
则是根据系统硬件资源状况(主要是系统内存)计算出来的系统最多可同时打开的文件数量。
通常软限制小于或等于硬限制。

修改上述限制的最简单的办法就是使用ulimit命令:
[speng@as4 ~]$ ulimit -n
上述命令中,在中指定要设置的单一进程允许打开的最大文件数。如果系统回显
类似于“Operation notpermitted”之类的话,说明上述限制修改失败,实际上是
因为在中指定的数值超过了Linux系统对该用户打开文件数的软限制或硬限制。
因此,就需要修改Linux系统对用户的关于打开文件数的软限制和硬限制。

第一步,修改/etc/security/limits.conf文件,在文件中添加如下行:
speng soft nofile 10240
speng hard nofile 10240
其中speng指定了要修改哪个用户的打开文件数限制,可用’*'号表示修改所有用户的限制;
soft或hard指定要修改软限制还是硬限制;10240则指定了想要修改的新的限制值,
即最大打开文件数(请注意软限制值要小于或等于硬限制)。修改完后保存文件。

第二步,修改/etc/pam.d/login文件,在文件中添加如下行:
session required /lib/security/pam_limits.so
这是告诉Linux在用户完成系统登录后,应该调用pam_limits.so模块来设置系统对
该用户可使用的各种资源数量的最大限制(包括用户可打开的最大文件数限制),
而pam_limits.so模块就会从/etc/security/limits.conf文件中读取配置来设置这些限制值。
修改完后保存此文件。

第三步,查看Linux系统级的最大打开文件数限制,使用如下命令:
[speng@as4 ~]$ cat /proc/sys/fs/file-max
12158
这表明这台Linux系统最多允许同时打开(即包含所有用户打开文件数总和)12158个文件,
是Linux系统级硬限制,所有用户级的打开文件数限制都不应超过这个数值。通常这个系统级
硬限制是Linux系统在启动时根据系统硬件资源状况计算出来的最佳的最大同时打开文件数限制,
如果没有特殊需要,不应该修改此限制,除非想为用户级打开文件数限制设置超过此限制的值。

修改此硬限制的方法是修改/etc/rc.local脚本,在脚本中添加如下行:
echo 22158 > /proc/sys/fs/file-max
这是让Linux在启动完成后强行将系统级打开文件数硬限制设置为22158。修改完后保存此文件。

完成上述步骤后重启系统,一般情况下就可以将Linux系统对指定用户的单一进程允许同时
打开的最大文件数限制设为指定的数值。如果重启后用 ulimit-n命令查看用户可打开文件数限制
仍然低于上述步骤中设置的最大值,这可能是因为在用户登录脚本/etc/profile中使用ulimit -n命令
已经将用户可同时打开的文件数做了限制。由于通过ulimit-n修改系统对用户可同时打开文件的
最大数限制时,新修改的值只能小于或等于上次 ulimit-n设置的值,因此想用此命令增大这个
限制值是不可能的。
所以,如果有上述问题存在,就只能去打开/etc/profile脚本文件,
在文件中查找是否使用了ulimit-n限制了用户可同时打开的最大文件数量,如果找到,
则删除这行命令,或者将其设置的值改为合适的值,然后保存文件,用户退出并重新登录系统即可。
通过上述步骤,就为支持高并发TCP连接处理的通讯处理程序解除关于打开文件数量方面的系统限制。
2、修改网络内核对TCP连接的有关限制
在Linux上编写支持高并发TCP连接的客户端通讯处理程序时,有时会发现尽管已经解除了系统
对用户同时打开文件数的限制,但仍会出现并发TCP连接数增加到一定数量时,再也无法成功
建立新的TCP连接的现象。出现这种现在的原因有多种。

第一种原因可能是因为Linux网络内核对本地端口号范围有限制。此时,进一步分析为什么无法
建立TCP连接,会发现问题出在connect()调用返回失败,查看系统错误提示消息是“Can’t assign requestedaddress”。同时,如果在此时用tcpdump工具监视网络,会发现根本没有TCP连接时客户端
发SYN包的网络流量。这些情况说明问题在于本地Linux系统内核中有限制。
其实,问题的根本原因
在于Linux内核的TCP/IP协议实现模块对系统中所有的客户端TCP连接对应的本地端口号的范围
进行了限制(例如,内核限制本地端口号的范围为1024~32768之间)。当系统中某一时刻同时
存在太多的TCP客户端连接时,由于每个TCP客户端连接都要占用一个唯一的本地端口号
(此端口号在系统的本地端口号范围限制中),如果现有的TCP客户端连接已将所有的本地端口号占满,
则此时就无法为新的TCP客户端连接分配一个本地端口号了,因此系统会在这种情况下在connect()
调用中返回失败,并将错误提示消息设为“Can’t assignrequested address”。
有关这些控制
逻辑可以查看Linux内核源代码,以linux2.6内核为例,可以查看tcp_ipv4.c文件中如下函数:
static int tcp_v4_hash_connect(struct sock *sk)
请注意上述函数中对变量sysctl_local_port_range的访问控制。变量sysctl_local_port_range
的初始化则是在tcp.c文件中的如下函数中设置:
void __init tcp_init(void)
内核编译时默认设置的本地端口号范围可能太小,因此需要修改此本地端口范围限制。
第一步,修改/etc/sysctl.conf文件,在文件中添加如下行:
net.ipv4.ip_local_port_range = 1024 65000
这表明将系统对本地端口范围限制设置为1024~65000之间。请注意,本地端口范围的最小值
必须大于或等于1024;而端口范围的最大值则应小于或等于65535。修改完后保存此文件。
第二步,执行sysctl命令:
[speng@as4 ~]$ sysctl -p
如果系统没有错误提示,就表明新的本地端口范围设置成功。如果按上述端口范围进行设置,
则理论上单独一个进程最多可以同时建立60000多个TCP客户端连接。

第二种无法建立TCP连接的原因可能是因为Linux网络内核的IP_TABLE防火墙对最大跟踪的TCP
连接数有限制。此时程序会表现为在 connect()调用中阻塞,如同死机,如果用tcpdump工具监视网络,
也会发现根本没有TCP连接时客户端发SYN包的网络流量。由于 IP_TABLE防火墙在内核中会对
每个TCP连接的状态进行跟踪,跟踪信息将会放在位于内核内存中的conntrackdatabase中,
这个数据库的大小有限,当系统中存在过多的TCP连接时,数据库容量不足,IP_TABLE无法为
新的TCP连接建立跟踪信息,于是表现为在connect()调用中阻塞。此时就必须修改内核对最大跟踪
的TCP连接数的限制,方法同修改内核对本地端口号范围的限制是类似的:

第一步,修改/etc/sysctl.conf文件,在文件中添加如下行:
net.ipv4.ip_conntrack_max = 10240
这表明将系统对最大跟踪的TCP连接数限制设置为10240。请注意,此限制值要尽量小,
以节省对内核内存的占用。

第二步,执行sysctl命令:
[speng@as4 ~]$ sysctl -p
如果系统没有错误提示,就表明系统对新的最大跟踪的TCP连接数限制修改成功。
如果按上述参数进行设置,则理论上单独一个进程最多可以同时建立10000多个TCP客户端连接。

3、使用支持高并发网络I/O的编程技术
在Linux上编写高并发TCP连接应用程序时,必须使用合适的网络I/O技术和I/O事件分派机制。
可用的I/O技术有同步I/O,非阻塞式同步I/O(也称反应式I/O),以及异步I/O。在高TCP并发的情形下,
如果使用同步I/O,这会严重阻塞程序的运转,除非为每个TCP连接的I/O创建一个线程。

但是,过多的线程又会因系统对线程的调度造成巨大开销。因此,在高TCP并发的情形下使用
同步 I/O是不可取的,这时可以考虑使用非阻塞式同步I/O或异步I/O。非阻塞式同步I/O的技术包括使用select(),poll(),epoll等机制。异步I/O的技术就是使用AIO。

从I/O事件分派机制来看,使用select()是不合适的,因为它所支持的并发连接数有限(通常在1024个以内)。
如果考虑性能,poll()也是不合适的,尽管它可以支持的较高的TCP并发数,但是由于其采用
“轮询”机制,当并发数较高时,其运行效率相当低,并可能存在I/O事件分派不均,导致部分TCP
连接上的I/O出现“饥饿”现象。而如果使用epoll或AIO,则没有上述问题(早期Linux内核的AIO技术
实现是通过在内核中为每个 I/O请求创建一个线程来实现的,这种实现机制在高并发TCP连接的情形下
使用其实也有严重的性能问题。但在最新的Linux内核中,AIO的实现已经得到改进)。

综上所述,在开发支持高并发TCP连接的Linux应用程序时,应尽量使用epoll或AIO技术来实现并发的
TCP连接上的I/O控制,这将为提升程序对高并发TCP连接的支持提供有效的I/O保证。

内核参数sysctl.conf的优化

/etc/sysctl.conf 是用来控制linux网络的配置文件,对于依赖网络的程序(如web服务器和cache服务器)
非常重要,RHEL默认提供的最好调整。

推荐配置(把原/etc/sysctl.conf内容清掉,把下面内容复制进去):
net.ipv4.ip_local_port_range = 1024 65536
net.core.rmem_max=16777216
net.core.wmem_max=16777216
net.ipv4.tcp_rmem=4096 87380 16777216
net.ipv4.tcp_wmem=4096 65536 16777216
net.ipv4.tcp_fin_timeout = 10
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_timestamps = 0
net.ipv4.tcp_window_scaling = 0
net.ipv4.tcp_sack = 0
net.core.netdev_max_backlog = 30000
net.ipv4.tcp_no_metrics_save=1
net.core.somaxconn = 262144
net.ipv4.tcp_syncookies = 0
net.ipv4.tcp_max_orphans = 262144
net.ipv4.tcp_max_syn_backlog = 262144
net.ipv4.tcp_synack_retries = 2
net.ipv4.tcp_syn_retries = 2

这个配置参考于cache服务器varnish的推荐配置和SunOne 服务器系统优化的推荐配置。

varnish调优推荐配置的地址为:http://varnish.projects.linpro.no/wiki/Performance

不过varnish推荐的配置是有问题的,实际运行表明“net.ipv4.tcp_fin_timeout = 3”的配置
会导致页面经常打不开;并且当网友使用的是IE6浏览器时,访问网站一段时间后,所有网页都会
打不开,重启浏览器后正常。可能是国外的网速快吧,我们国情决定需要
调整“net.ipv4.tcp_fin_timeout = 10”,在10s的情况下,一切正常(实际运行结论)。

修改完毕后,执行:
/sbin/sysctl -p /etc/sysctl.conf
/sbin/sysctl -w net.ipv4.route.flush=1

命令生效。为了保险起见,也可以reboot系统。

调整文件数:
linux系统优化完网络必须调高系统允许打开的文件数才能支持大的并发,默认1024是远远不够的。

执行命令:
Shell代码
echo ulimit -HSn 65536 >> /etc/rc.local
echo ulimit -HSn 65536 >>/root/.bash_profile
ulimit -HSn 65536

增大Linux的socket最大连接数 最近接的项目是模拟多个socket 客户端与服务器进行通信。由于Linux 系统的限制,在linux/include/linux/posix_types.h文件中有如下的宏定义:#undef __FD_SETSIZE#define __FD_SETSIZE 1024这个宏是对最大文件描述符的定义为1024。当需要1024个以上的fd时,例如select()函数就会侦听出错。因此需要将1024改成需要的数目,但最多不能超过65535。但仅仅修改这个是不够的。第二步就需要修改一个进程最大打开的文件数。其具体步骤是:1、cd /usr/src/linux-2.4/include/linux2、vi limits.h 编辑文件:#define NR_OPEN 90240 原值为1024#define OPEN_MAX 10240 原值为10243、vi fs.h#define INR_OPEN 10240 原值为1024#define NR_FILE 65536 原值为8192,这个值为内存64/1M的比率计算,1G内存计算为:64*1024#define NR_RESERVED_FILES 128 原值为10.4、cd /usr/src/linux-2.4/include/net5、vi tcp.h#define TCP_LHTABLE_SIZE 128 原值为32.便于listen侦听队列,设大。设置最大打开文件数与内存相关,太大系统会变慢。第三步就是编译内核,其具体步骤是: 1. make clean2. make3. make dep4. make bzImage将bzImage 导入/boot 重启系统即可!用1024个以上客户端与服务器进行连接,在服务器的终端用netstat |wc 命令可以统计出当前建立的socket的连接数。


linux 怎么增大 \/tmp的空间
一、在虚拟机中的linux使用mount 命令,看是不是把tmp挂载到了内存,是的话,修改\/etc\/fstab,不挂载\/tmp;二、如果\/tmp没有挂载到内存,仅仅是 \/ 下的一个文件夹,看看 \/ 的剩余空间是否够用 如果还不行,就给虚拟机再挂一个虚拟硬盘,进入linux分区,格式化,假设新加的硬盘分区,格式化后是\/...

为Linux新增静态路由的方法
静态路由是用户手工配置的路由信息,起到保护网络安全的作用,那么要如何为Linux系统新增一条静态路由呢?下面我就给大家介绍下Linux新增静态路由器的方法。1、添加一条默认路由 route add default gw 10.0.0.1 (默认只在内存中生效)开机自启动可以追加到\/etc\/rc.local文件里 echo “route add ...

linux如何增大根目录,详细步骤
特别说明: \/var 不是系统启动必须的,你把里面的文件全删掉也不影响系统启动,缺省地,你的网站内容也在那个目录下(\/var\/www 目录)。因为你没说你用哪种发行版本的 Linux,无法给你写详细步骤。另外,还有一种叫《Linux下不丢失数据修改分区大小》的做法,我没用过,不知道你有没有胆量试用。详...

Linux下如何增加swap分区大小
[root@localhost]# mkswap \/home\/swap 4、立即启用交换分区文件 [root@localhost]# swapon \/home\/swap 5、如果要在引导时自动启用,则编辑 \/etc\/fstab 文件,添加行:\/home\/swap swap swap defaults 0 0 系统下次引导时,它就会启用新建的交换文件,再查看SWAP分区大小发现增加了2G。批量删除linux下...

Linux 已有四个主分区,怎么新增扩展分区?
您好,理论上是不可以再新建分区了,所以您可以使用一些分区编辑软件将一个主分区或更多主分区转化为逻辑分区。也可以通过删除一个分区来创造一个新的逻辑分区。同时您要注意,这样的话,linux有可能因为分区的变化而无法启动。为了防止在操作中出现意外情况,您还是使用一些dos,pe或者linux live cd来改动...

Linux 怎么增大可以创建的最大线程数
检查ulimit -a 的结果,查看stack size:stack size (kbytes, -s) 8192 8192KB 就是栈的大小。不能超过这个栈的数目,因此上面2)分配的buf大小超过了栈限制,得到了setmentation fault。LInux上,最大线程数目是:number of threads = total virtual memory \/ (stack size*1024*1024)在32位系...

Linux中如何创建用户和用户组
1)增加一个新用户 在linux系统中,只有root用户才能够创建一个新用户,如下的命令将新建一个登录名meelo的用户。sudo useradd meelo 但是,这个用户还不能够登录,因为还没给它设置初始密码,而没有密码的用户是不能够登录系统的。在默认情况下,将会在\/home目录下新建一个与用户名相同的用户主目录。...

linux系统如何在原来的分区上扩大分区??
\/dev\/sdb6 587 651 522081 83 Linux \/dev\/sdb7 652 1173 4192933+ 83 Linux \/dev\/sdb8 1174 2419 10008463+ 83 Linux 可以看到,增加了一个sdb8的分区,柱面号从1174到2419.写入分区表,执行分区操作 Command (m for help): w The partition table has...

linux下如何实现增量备份?
linux下如何实现增量备份? 10 服务器系统为linux,每月都有版本升级,这就需要对原程序代码进行备份。备份的方式我想实现增量备份,而非全量备份,即将服务器现有代码与版本升级内容做比较,若有相同目录下的相同文... 服务器系统为linux,每月都有版本升级,这就需要对原程序代码进行备份。备份的方式我想实现增量备份,而...

Linux系统迁移(增加SSD)
新增SSD又懒得重装Linux折腾一番所以需要将现有的Linux直接迁移到新的硬盘中去,下面是我的做法:首先将硬盘装好后分区,并格式化。最好不要mount新的分区。其他分区也是同理。此外,dd命令会将uuid也拷贝过去。迁移完成后新分区里的系统还不能启动。如果将原来的分区删除后还是需要更新Grub配置的,只需要...

大邑县15375566590: 请问linux怎么增大socket连接上限? -
类帖巴泰: 2种方法 1.ulimit -n 5000 修改为5000.不过只对当前终端打开的应用程序有效. 2./etc/security/limits.conf 添加两行 * soft nofile 5000 * hard nofile 10000 你也可以把*改成root,这个标识是用户

大邑县15375566590: linux 下python socket缓冲区大小有限制吗?怎么样能增加? -
类帖巴泰: 是有一个函数,具体看这里:http://docs.python.org/howto/sockets.html

大邑县15375566590: Linux支持最大的SOCKET连接数量是多少 -
类帖巴泰: 基本无限制,百万级是小事,千万也可以.看你内存了 在Linux下Epoll模式默认只支持1024个连接,所以我们要修改一下Linux系统可打开的最大描述符限制. 最简单的修改方法你 可以用ulimit -n 3000 把允许最大开打的描述符修改为3000,但是怎么做,...

大邑县15375566590: linux socket 连接超时 怎么解决 -
类帖巴泰: select是不断的监听文件描述符,肯定能探测到它已经关闭了,那么关闭的fd肯定就得从它的fd_set中退出来哇,退出来了,它自然就不监听这个fd了,然后就只有等到超时退出了·····我个人的理解,说的好就给个分···呵呵··

大邑县15375566590: linux虚拟机进行socket通信要如何设置 -
类帖巴泰: 请终端下输入 sudo netstat -a 如果看到了,如果能看到很多unix的链接流.则证明linux系统本身已经启用了很多socket通信.已经是设置好的.至于如何进行socket通信编程.请寻找相关资料自学.如果你只是想建立到远端服务器的一个ip隧道.架设加密代理的隧道,那么请告知你使用的linux版本,以及使用的软件.

大邑县15375566590: 如何实现Linux下异步socket通讯 -
类帖巴泰: 个人的一点见解:如果要利用linux系统所提供的接口,应该考虑的是接口的参数类型及返回类型,可以使用C++风格的代码对C的接口进行一下封装,在封装内部实现数据类型的转换和通行工作,并考虑可以预见的异常情况.

大邑县15375566590: php怎样开启 socket 扩展 -
类帖巴泰: 下个相同版本的php源码,进行编译安装,再按照上面步骤搞,生成的so.copy到rpm装的那个,修改php.ini进行扩展就行了,或者到网上找相同版本,相同系统 的编译好的so文件.在linux下给PHP安装socket扩展,参考方法如下:#cd /home/...

大邑县15375566590: linux设置telnet服务最大连接数的方法 -
类帖巴泰: /etc/xinetd.d/telnet 文件内容 service telnet { disable = no flags = REUSE socket_type = stream wait = no user = roo..........etc/xinetd.d/telnet 文件内容 service telnet {disable = noflags = REUSEsocket_type = streamwait = nouser = rootserver = ...

大邑县15375566590: php怎么打开socket扩展 -
类帖巴泰: 要使用扩展必须php已经安装了这个扩展,在windows下,下载php_socket.dll放到apache文件目录下的ext目录下,修改php.ini的文件,找到extension=php_socket.dll这一行,把前面的;去掉,若没找到则添加,再重启.在linux下需要编译安装,再打开配置文件添加extension = php_socket.so

大邑县15375566590: 如何在linux下使用c语言 利用select和pthread编写可以实现多用户的大文件传输的socket通信程序? -
类帖巴泰: 你的意思是单独使用select或者单独使用pthread么?单独使用select的话,就是server的监听socket监听到来自client的请求,那么就会有一个socket句柄,通过使用select来管理多个句柄,而不需要多个线程thread.单独使用thread的话,就是server监听到socket请求,那么就会创建一个thread来处理文件的传输的事儿.那么这样的话就会有穿多个文件,就会有多个线程出现.

本站内容来自于网友发表,不代表本站立场,仅表示其个人看法,不对其真实性、正确性、有效性作任何的担保
相关事宜请发邮件给我们
© 星空见康网