为何套接字无法立即同时批量打开?
来源:stackoverflow
时间:2024-02-23 20:15:26 409浏览 收藏
对于一个Golang开发者来说,牢固扎实的基础是十分重要的,golang学习网就来带大家一点点的掌握基础知识点。今天本篇文章带大家了解《为何套接字无法立即同时批量打开?》,主要介绍了,希望对大家的知识积累有所帮助,快点收藏起来吧,否则需要时就找不到了!
osx 套接字编程
为什么套接字不会立即批量打开?
我正在使用英特尔 macos big sur 11.5.1
正在与本地docker nginx服务器进行连接测试。
我们使用golang进行测试,代码如下:
func testbulkconnection(t *testing.t) { var worker = 1000 var wg sync.waitgroup for i := 0; i < worker; i++ { wg.add(1) //time.sleep(time.millisecond * 10) go func(id int) { conn, err := net.dial("tcp", "localhost:9000") if err != nil { log.fatal(err) } defer conn.close() defer wg.done() fmt.println("waiting... ", id) time.sleep(time.second * 30) }(i) } wg.wait() }
1000 个 goroutine 仅连接到 nginx。 连接后,使用 sleep() 函数来确保没有执行任何操作。
客户端创建了 1000 个 goroutine,但发现只有 200 到 300 个 nginx 和连接有效,其余的无效(我们用 netstat-anv | grep 9000 确认)。
连接时,执行sleep()函数时确认所有连接均已建立良好。
使用 nginx 和客户端代码,当从私有 ubuntu 18.04 旋转时,连接立即得到确认。
我认为是nginx服务器端的问题,但不知道问题的原因。
这次测试中mac和ubuntu有区别吗?
已添加
let net = require('net'); for (let i = 0; i < 1000; i++) { const socket = net.connect({ port: 9000 }); socket.on('connect', function () { console.log('connected to server!'); }); }
netstat -anv | 9000 | grep 9000 | grep 9000厕所-l
2000 连接正常
已添加
以下链接用于增加osx的文件描述符。
https://wilsonmar.github.io/maximum-limits/
在恢复模式下,还执行了“csrutil disable”。
$ ulimit -a -t: cpu time (seconds) unlimited -f: file size (blocks) unlimited -d: data seg size (kbytes) unlimited -s: stack size (kbytes) 8192 -c: core file size (blocks) 0 -v: address space (kbytes) unlimited -l: locked-in-memory size (kbytes) unlimited -u: processes 2048 -n: file descriptors 524288
但仍然如此。
$ netstat -anv | grep 9000 | wc -l 287
正确答案
每个基于 unix 的操作系统对进程可以打开的文件描述符的数量都有限制。此外,每个套接字都会消耗一个文件描述符,就像在磁盘或 stdin
、stdout
和 stderr
上打开文件一样。
macos 默认情况下将每个进程的文件描述符限制设置为256。因此,你的 go 进程停止在 200-300 个连接左右的说法听起来是正确的。理论上,它应该在 253 连接后停止打开套接字(3 个文件描述符已分配给 stdin、stdout 和 stderr)。
另一方面,ubuntu 将默认限制设置为 1024。在 ubuntu 上您仍然会遇到这个问题,但它将能够在您碰壁之前打开更多套接字。
在这两个系统上,您可以通过运行以下命令来检查此限制:
ulimit -n
注意:您可以运行 ulimit -a
查看所有限制。
在 macos 上,您可以使用以下命令在系统范围内临时更改此限制(重新启动后将重置):
sudo launchctl limit maxfiles 1024 1024
在 ubuntu 上,您可以使用以下命令在当前 shell 中更改此限制:
ulimit -n 1024
这应该能让您的 1000 个连接成功。请注意,该数字不必是 2 的幂。例如,您可以传递 1500
。请记住,您的进程将文件描述符用于套接字以外的其他事物。
今天关于《为何套接字无法立即同时批量打开?》的内容就介绍到这里了,是不是学起来一目了然!想要了解更多关于的内容请关注golang学习网公众号!
-
502 收藏
-
502 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
139 收藏
-
204 收藏
-
325 收藏
-
477 收藏
-
486 收藏
-
439 收藏
-
357 收藏
-
352 收藏
-
101 收藏
-
440 收藏
-
212 收藏
-
143 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习