登录
首页 >  Golang >  Go问答

为何套接字无法立即同时批量打开?

来源:stackoverflow

时间:2024-02-23 20:15:26 409浏览 收藏

对于一个Golang开发者来说,牢固扎实的基础是十分重要的,golang学习网就来带大家一点点的掌握基础知识点。今天本篇文章带大家了解《为何套接字无法立即同时批量打开?》,主要介绍了,希望对大家的知识积累有所帮助,快点收藏起来吧,否则需要时就找不到了!

问题内容

osx 套接字编程

为什么套接字不会立即批量打开?

我正在使用英特尔 macos big sur 11.5.1

正在与本地docker nginx服务器进行连接测试。

我们使用golang进行测试,代码如下:

func testbulkconnection(t *testing.t) {
    var worker = 1000
    var wg sync.waitgroup
    for i := 0; i < worker; i++ {
        wg.add(1)
        //time.sleep(time.millisecond * 10)

        go func(id int) {
            conn, err := net.dial("tcp", "localhost:9000")
            if err != nil {
                log.fatal(err)
            }
            defer conn.close()
            defer wg.done()

            fmt.println("waiting... ", id)
            time.sleep(time.second * 30)

        }(i)
    }

    wg.wait()
}

1000 个 goroutine 仅连接到 nginx。 连接后,使用 sleep() 函数来确保没有执行任何操作。

客户端创建了 1000 个 goroutine,但发现只有 200 到 300 个 nginx 和连接有效,其余的无效(我们用 netstat-anv | grep 9000 确认)。

连接时,执行sleep()函数时确认所有连接均已建立良好。

使用 nginx 和客户端代码,当从私有 ubuntu 18.04 旋转时,连接立即得到确认。

我认为是nginx服务器端的问题,但不知道问题的原因。

这次测试中mac和ubuntu有区别吗?

已添加

let net = require('net');

for (let i = 0; i < 1000; i++) {
    const socket = net.connect({ port: 9000 });
    socket.on('connect', function () {
        console.log('connected to server!');
    });
}

netstat -anv | 9000 | grep 9000 | grep 9000厕所-l

2000 连接正常

已添加

以下链接用于增加osx的文件描述符。

https://wilsonmar.github.io/maximum-limits/

在恢复模式下,还执行了“csrutil disable”。

$ ulimit -a
-t: cpu time (seconds) unlimited
-f: file size (blocks) unlimited
-d: data seg size (kbytes) unlimited
-s: stack size (kbytes) 8192
-c: core file size (blocks) 0
-v: address space (kbytes) unlimited
-l: locked-in-memory size (kbytes) unlimited
-u: processes 2048
-n: file descriptors 524288

但仍然如此。

$ netstat -anv | grep 9000 | wc -l
287

正确答案


每个基于 unix 的操作系统对进程可以打开的文件描述符的数量都有限制。此外,每个套接字都会消耗一个文件描述符,就像在磁盘或 stdinstdoutstderr 上打开文件一样。

macos 默认情况下将每个进程的文件描述符限制设置为256。因此,你的 go 进程停止在 200-300 个连接左右的说法听起来是正确的。理论上,它应该在 253 连接后停止打开套接字(3 个文件描述符已分配给 stdin、stdout 和 stderr)。

另一方面,ubuntu 将默认限制设置为 1024。在 ubuntu 上您仍然会遇到这个问题,但它将能够在您碰壁之前打开更多套接字。

在这两个系统上,您可以通过运行以下命令来检查此限制:

ulimit -n

注意:您可以运行 ulimit -a 查看所有限制。

在 macos 上,您可以使用以下命令在系统范围内临时更改此限制(重新启动后将重置):

sudo launchctl limit maxfiles 1024 1024

在 ubuntu 上,您可以使用以下命令在当前 shell 中更改此限制:

ulimit -n 1024

这应该能让您的 1000 个连接成功。请注意,该数字不必是 2 的幂。例如,您可以传递 1500。请记住,您的进程将文件描述符用于套接字以外的其他事物。

今天关于《为何套接字无法立即同时批量打开?》的内容就介绍到这里了,是不是学起来一目了然!想要了解更多关于的内容请关注golang学习网公众号!

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>