登录
首页 >  Golang >  Go问答

在Go中分配了大量的内存。怎么修?

来源:stackoverflow

时间:2024-04-22 17:54:35 185浏览 收藏

大家好,我们又见面了啊~本文《在Go中分配了大量的内存。怎么修?》的内容中将会涉及到等等。如果你正在学习Golang相关知识,欢迎关注我,以后会给大家带来更多Golang相关文章,希望我们能一起进步!下面就开始本文的正式内容~

问题内容

为 50 个 5 mb 请求分配了数百 mb 内存。内存已分配且不再释放。 我怎样才能清除我的记忆?为什么会发生这种情况?

我已经在我的家用电脑和 vps 上尝试过 ubuntu

package main

import (
    "fmt"
    "io/ioutil"
    "net/http"
    "time"
)

func main() {
    fmt.Println("start")

    for i := 0; i < 50; i++ {
        go func() {
            DoRequest()
        }()
        time.Sleep(10 * time.Millisecond)
    }

    time.Sleep(10 * time.Minute)
}

func DoRequest() error {
    requestUrl := "https://blockchain.info/rawblock/0000000000000000000eebedea046425bd54626e6c56eb032e66e714d0141ea6"

    req, err := http.NewRequest("GET", requestUrl, nil)

    if err != nil {
        return err
    }

    req.Header.Set("user-agent", "free")

    httpClient := &http.Client{
        Timeout: time.Second * 10,
    }

    resp, err := httpClient.Do(req)

    if resp != nil {
        defer resp.Body.Close()
    }

    if err != nil {
        return err
    }

    body, err := ioutil.ReadAll(resp.Body)
    if err != nil {
        return err
    }

    fmt.Println("bodylen", len(body))

    return nil
}

在某处分配了 400mb


解决方案


for i := 0; i < 50; i++ {
        go func() {
            dorequest()
        }()
        time.sleep(10 * time.millisecond)
    }

永远不要创建这样的 go-routine。始终确保您创建 go 例程的方式在任何情况下(包括最坏的情况)都不会填充大量(全部)内存

简单的解决方案是控制一次可以生成(或运行)的 go 例程的数量。

您可以通过乘以一次要运行的 go 例程的 max-number 和 1 个 go 例程可以使用的 max-memory 来预先计算最坏情况下要占用的内存。

您可以使用通道来控制 go 例程的实例。

请参阅此 stackoverflow 问题的第一个答案 Always have x number of goroutines running at any time

始终在性能和所需资源之间使用平衡的解决方案。

2019 年 6 月 11 日更新

这是示例 go 程序 https://play.golang.org/p/HovNRgp6FxH

您正在为每个 go 例程创建一个 http 客户端。

http 客户端被设计为一次创建并多次使用。它们是日常安全的。 它们允许连接重用和其他效率节省。

在 main 中(而不是在您的 go 例程中)创建一次 http 客户端,然后将此单个引用传递给您的所有 50 个 go 例程。

编辑:此外,虽然它可能不会对您的情况产生实际影响,但请求的顺序通常如下所示:

resp, err := httpClient.Do(req)
if err != nil {
        return err // check error first
}
defer resp.Body.Close() // no error - so resp will *NOT* be nil - so this is safe

编辑 2: 正如 @adrian 所提到的:go 的垃圾收集不是瞬时的 - 也不应该是 - 因为它是一项昂贵的操作。如果您不再需要某个内存块 - 只需不再引用它即可。让 gc 完成它的工作,这样您就可以专注于您的工作!

如果您对 go gc 的演变感到好奇:

终于介绍完啦!小伙伴们,这篇关于《在Go中分配了大量的内存。怎么修?》的介绍应该让你收获多多了吧!欢迎大家收藏或分享给更多需要学习的朋友吧~golang学习网公众号也会发布Golang相关知识,快来关注吧!

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>