登录
首页 >  Golang >  Go问答

golang程序中的内存消耗不断增长,但只占用极少inuse空间

来源:stackoverflow

时间:2024-02-28 09:54:24 236浏览 收藏

有志者,事竟成!如果你在学习Golang,那么本文《golang程序中的内存消耗不断增长,但只占用极少inuse空间》,就很适合你!文章讲解的知识点主要包括,若是你对本文感兴趣,或者是想搞懂其中某个知识点,就请你继续往下看吧~

问题内容

我有一个 golang 程序定期运行一些例程。它的内存(顶部结果中的 rss)在某些服务器上持续增长,但在某些服务器上却没有。奇怪的是,rss 增长实例的 pprof 结果显示该进程只占用了很少的 inuse_space 内存。

这是否意味着内存正在等待golang来gc?但是48小时后,内存从26000kb增长到74000kb,我认为golang应该已经做了几次gc了。

我已经使用sync.pool来避免频繁地new()对象。如何减少内存使用?

下面附上详细数据,谢谢!

48小时内rss使用情况(以kb为单位):

使用空间:

(pprof) top
showing nodes accounting for 1040.73kb, 100% of 1040.73kb total
      flat  flat%   sum%        cum   cum%
  524.09kb 50.36% 50.36%   524.09kb 50.36%  sp/audit.coll
  516.64kb 49.64%   100%   516.64kb 49.64%  sp/audit.coll.func2
         0     0%   100%   524.09kb 50.36%  sa/core.(*pr).run
         0     0%   100%   516.64kb 49.64%  sa/fw.(*group).go.func1
         0     0%   100%   516.64kb 49.64%  sp/audit/dis.(*relay).relay
         0     0%   100%   516.64kb 49.64%  sync.(*pool).get
(pprof) top -cum
showing nodes accounting for 1040.73kb, 100% of 1040.73kb total
      flat  flat%   sum%        cum   cum%
         0     0%     0%   524.09kb 50.36%  sa/core.(*pr).run
  524.09kb 50.36% 50.36%   524.09kb 50.36%  sp/audit.coll
         0     0% 50.36%   516.64kb 49.64%  sa/fw.(*group).go.func1
  516.64kb 49.64%   100%   516.64kb 49.64%  sp/audit.coll.func2
         0     0%   100%   516.64kb 49.64%  sp/audit/dis.(*relay).relay
         0     0%   100%   516.64kb 49.64%  sync.(*pool).get

分配空间:

Showing top 10 nodes out of 181
      flat  flat%   sum%        cum   cum%
 3306.19MB 25.83% 25.83%  3306.71MB 25.84%  io.copyBuffer
 1294.76MB 10.12% 35.95%  1386.15MB 10.83%  os.(*File).readdirnames
 1121.62MB  8.76% 44.71%  1121.62MB  8.76%  syscall.anyToSockaddr
  471.56MB  3.68% 48.40%   471.56MB  3.68%  net.newFD
  413.74MB  3.23% 51.63%   413.74MB  3.23%  bytes.makeSlice
  356.52MB  2.79% 54.41%   356.52MB  2.79%  github.com/go-xorm/xorm.(*Statement).Init
  261.55MB  2.04% 56.46%   309.05MB  2.41%  os.lstatNolog
  241.03MB  1.88% 58.34%   275.03MB  2.15%  os.Readlink
  236.51MB  1.85% 60.19%   236.51MB  1.85%  reflect.packEface
  230.51MB  1.80% 61.99%   230.51MB  1.80%  net.sockaddrToUnix
(pprof) top -cum
Showing nodes accounting for 3328.69MB, 26.01% of 12798.76MB total
Dropped 439 nodes (cum <= 63.99MB)
Showing top 10 nodes out of 181
      flat  flat%   sum%        cum   cum%
    6.50MB 0.051% 0.051%  6244.66MB 48.79%  sp/filesystem.walk
         0     0% 0.051%  6244.66MB 48.79%  sp/filesystem.walkProxy
         0     0% 0.051%  6088.14MB 47.57%  sa/fw.(*WorkerPool).StartWorker.func1
         0     0% 0.051%  5073.21MB 39.64%  sa/core.(*procRuntime).run
       1MB 0.0078% 0.059%  3446.69MB 26.93%  sp/filesystem.buildFileStat
       4MB 0.031%  0.09%  3431.67MB 26.81%  sp/filesystem.Chksum
         0     0%  0.09%  3334.15MB 26.05%  io.CopyN
         0     0%  0.09%  3306.71MB 25.84%  io.Copy
 3306.19MB 25.83% 25.92%  3306.71MB 25.84%  io.copyBuffer
      11MB 0.086% 26.01%  2659.24MB 20.78%  sa/fw.(*DBO).insertKeepOld

解决方案


从 1.12 开始,go 开始使用 madvise 的惰性释放 MADV_FREE 模式向操作系统释放内存。除非系统存在内存压力,否则这不会显示在 RSS 中。要获得真正的用法,您必须查看 RSS - LazyFree。它在/proc 中报告。

本篇关于《golang程序中的内存消耗不断增长,但只占用极少inuse空间》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于Golang的相关知识,请关注golang学习网公众号!

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>