Golang之sync.Pool使用详解
来源:脚本之家
时间:2023-02-16 15:20:48 188浏览 收藏
本篇文章主要是结合我之前面试的各种经历和实战开发中遇到的问题解决经验整理的,希望这篇《Golang之sync.Pool使用详解》对你有很大帮助!欢迎收藏,分享给更多的需要的朋友学习~
前言
我们通常用 Golang 来开发并构建高并发场景下的服务,但是由于 Golang 内建的GC机制多少会影响服务的性能,因此,为了减少频繁GC,Golang提供了对象重用的机制,也就是使用sync.Pool构建对象池。
sync.Pool介绍
首先sync.Pool是可伸缩的临时对象池,也是并发安全的。其可伸缩的大小会受限于内存的大小,可以理解为是一个存放可重用对象的容器。sync.Pool设计的目的就是用于存放已经分配的但是暂时又不用的对象,而且在需要用到的时候,可以直接从该pool中取。
pool中任何存放的值可以在任何时候被删除而不会收到通知。另外,在高负载下pool对象池可以动态的扩容,而在不使用或者说并发量不高时对象池会收缩。关键思想就是对象的复用,避免重复创建、销毁,从而影响性能。
个人觉得它的名字有一定的误导性,因为 Pool 里装的对象可以被无通知地被回收,觉得 sync.Cache 的名字更合适sync.Pool的命名。
sync.Pool首先声明了两个结构体,如下:
// Local per-P Pool appendix. type poolLocalInternal struct { private interface{} // Can be used only by the respective P. shared poolChain // Local P can pushHead/popHead; any P can popTail. } type poolLocal struct { poolLocalInternal // Prevents false sharing on widespread platforms with // 128 mod (cache line size) = 0 . pad [128 - unsafe.Sizeof(poolLocalInternal{})%128]byte }
为了使得可以在多个goroutine中高效的使用并发,sync.Pool会为每个P(对应CPU,这里有点像GMP模型)都分配一个本地池,当执行Get或者Put操作的时候,会先将goroutine和某个P的对象池关联,再对该池进行操作。
每个P的对象池分为私有对象和共享列表对象,私有对象只能被特定的P访问,共享列表对象可以被任何P访问。因为同一时刻一个P只能执行一个goroutine,所以无需加锁,但是对共享列表对象进行操作时,因为可能有多个goroutine同时操作,即并发操作,所以需要加锁。
需要注意的是 poolLocal 结构体中有个 pad 成员,其目的是为了防止false sharing。cache使用中常见的一个问题是false sharing。当不同的线程同时读写同一个 cache line上不同数据时就可能发生false sharing。false sharing会导致多核处理器上严重的系统性能下降。具体的解释说明这里就不展开赘述了。
sync.Pool的Put和Get方法
sync.Pool 有两个公开的方法,一个是Get,另一个是Put。
Put方法
我们先来看一下Put方法的源码,如下:
// Put adds x to the pool. func (p *Pool) Put(x interface{}) { if x == nil { return } if race.Enabled { if fastrand()%4 == 0 { // Randomly drop x on floor. return } race.ReleaseMerge(poolRaceAddr(x)) race.Disable() } l, _ := p.pin() if l.private == nil { l.private = x x = nil } if x != nil { l.shared.pushHead(x) } runtime_procUnpin() if race.Enabled { race.Enable() } }
阅读以上Put方法的源码可以知道:
- 如果Put放入的值为空,则直接 return 了,不会执行下面的逻辑了;
- 如果不为空,则继续检查当前goroutine的private是否设置对象池私有值,如果没有则将x赋值给该私有成员,并将x设置为nil;
- 如果当前goroutine的private私有值已经被赋值过了,那么将该值追加到共享列表。
Get方法
我们再来看下Get方法的源码,如下:
func (p *Pool) Get() interface{} { if race.Enabled { race.Disable() } l, pid := p.pin() x := l.private l.private = nil if x == nil { // Try to pop the head of the local shard. We prefer // the head over the tail for temporal locality of // reuse. x, _ = l.shared.popHead() if x == nil { x = p.getSlow(pid) } } runtime_procUnpin() if race.Enabled { race.Enable() if x != nil { race.Acquire(poolRaceAddr(x)) } } if x == nil && p.New != nil { x = p.New() } return x }
阅读以上Get方法的源码,可以知道:
- 首先尝试从本地P对应的那个对象池中获取一个对象值, 并从对象池中删掉该值。
- 如果从本地对象池中获取失败,则从共享列表中获取,并从共享列表中删除该值。
- 如果从共享列表中获取失败,则会从其它P的对象池中“偷”一个过来,并删除共享池中的该值(就是源码中14行的p.getSlow())。
- 如果还是失败,那么直接通过 New() 分配一个返回值,注意这个分配的值不会被放入对象池中。New()是返回用户注册的New函数的值,如果用户未注册New,那么默认返回nil。
init函数
最后我们来看一下init函数,如下:
func init() { funtime_registerPoolCleanup(poolCleanup) }
可以看到在init的时候注册了一个PoolCleanup函数,他会清除掉sync.Pool中的所有的缓存的对象,这个注册函数会在每次GC的时候运行,所以sync.Pool中的值只在两次GC中间的时段有效。
sync.Pool使用示例
示例代码:
package main import ( "fmt" "sync" ) // 定义一个 Person 结构体,有Name和Age变量 type Person struct { Name string Age int } // 初始化sync.Pool,new函数就是创建Person结构体 func initPool() *sync.Pool { return &sync.Pool{ New: func() interface{} { fmt.Println("创建一个 person.") return &Person{} }, } } // 主函数,入口函数 func main() { pool := initPool() person := pool.Get().(*Person) fmt.Println("首次从sync.Pool中获取person:", person) person.Name = "Jack" person.Age = 23 pool.Put(person) fmt.Println("设置的对象Name: ", person.Name) fmt.Println("设置的对象Age: ", person.Age) fmt.Println("Pool 中有一个对象,调用Get方法获取:", pool.Get().(*Person)) fmt.Println("Pool 中没有对象了,再次调用Get方法:", pool.Get().(*Person)) }
运行结果如下所示:
创建一个 person.
首次从sync.Pool中获取person:&{ 0}
设置的对象Name: Jack
设置的对象Age: 23
Pool 中有一个对象,调用Get方法获取:&{Jack 23}
创建一个 person.
Pool 中没有对象了,再次调用Get方法: &{ 0}
总结
通过以上的源码及其示例,我们可以知道:
- Get方法并不会对获取到的对象值做任何的保证,因为放入本地对象池中的值有可能会在任何时候被删除,而得不到通知。
- 放入共享池中的值有可能被其他的goroutine拿走,所以对象池比较适合用来存储一些临时切状态无关的数据,但是不适合用来存储数据库连接的实例,因为存入对象池的值有可能会在垃圾回收时被删除掉,这违反了数据库连接池建立的初衷。
由此可知,Golang的对象池严格意义上来说是一个临时的对象池,适用于储存一些会在goroutine间分享的临时对象。主要作用是减少GC,提高性能。在Golang中最常见的使用场景就是fmt包中的输出缓冲区了。
代码Github归档地址: sync.Pool使用示例代码
今天关于《Golang之sync.Pool使用详解》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
-
471 收藏
-
269 收藏
-
437 收藏
-
278 收藏
-
225 收藏
-
485 收藏
-
233 收藏
-
322 收藏
-
181 收藏
-
316 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 有魅力的网络
- 感谢大佬分享,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢up主分享文章!
- 2023-06-01 13:16:49
-
- 欢喜的导师
- 细节满满,已加入收藏夹了,感谢作者大大的这篇文章,我会继续支持!
- 2023-03-27 22:02:01
-
- 寂寞的哈密瓜
- 这篇文章真是及时雨啊,细节满满,赞 👍👍,mark,关注博主了!希望博主能多写Golang相关的文章。
- 2023-03-11 07:33:11
-
- 整齐的小鸽子
- 这篇技术贴真及时,太全面了,很有用,码住,关注师傅了!希望师傅能多写Golang相关的文章。
- 2023-03-03 00:18:19
-
- 长情的钢笔
- 太全面了,码起来,感谢师傅的这篇文章,我会继续支持!
- 2023-02-19 02:47:41
-
- 酷酷的热狗
- 真优秀,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者分享文章内容!
- 2023-02-17 18:19:35
-
- 昏睡的项链
- 这篇文章内容出现的刚刚好,很详细,真优秀,已收藏,关注up主了!希望up主能多写Golang相关的文章。
- 2023-02-17 08:17:31