详解Gochannel管道的运行原理
来源:脚本之家
时间:2023-05-12 07:59:34 342浏览 收藏
目前golang学习网上已经有很多关于Golang的文章了,自己在初次阅读这些文章中,也见识到了很多学习思路;那么本文《详解Gochannel管道的运行原理》,也希望能帮助到大家,如果阅读完后真的对你学习Golang有帮助,欢迎动动手指,评论留言并分享~
功能
举个例子看下channel的使用效果:
package main import ( "fmt" "math/rand" "time" ) func write(c chan int) { for { num := rand.Intn(100) c
以上代码新建了一个缓冲区为8的管道,然后开启read和五个write读写协程。写协程写入一个随机数,读协程每隔一秒读取并打印,效果如下:
说明协程间可以通过管道来互相通信。接着了解下channel的结构。
channel结构
channel结构体位于GOROOT/src/runtime/chan.go
下的hchan,源码如下:
type hchan struct { qcount uint // 队列中元素总数 dataqsiz uint // 环型队列大小 buf unsafe.Pointer // 指向dataqsize的数组(即缓冲区) elemsize uint16 closed uint32 elemtype *_type // 元素类型 sendx uint // 发送到缓冲区的位置索引 recvx uint // 接收到缓冲区的位置索引 recvq waitq // 接收者队列 sendq waitq // 发送者队列 lock mutex // 锁,用于保护channel数据 }
其中发送者和接收者队列是一个waitq类型,具体如下:
type waitq struct { first *sudog last *sudog }
waitq里有队头first
,队尾last
的指针,指向sudog
结构体。
也就是说,waitq是一个列表队列,队列里每个元素都是一个sudog结构体,sudog中包装着一个协程。
解析一个hchan
各部分结构:
- 头部
type hchan struct { qcount uint // 队列中元素总数 dataqsiz uint // 环型队列大小 buf unsafe.Pointer // 指向dataqsize的数组(即缓冲区) elemsize uint16 closed uint32 elemtype *_type // 元素类型 ... }
这部分表示一个环型缓冲区。图解如下:
- 尾部
type hchan struct { ... sendx uint // 发送到缓冲区的位置索引 recvx uint // 接收到缓冲区的位置索引 recvq waitq // 接收者队列 sendq waitq // 发送者队列 ... }
这部分把协程分为两个身份,使用chan 语法的协程为发送者,使用
语法的协程为接收者,并放到各自队列中。图解如下:
结合示例代码。运行结构如下:
由于写协程一直写,读协程每隔一秒才读一次,因此很快将缓冲区写满了,这时:
- 写协程被装入sudog进行休眠等待
- 读协程每隔一秒从缓冲区读取数据
运行原理
使用chan 为发送者,对发送者来说:
- 先查看是否有接收者,有则优先唤醒并拷贝数据给接收者,然后结束
- 无接收者再查看缓冲区,数据未满则将数据放入缓冲区,然后结束
- 缓冲区也满了,则封装成sudog,休眠等待
使用 为接收者,对接收者来说:
- 优先接收缓冲区的值
- 再接收发送者的值
- 否则休眠等待
思考下:
有休眠的接收者,且缓冲区数据已满的情况是否存在?为什么?
有休眠的发送者,且缓冲区为空的情况是否存在?为什么?
以上答案:
有休眠的接收者,缓冲区不会出现数据已满情况。因为接收者要休眠,得缓冲区没数据才行。
有休眠的发送者,缓冲区不会出现为空情况。因为发送者要休眠,得缓冲区数据已满才行。
源码分析
使用chan 后,会调用
GOROOT\src\runtime\chan.go
下的chansend1
方法
func chansend1(c *hchan, elem unsafe.Pointer) { chansend(c, elem, true, getcallerpc()) }
然后调用chansend
方法
func chansend(c *hchan, ep unsafe.Pointer, block bool, callerpc uintptr) bool { ... lock(&c.lock) if c.closed != 0 { unlock(&c.lock) panic(plainError("send on closed channel")) } // 尝试接收者队列出队,若有接收者,则直接拷贝数据给接收者 if sg := c.recvq.dequeue(); sg != nil { send(c, sg, ep, func() { unlock(&c.lock) }, 3) return true } // 判断缓冲区是否还有空余 if c.qcount 0 { blockevent(mysg.releasetime-t0, 2) } mysg.c = nil releaseSudog(mysg) // 释放sudog if closed { if c.closed == 0 { throw("chansend: spurious wakeup") } panic(plainError("send on closed channel")) } return true }
使用后,会调用
GOROOT\src\runtime\chan.go
下的chanrecv1
方法
func chanrecv1(c *hchan, elem unsafe.Pointer) { chanrecv(c, elem, true) }
然后调用chanrecv
方法
func chanrecv(c *hchan, ep unsafe.Pointer, block bool) (selected, received bool) { ... lock(&c.lock) if c.closed != 0 { if c.qcount == 0 { if raceenabled { raceacquire(c.raceaddr()) } unlock(&c.lock) if ep != nil { typedmemclr(c.elemtype, ep) } return true, false } // The channel has been closed, but the channel's buffer have data. } else { // 如果有发送者在休眠,则调用recv if sg := c.sendq.dequeue(); sg != nil { recv(c, sg, ep, func() { unlock(&c.lock) }, 3) return true, true } } // 无发送者,但缓冲区有数据 if c.qcount > 0 { // Receive directly from queue qp := chanbuf(c, c.recvx) if raceenabled { racenotify(c, c.recvx, nil) } if ep != nil { typedmemmove(c.elemtype, ep, qp) } typedmemclr(c.elemtype, qp) c.recvx++ if c.recvx == c.dataqsiz { c.recvx = 0 } c.qcount-- unlock(&c.lock) return true, true } if !block { unlock(&c.lock) return false, false } // 休眠自己 gp := getg() mysg := acquireSudog() mysg.releasetime = 0 if t0 != 0 { mysg.releasetime = -1 } // No stack splits between assigning elem and enqueuing mysg // on gp.waiting where copystack can find it. mysg.elem = ep mysg.waitlink = nil gp.waiting = mysg mysg.g = gp mysg.isSelect = false mysg.c = c gp.param = nil c.recvq.enqueue(mysg) // 封装成sudog入队 gp.parkingOnChan.Store(true) // 主动挂起 gopark(chanparkcommit, unsafe.Pointer(&c.lock), waitReasonChanReceive, traceEvGoBlockRecv, 2) // 被唤醒后释放sudog if mysg != gp.waiting { throw("G waiting list is corrupted") } gp.waiting = nil gp.activeStackChans = false if mysg.releasetime > 0 { blockevent(mysg.releasetime-t0, 2) } success := mysg.success gp.param = nil mysg.c = nil releaseSudog(mysg) return true, success }
当有发送者,会调用recv
func recv(c *hchan, sg *sudog, ep unsafe.Pointer, unlockf func(), skip int) { if c.dataqsiz == 0 { if raceenabled { racesync(c, sg) } if ep != nil { // copy data from sender recvDirect(c.elemtype, sg, ep) } } else { // 获取缓冲区数据的位置 qp := chanbuf(c, c.recvx) if raceenabled { racenotify(c, c.recvx, nil) racenotify(c, c.recvx, sg) } // copy data from queue to receiver if ep != nil { // 将缓冲区数据拷贝到 typedmemmove(c.elemtype, ep, qp) } // 将发送者的数据拷贝到缓冲区 typedmemmove(c.elemtype, qp, sg.elem) c.recvx++ if c.recvx == c.dataqsiz { c.recvx = 0 } c.sendx = c.recvx // c.sendx = (c.sendx+1) % c.dataqsiz } sg.elem = nil gp := sg.g unlockf() gp.param = unsafe.Pointer(sg) sg.success = true if sg.releasetime != 0 { sg.releasetime = cputicks() } goready(gp, skip+1) // 唤醒发送者协程 }
因此,接收者还是先接收缓冲区数据,再接收发送者的数据。其实就是按队列的先进先出顺序。
总结
留下两个问题:
发送者分别遇到无有休眠接收协程,有休眠接收协程,无接收协程且缓冲区没满,缓冲区满了四种情况该如何处理?
接收者分别遇到无休眠发送协程且缓冲区为空,无发送协程且缓冲区有数据,有休眠发送协程且缓冲区已满,缓冲区满了四种情况该如何处理?
好了,本文到此结束,带大家了解了《详解Gochannel管道的运行原理》,希望本文对你有所帮助!关注golang学习网公众号,给大家分享更多Golang知识!
-
174 收藏
-
200 收藏
-
440 收藏
-
477 收藏
-
442 收藏
-
233 收藏
-
322 收藏
-
181 收藏
-
316 收藏
-
244 收藏
-
300 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 娇气的老师
- 这篇技术文章真及时,太细致了,很有用,码起来,关注up主了!希望up主能多写Golang相关的文章。
- 2023-06-29 06:23:07
-
- 难过的吐司
- 写的不错,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢楼主分享技术文章!
- 2023-06-10 02:06:16
-
- 平淡的龙猫
- 细节满满,收藏了,感谢大佬的这篇技术文章,我会继续支持!
- 2023-05-30 08:54:06
-
- 风中的月饼
- 这篇技术文章真及时,大佬加油!
- 2023-05-28 06:29:16
-
- 自觉的黑米
- 感谢大佬分享,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢师傅分享博文!
- 2023-05-26 15:35:46
-
- 呆萌的中心
- 太全面了,码起来,感谢作者大大的这篇技术文章,我会继续支持!
- 2023-05-25 17:56:45
-
- 光亮的小蝴蝶
- 这篇技术贴太及时了,好细啊,很有用,码起来,关注up主了!希望up主能多写Golang相关的文章。
- 2023-05-24 04:32:21