我如何等待多个其他 Goroutine 上的单个 Goroutine 响应?
来源:stackoverflow
时间:2024-04-12 14:48:35 108浏览 收藏
最近发现不少小伙伴都对Golang很感兴趣,所以今天继续给大家介绍Golang相关的知识,本文《我如何等待多个其他 Goroutine 上的单个 Goroutine 响应?》主要内容涉及到等等知识点,希望能帮到你!当然如果阅读本文时存在不同想法,可以在评论中表达,但是请勿使用过激的措辞~
大家好,我从 Python3 过渡到 Go,所以我尝试重写我创建的库以获得更好的性能。
我面临着一个问题,因为我是 Golang XD 中的菜鸟,我使用有限的 API 来下载数百个 json,并且我希望尽可能使用更少的请求。 因此,在下载这些 json 时,使用的一些 URL 是重复的,我的第一个想法是在我的下载函数( goroutine )和每个 goroutine 之间传递一个 map[stringLink]*myJsonReceived ,然后在下载之前检查链接是否已被另一个 goroutine 处理,因此与其再次请求并浪费带宽+ API 调用,不如等待其他 goroutine 完成下载并从字典中获取它。
我有几个选择:
1) goroutine 必须检查链接是否在地图内(如果是),它每隔 0.05 秒检查字典内的指针是否仍然为 nil 或者包含 json。 (可能是最糟糕的方法,但它有效)
2)将 Goroutines 之间传递的映射更改为 (map[stringlink]chan myjson) 这可能是最有效的方法,但我不知道如何将单个消息发送到通道并由多个等待的 Goroutine 接收它。 p>
3) 我可以通过向结构体添加一个计数器来使用选项 (2),每次 goroutine 发现该 url 已被请求时,它只需向计数器添加 +1 并等待来自通道的响应,当下载 goroutine 完成后会向通道发送 X 条消息。但这种方式会让我在地图上添加太多的锁,这会浪费性能。
注意:我需要在所有函数执行结束时使用地图将下载的 Json 保存到我的数据库中,以免再次下载它们。
预先感谢大家的帮助。
解决方案
我想要解决你的任务是我会使用 goroutine 池来解决这个问题。会有一个生产者在通道上发送 URL,并且工作协程将在该通道上接收 URL 来处理(获取)。一旦 URL“完成”,同一个工作 Goroutine 也可以将其保存到数据库中,或者将结果传递到“收集器”goroutine 的结果通道上,如果需要,该 Goroutine 可以按顺序完成保存。
这种构造设计可确保通道上发送的每个 URL 仅由一个工作 goroutine 接收,因此您不需要任何其他同步(在使用共享地图的情况下需要同步)。更多频道信息请参见What are golang channels used for?
相对于共享变量,Go 更倾向于 goroutine(通道)之间的通信。引用自Effective Go: Share by communicating:
不要通过共享内存进行通信;相反,通过通信来共享内存。
有关如何创建工作池的示例,请参阅 Is this an idiomatic worker thread pool in Go?
以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于Golang的相关知识,也可关注golang学习网公众号。
-
502 收藏
-
502 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
139 收藏
-
204 收藏
-
325 收藏
-
477 收藏
-
486 收藏
-
439 收藏
-
357 收藏
-
352 收藏
-
101 收藏
-
440 收藏
-
212 收藏
-
143 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习