如何在 Go 中为行插入重用单个 Postgres DB 连接?
来源:Golang技术栈
时间:2023-04-05 07:18:02 422浏览 收藏
一分耕耘,一分收获!既然打开了这篇文章《如何在 Go 中为行插入重用单个 Postgres DB 连接?》,就坚持看下去吧!文中内容包含golang等等知识点...希望你能在阅读本文后,能真真实实学到知识或者帮你解决心中的疑惑,也欢迎大佬或者新人朋友们多留言评论,多给建议!谢谢!
问题内容
我正在尝试使用 Go 为从 rabbitmq 接收到的每条新消息插入一行数据到 Postgres 表中,使用到在下面代码的 init 函数中打开的 DB 的单个连接。
代码不是只打开一个连接,而是打开 497 并最大化导致行插入停止......
我已经尝试使用这些问题中的信息[在 Go 应用程序中打开和关闭数据库连接](https://stackoverflow.com/questions/40587008/how-do-i-handle- opening-closing-db-connection-in-a-go- app/40587071#40587071)并[在一个函数](https://stackoverflow.com/questions/42581697/referring- to-an-open-database-connection-inside-a-function- golang)中打开数据库连接,该函数说我应该打开一个连接并使用全局数据库来允许主函数将 sql 语句传递给打开的连接初始化函数。
我以为我已经这样做了,但是正在为每个新行打开一个新连接,因此一旦达到 postgres 连接限制,代码就会停止工作......
我是 Go 新手,编程经验有限,过去两天我一直在尝试理解/解决这个问题,我真的可以通过一些帮助来理解我在哪里出错了......
var db *sql.DB
func init() {
var err error
db, err = sql.Open ( "postgres", "postgres://postgres:postgres@SERVER/PORT/DB")
if err != nil {
log.Fatal("Invalid DB config:", err)
}
if err = db.Ping(); err != nil {
log.Fatal("DB unreachable:", err)
}
}
func main() {
// RABBITMQ CONNECTION CODE IS HERE
// EACH MESSAGE RECEIVED IS SPLIT TO LEGEND, STATUS, TIMESTAMP VARIABLES
// VARIABLES ARE PASSED TO sqlSatement
sqlStatement := `
INSERT INTO heartbeat ("Legend", "Status", "TimeStamp")
VALUES ($1, $2, $3)
`
// sqlStatement IS THEN PASSED TO db.QueryRow
db.QueryRow(sqlStatement, Legend, Status, TimeStamp)
}
}()
完整代码如下所示:
package main
import (
"database/sql"
"log"
_ "github.com/lib/pq"
"github.com/streadway/amqp"
"strings"
)
var db *sql.DB
func failOnError(err error, msg string) {
if err != nil {
log.Fatalf("%s: %s", msg, err)
}
}
func init() {
var err error
db, err = sql.Open ( "postgres", "postgres://postgres:postgres@192.168.1.69:5432/test?sslmode=disable")
if err != nil {
log.Fatal("Invalid DB config:", err)
}
if err = db.Ping(); err != nil {
log.Fatal("DB unreachable:", err)
}
}
func main() {
conn, err := amqp.Dial("amqp://Admin:Admin@192.168.1.69:50003/")
failOnError(err, "Failed to connect to RabbitMQ")
defer conn.Close()
ch, err := conn.Channel()
failOnError(err, "Failed to open a channel")
defer ch.Close()
q, err := ch.QueueDeclare(
"HEARTBEAT", // name
false, // durable
false, // delete when unused
false, // exclusive
false, // no-wait
nil, // arguments
)
failOnError(err, "Failed to declare a queue")
msgs, err := ch.Consume(
q.Name, // queue
"", // consumer
false, // auto-ack
false, // exclusive
false, // no-local
false, // no-wait
nil, // args
)
failOnError(err, "Failed to register a consumer")
forever := make(chan bool)
go func() {
for d := range msgs {
myString := string(d.Body[:])
result := strings.Split(myString, ",")
Legend := result[0]
Status := result[1]
TimeStamp := result[2]
sqlStatement := `
INSERT INTO heartbeat ("Legend", "Status", "TimeStamp")
VALUES ($1, $2, $3)
`
//
db.QueryRow(sqlStatement, Legend, Status, TimeStamp)
}
}()
正确答案
首先,*sql.DB不是一个连接,而是一个连接池,它将打开尽可能多的连接,只要它需要和 postgres
服务器允许的数量。只有当池中没有空闲连接可供使用时,它才会打开新连接。
所以问题是DB打开的连接没有被释放,为什么?因为您在使用QueryRow时没有调用Scan返回*Row值。
在底层*Row拥有一个*Rows实例,该实例可以访问自己的连接,并且该连接在Scan被调用时会自动释放。如果Scan未调用,则不会释放连接,这会导致DB池在下一次调用
时打开新连接QueryRow。因此,由于您没有释放任何连接,因此DB会不断打开新连接,直到达到 postgres
设置指定的限制,然后下一次调用QueryRow挂起,因为它等待连接变为空闲。
因此,Exec如果您不关心输出,则需要使用,或者需要调用Scan返回的*Row.
好了,本文到此结束,带大家了解了《如何在 Go 中为行插入重用单个 Postgres DB 连接?》,希望本文对你有所帮助!关注golang学习网公众号,给大家分享更多Golang知识!
-
439 收藏
-
262 收藏
-
193 收藏
-
188 收藏
-
500 收藏
-
109 收藏
-
177 收藏
-
103 收藏
-
331 收藏
-
496 收藏
-
255 收藏
-
117 收藏
-
476 收藏
-
122 收藏
-
172 收藏
-
101 收藏
-
241 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 485次学习