go database/sql -- 连接的申请与释放
来源:SegmentFault
时间:2023-01-12 20:12:45 171浏览 收藏
小伙伴们对数据库编程感兴趣吗?是否正在学习相关知识点?如果是,那么本文《go database/sql -- 连接的申请与释放》,就很适合你,本篇文章讲解的知识点主要包括MySQL、go、数据库。在之后的文章中也会多多分享相关知识点,希望对大家的知识积累有所帮助!
database/sql是go自带的操作sql的库,它维护了sql的连接池,包括连接的申请和释放。
连接池
datebase/sql维护了连接池,其配置:
db.SetMaxIdleConns(10) //设置空闲连接池中的最大idle连接数 db.SetMaxOpenConns(100) //设置数据库连接最大打开数 db.SetConnMaxLifetime(time.Hour) //设置可重用连接的最长时间
操作MySQL的示例程序:
import ( "database/sql" _ "github.com/go-sql-driver/mysql" ) func main() { db, _ := db.Open("mysql", "root:rootroot@/dqm?charset=utf8&parseTime=True&loc=Local") defer db.Close() db.SetMaxOpenConns(10) if err := db.Ping(); err != nil { fmt.Println("connect to MySQL failed, err:", err) return } rows, err := db.Query("select * from test where name = 'jackie' limit 10") if err != nil { fmt.Println("query error") } defer rows.Close() for rows.Next() { fmt.Println("close") } row, _ := db.Query("select * from test") fmt.Println(row, rows) }
db.Open(“mysql”, dsn)并不会真正连接MySQL,也不会校验数据库用户名/密码,仅校验了dsn格式。
只有在Ping()或者实际的Query()操作时才会建立连接。
故项目中一般在InitDB()时,除了Open(),还要Ping()以确认连接OK。
使用MySQL
database/sql用于操作数据库的CRUD,当操作mysql时使用驱动:
import ( _ "github.com/go-sql-driver/mysql" )
它会自动注册mysql的驱动:
//github.com/go-sql-driver/mysql/driver.go func init() { sql.Register("mysql", &MySQLDriver{}) }
源码分析:
初始化DB
// Open may just validate its arguments without creating a connection // to the database. To verify that the data source name is valid, call // Ping. func Open(driverName, dataSourceName string) (*DB, error) { driversMu.RLock() driveri, ok := drivers[driverName] driversMu.RUnlock() if !ok { return nil, fmt.Errorf("sql: unknown driver %q (forgotten import?)", driverName) } if driverCtx, ok := driveri.(driver.DriverContext); ok { connector, err := driverCtx.OpenConnector(dataSourceName) if err != nil { return nil, err } return OpenDB(connector), nil } return OpenDB(dsnConnector{dsn: dataSourceName, driver: driveri}), nil }
初始化DB仅构造了DB的结构,并没有创建真正的连接:
func OpenDB(c driver.Connector) *DB { ctx, cancel := context.WithCancel(context.Background()) db := &DB{ connector: c, openerCh: make(chan struct{}, connectionRequestQueueSize), resetterCh: make(chan *driverConn, 50), lastPut: make(map[*driverConn]string), connRequests: make(map[uint64]chan connRequest), stop: cancel, } go db.connectionOpener(ctx) //goroutine用于创建连接 go db.connectionResetter(ctx) //goroutine用于重置session return db }
获取连接
获取连接都是在具体的sql被执行的时候,如Query、Exec;
func (db *DB) Query(query string, args ...interface{}) (*Rows, error) { return db.QueryContext(context.Background(), query, args...) } func (db *DB) query(ctx context.Context, query string, args []interface{}, strategy connReuseStrategy) (*Rows, error) { dc, err := db.conn(ctx, strategy) //在这里获取连接:创建新的 或 使用cache的 if err != nil { return nil, err } //传入dc.releaseConn,query完毕后回调该函数 return db.queryDC(ctx, nil, dc, dc.releaseConn, query, args) }
通过db.conn()获取连接,先尝试从freeConn中拿,拿到就返回;否则看是否超过maxConn,没超就创建,否则进队列等待:
func (db *DB) conn(ctx context.Context, strategy connReuseStrategy) (*driverConn, error) { ...... // 尝试从连接池中拿 numFree := len(db.freeConn) if strategy == cachedOrNewConn && numFree > 0 { conn := db.freeConn[0] ... return conn, nil } // 如果超过最大连接数,要阻塞等待 if db.maxOpen > 0 && db.numOpen >= db.maxOpen { ...... } //创建一个新的连接 db.numOpen++ // optimistically ci, err := db.connector.Connect(ctx) dc := &driverConn{ db: db, createdAt: nowFunc(), ci: ci, inUse: true, } db.addDepLocked(dc, dc) return dc, nil }
释放连接
释放连接在query的db.releaseConn进行,释放连接实际是将连接放入连接池db.freeConn:
func (dc *driverConn) releaseConn(err error) { dc.db.putConn(dc, err, true) } // putConn adds a connection to the db's free pool. // err is optionally the last error that occurred on this connection. func (db *DB) putConn(dc *driverConn, err error, resetSession bool) { ...... added := db.putConnDBLocked(dc, nil) ...... } // Satisfy a connRequest or put the driverConn in the idle pool and return true // or return false. func (db *DB) putConnDBLocked(dc *driverConn, err error) bool { ...... db.freeConn = append(db.freeConn, dc) ...... }
查询时连接的释放
query的结果返回到Rows结构中,同时它把releaseConn传递给Row;
func (db *DB) queryDC(ctx, txctx context.Context, dc *driverConn, releaseConn func(error), query string, args []interface{}) (*Rows, error) { ...... rows := &Rows{ dc: dc, releaseConn: releaseConn, //传递relaseConn函数 rowsi: rowsi, } rows.initContextClose(ctx, txctx) return rows, nil ...... }
而在Rows.Next()函数中:
func (rs *Rows) Next() bool { var doClose, ok bool withLock(rs.closemu.RLocker(), func() { doClose, ok = rs.nextLocked() }) if doClose { //发现没有记录了,就释放连接 rs.Close() } return ok } func (rs *Rows) Close() error { return rs.close(nil) } func (rs *Rows) close(err error) error { rs.closemu.Lock() defer rs.closemu.Unlock() if rs.closed { return nil } rs.closed = true //置关闭标志位 ...... rs.releaseConn(err) //释放连接 return err }
也就是说,用Rows.Next()来释放连接;但是,如果在使用时没有遍历到最后,它不会自动释放连接。
建议最好使用defer rows.Close()手动确认关闭,从代码可以看出,rows.Close()是可重入的(置closed标志位,下次调用直接return)。
以上就是《go database/sql -- 连接的申请与释放》的详细内容,更多关于mysql的资料请关注golang学习网公众号!
-
499 收藏
-
244 收藏
-
235 收藏
-
157 收藏
-
101 收藏
-
208 收藏
-
174 收藏
-
317 收藏
-
371 收藏
-
244 收藏
-
288 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 大气的鸵鸟
- 很详细,mark,感谢up主的这篇博文,我会继续支持!
- 2023-02-28 21:24:16
-
- 风趣的睫毛膏
- 这篇文章内容太及时了,好细啊,真优秀,码起来,关注老哥了!希望老哥能多写数据库相关的文章。
- 2023-02-28 04:20:17
-
- 昏睡的发夹
- 很棒,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者大大分享技术文章!
- 2023-02-15 04:53:52
-
- 寂寞的哈密瓜
- 太给力了,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢博主分享文章内容!
- 2023-02-14 01:45:12
-
- 长情的钢笔
- 这篇博文真及时,老哥加油!
- 2023-02-03 12:09:49
-
- 害羞的玫瑰
- 太全面了,已收藏,感谢作者大大的这篇技术文章,我会继续支持!
- 2023-01-27 09:07:56
-
- 聪明的花卷
- 这篇技术文章太及时了,太详细了,很好,已收藏,关注up主了!希望up主能多写数据库相关的文章。
- 2023-01-24 16:30:44
-
- 舒心的小兔子
- 感谢大佬分享,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢作者大大分享技术贴!
- 2023-01-24 08:57:44
-
- 热情的萝莉
- 真优秀,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢作者分享博文!
- 2023-01-21 23:50:46
-
- 简单的斑马
- 好细啊,码住,感谢师傅的这篇技术文章,我会继续支持!
- 2023-01-21 21:34:53
-
- 粗犷的金针菇
- 这篇文章出现的刚刚好,作者大大加油!
- 2023-01-20 03:44:56
-
- 曾经的百褶裙
- 这篇文章太及时了,细节满满,很棒,码住,关注楼主了!希望楼主能多写数据库相关的文章。
- 2023-01-19 19:21:03
-
- 如意的跳跳糖
- 这篇博文真及时,up主加油!
- 2023-01-17 11:41:19
-
- 安静的歌曲
- 这篇技术文章真及时,太细致了,受益颇多,收藏了,关注博主了!希望博主能多写数据库相关的文章。
- 2023-01-14 05:55:05