优化Web和数据库应用程序的响应时间:实用技巧
来源:stackoverflow
时间:2024-03-19 17:33:33 355浏览 收藏
为了提升 Web 和数据库应用程序的响应时间,本文提供了实用技巧。初学者可以通过连接池管理、优化查询性能等方法来优化应用程序。通过这些技巧,可以有效地减少响应时间,提高应用程序的整体性能。本文特别针对 Go 语言和 MySQL 数据库,提供了具体可行的建议,帮助开发者提升应用程序的响应速度,避免无效内存地址或空指针取消引用等异常情况。
我是 golang 和数据库优化的新手。
我在 go 和 mysql 数据库上编写了简单的应用程序,其中通过网络发送初始化的查询。
接收请求大约需要 5 秒或者更多一点?是否有可能以某种方式优化它?
而且如果刷新多次,那么响应时间可能已经是50s甚至更长了, “无效内存地址或 nil 指针取消引用”或“错误 1040:可能出现太多连接”异常。
如何避免这种情况并让所有请求在有效的时间范围内得到管理?
这是表结构
create table sportsmen ( sp_no int(11) not null, birth_date date not null, first_name varchar(14) not null, last_name varchar(16) not null, gender enum('m','f') not null, start_date date not null, primary key (sp_no) ) engine=innodb default charset=latin1 create table points ( sp_no int not null, point int not null, date date not null );
运动员的记录数量约为 300000 条,得分约为 1,000,000 条。
这是在每个请求时调用的函数
var db *sql.DB func init() { db, _ = sql.Open("mysql", "?charset=utf8") //checkErr(errcon) err := db.Ping() checkErr(err) yt := reflect.TypeOf(db).Kind() fmt.Printf("%T: %s\n", yt, yt) } func sportsmanPoints(w http.ResponseWriter, r *http.Request) { start := time.Now() sportsmen, err := db.Query("SELECT sp_no, first_name FROM sportsmen LIMIT ?,20", rand.Intn(100000)) checkErr(err) for sportsmen.Next() { var spNo string var firstName string err = sportsmen.Scan(&spNo, &firstName) checkErr(err) spPoints, err := db.Query("SELECT max(point) FROM points WHERE sp_no =" + spNo) for spPoints.Next() { var spPoint int err = spPoints.Scan(&spPoint) checkErr(err) points.Data = append(points.Data, Point{Name: firstName, Point: spPoint}) } } data, err := json.Marshal(points.Data) if err != nil { log.Fatal(err) } fmt.Fprintln(w, string(data)) elapsed := time.Since(start) fmt.Println("Date:", time.Now(), "Response time:", elapsed) points.Data = nil data = nil } func checkErr(err error) { if err != nil { panic(err) } } func main() { http.HandleFunc("/", sportsmanPoints) err := http.ListenAndServe(":9090", nil) if err != nil { log.Fatal("ListenAndServe: ", err) } }
谢谢。
解决方案
每次向服务器发出请求时,您都会在处理程序中连接到数据库。仅此操作就可能需要几秒钟。一旦处理程序返回,您只需丢弃该连接(您甚至不关闭该连接,因此在关闭之前可能会空闲一段时间,占用数据库服务器资源,因为连接很可能在服务器上受到限制)。不要这样做。
在应用程序启动时连接到数据库一次,并在处理程序中使用此连接。数据库将保持空闲连接打开,以便在您在另一个请求中需要时立即重用。
将您的 db
变量移到外部,例如对于包级变量,连接到数据库并初始化此 db
变量一次,例如在您的 main()
或包 init()
函数中,然后在您的处理程序中使用它。
sql.Open()
记录:
返回的数据库对于多个 goroutine 并发使用是安全的,并维护自己的空闲连接池。因此,open 函数应该只调用一次。很少需要关闭数据库。
查看类似问题:mgo - query performance seems consistently slow (500-650ms)
SELECT sp_no, first_name FROM sportsmen LIMIT ?,20", rand.Intn(100000)
糟糕的表现。结果很差。
它只会从表格的前 1/3 中选择(参见 100000 与 300000)。
它偶尔会选择相同的 20 个或重叠的 20 个。
在找到 20 行之前,它必须跳过最多 100000 行。(这是性能问题。)
我有多种方法可以改善所有这三个问题:http://mysql.rjweb.org/doc.php/random
通过加快查询速度,“连接过多”的情况可能会消失。
今天关于《优化Web和数据库应用程序的响应时间:实用技巧》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
-
502 收藏
-
502 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
139 收藏
-
204 收藏
-
325 收藏
-
477 收藏
-
486 收藏
-
439 收藏
-
357 收藏
-
352 收藏
-
101 收藏
-
440 收藏
-
212 收藏
-
143 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习