Mysql Online DDL的使用详解
来源:脚本之家
时间:2023-02-23 19:57:14 266浏览 收藏
在数据库实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《Mysql Online DDL的使用详解》,聊聊DDL、MysqlOnline,希望可以帮助到正在努力赚钱的你。
正文
Online DDL在MySQL 5.6才开始支持的,在5.5及之前版本,使用alter table/create index等命令进行表结构修改操作均会锁表,这在生产环境上明显是不可接受的。
在MySQL 5.7,Online DDL在性能和稳定性上不断得到优化,性能有显著优势,且对业务负载影响小,停写时间可控,相对pt-osc/gh-ost来说,无需安装第三方依赖包,同时支持Inplace算法的Online DDL,由于无需拷表,所需磁盘空间也更小。
先来看一个常见的DDL语句:
ALTER TABLE tbl_name ADD PRIMARY KEY (column), ALGORITHM=INPLACE, LOCK=NONE;
其中,LOCK描述了DDL期间运行的并发程度,ALGORITHM描述了DDL的实现方式
LOCK参数
- LOCK=NONE:允许并发的查询和DML操作
- LOCK=SHARED:允许并发的查询,但阻塞DML操作
- LOCK=DEFAULT: 由系统决定,允许尽可能多的并发性(并发查询、DML或两者)。如果省略LOCK子句相当于指定LOCK=DEFAULT
- LOCK=EXCLUSIVE:阻塞并发查询和DML操作。
ALGORITHM参数
- ALGORITHM=COPY:采用拷表方式进行表变更,与pt-osc/gh-ost类似;
- ALGORITHM=INPLACE:仅需要进行引擎层数据改动,不涉及Server层;
COPY TABLE流程
- 首先建立临时表,表结构为ALTAR TABLE更改后的结构
- 将原表中数据导入到临时表(server层创建临时表,会有显示的IBD文件)
- 删除原表
- 将临时表rename为原来的表名
同时这一过程中,为了保持数据的一致性,中间复制数据时(Copy Table)全程锁表只读,如果有写请求进来将无法提供服务,将导致连接数爆张。
IN-PLACE流程
- 建立一个临时文件,扫描原表主键的所有数据页
- 用数据页中原表记录生成B+树,存储到临时文件中(innodb_temp_data_file_path临时表空间下创建临时文件)
- 生成临时文件的过程中,将所有对原表的操作记在一个日志文件(rowlog)中
- 临时文件生成后,将日志文件中的操作应用到临时文件,得到一个辑数据上与原表相同
- 数据文件(日志文件记录和重放操作)
- 用临时文件替换原表数据文件
这一过程中,alter 语句在启动的时候获取MDL写锁,但是这个写锁在真正拷贝数据之前就退化成读锁,也就是说在最耗时的copy数据到临时文件的过程中,原表是可以进行dml操作的,仅仅会在最后的新旧表切换阶段加锁,这个rename的时间就非常快了。
允许并发DML的DDL操作
- 创建/新增二级索引
- 重命名二级索引
- 删除二级索引
- 改变索引类型(USING {BTREE | HASH})
- 添加主键(expensive cost)
- 删除主键并增加另一个(expensive cost)(ALTER TABLE tbl_name DROP PRIMARY KEY, ADD PRIMARY KEY (column), ALGORITHM=INPLACE, LOCK=NONE;)
- 新增列 (expensive cost)
- 删除列 (expensive cost)
- 重命名列
- 列重新排序 (expensive cost)
- 改变列默认值
- 删除列默认值
- 改变列自增值
- 设置列属性null/not null (expensive cost)
- 修改枚举或集合列的定义
- Change ROW_FORMAT
- Change key block size
标记为expensive cost的操作虽然允许OnlineDDL,但本身对服务器IO,CPU都会造成较高负担,同时会导致复制阻塞,造成另一种形式的从库复制延迟,所以如果是大表,建议业务低峰期执行
不允许并发DML的DDL操作
- 添加全文索引
- 添加空间索引
- 删除主键
- 改变列数据类型
- 添加自增列(新增列->变为自增列)
- 变更表字符集
- 修改数据类型长度
- 特例:varchar字符长度从10变更到小于255 采用inplace方式不会锁表;从255变更到10会锁表;
文中关于mysql的知识介绍,希望对你的学习有所帮助!若是受益匪浅,那就动动鼠标收藏这篇《Mysql Online DDL的使用详解》文章吧,也可关注golang学习网公众号了解相关技术文章。
-
270 收藏
-
366 收藏
-
475 收藏
-
266 收藏
-
273 收藏
-
283 收藏
-
210 收藏
-
371 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习