MySQL中dd::columns表结构转table过程及应用详解
来源:脚本之家
时间:2023-01-07 12:03:51 346浏览 收藏
本篇文章给大家分享《MySQL中dd::columns表结构转table过程及应用详解》,覆盖了数据库的常见基础知识,其实一个语言的全部知识点一篇文章是不可能说完的,但希望通过这些问题,让读者对自己的掌握程度有一定的认识(B 数),从而弥补自己的不足,更好的掌握它。
一、MySQL的dd表介绍
MySQL的dd表是用来存放表结构和各种建表信息的,客户端建的表都存在mysql.table和mysql.columns表里,还有一个表mysql.column_type_elements比较特殊,用来存放SET和ENUM类型的字段集合值信息。看一下下面这张表的mysql.columns表和mysql.column_type_elements信息。为了缩短显示长度,这里只展示几个重要的值。
#建表: CREATE TABLE t1(id int not null auto_increment primary key,col1 number,col2 VARCHAR(100),col3 pls_integer, col4 enum('x','y') default 'x',col5 set('x1','y1')) partition by hash(id) partitions 3; SET SESSION debug='+d,skip_dd_table_access_check'; mysql> select name,ordinal_position,type,default_value_utf8,options,column_type_utf8 from mysql.columns where table_id=383; +-------------+------------------+-----------------------+--------------------+-------------------+------------------+ | name | ordinal_position | type | default_value_utf8 | options | column_type_utf8 | +-------------+------------------+-----------------------+--------------------+-------------------+------------------+ | col1 | 2 | MYSQL_TYPE_NEWDECIMAL | NULL | interval_count=0; | decimal(65,0) | | col2 | 3 | MYSQL_TYPE_VARCHAR | NULL | interval_count=0; | varchar(100) | | col3 | 4 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int | | col4 | 5 | MYSQL_TYPE_ENUM | x | interval_count=2; | enum('x','y') | | col5 | 6 | MYSQL_TYPE_SET | NULL | interval_count=2; | set('x1','y1') | | DB_ROLL_PTR | 8 | MYSQL_TYPE_LONGLONG | NULL | NULL | | | DB_TRX_ID | 7 | MYSQL_TYPE_INT24 | NULL | NULL | | | id | 1 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int | +-------------+------------------+-----------------------+--------------------+-------------------+------------------+ 8 rows in set (0.00 sec)
mysql.columns表说明如下:
ordinal_position
是该字段在表里的偏移量,这里多了3个字段,DB_ROLL_PTR
、DB_TRX_ID
、id
是用来执行undo的,记录了字段的版本信息。
default_value_utf8
是用来保存默认值的。options里面有interval_count用来保存集合类型的数值数的。columns表的options的key一共有如下几种:
static const std::setdefault_valid_option_keys = { "column_format", "geom_type", "interval_count", "not_secondary", "storage", "treat_bit_as_char", "zip_dict_id", "is_array"};
mysql> select * from mysql.column_type_elements where column_id=4286; +-----------+---------------+------+ | column_id | element_index | name | +-----------+---------------+------+ | 4286 | 1 | x | | 4286 | 2 | y | +-----------+---------------+------+ 2 rows in set (0.01 sec) #这里的column_id=4286是col4的id值,x和y分别对应了set定义时候的2个集合值。
二、代码跟踪
现在重新启动数据库,跟踪一下这个columns表怎么转为代码里面的TABLE的field对象。首先找到表的dd信息然后打开表获取field信息。
mysql> select * from t1;
输入该命令后找到columns表转为field的代码:
#0 fill_column_from_dd ( thd=0x555558b35a06 <:char_traits>::compare(char const*, char const*, unsigned long)+61>, share=0x7fffe83f1b60, col_obj=0x555558bb0a5e <:__cxx11::basic_string>, Stateless_allocator>::compare(std::__cxx11::basic_string , Stateless_allocator > const&) const+142>, null_pos=0x7fffe83f1880 "\005", null_bit_pos=32767, rec_pos=0x7fff2c05ac10 "explicit_encryption", field_nr=0) at /mysql/sql/dd_table_share.cc:955 #1 0x00005555593c4c17 in fill_columns_from_dd (thd=0x7fff2c006890, share=0x7fff2cbf19e8, tab_obj=0x7fff2cbb9b38) at /mysql/sql/dd_table_share.cc:1235 #2 0x00005555593c9e54 in open_table_def (thd=0x7fff2c006890, share=0x7fff2cbf19e8, table_def=...) at /mysql/sql/dd_table_share.cc:2408 #3 0x0000555558e76a13 in get_table_share (thd=0x7fff2c006890, db=0x7fff2cbeeff0 "db1", table_name=0x7fff2cc03210 "t1", key=0x7fff2cbeed87 "db1", key_length=7, open_view=true, open_secondary=false) at /mysql/sql/sql_base.cc:801 #4 0x0000555558e76f08 in get_table_share_with_discover (thd=0x7fff2c006890, table_list=0x7fff2cbee9b8, key=0x7fff2cbeed87 "db1", key_length=7, open_secondary=false, error=0x7fffe83f1ea4) at /mysql/sql/sql_base.cc:889 #5 0x0000555558e7cd34 in open_table (thd=0x7fff2c006890, table_list=0x7fff2cbee9b8, ot_ctx=0x7fffe83f2380) at /mysql/sql/sql_base.cc:3230 #6 0x0000555558e81769 in open_and_process_table (thd=0x7fff2c006890, lex=0x7fff2c01bdf0, tables=0x7fff2cbee9b8, counter=0x7fff2c01be48, prelocking_strategy=0x7fffe83f2408, has_prelocking_list=false, ot_ctx=0x7fffe83f2380) at /mysql/sql/sql_base.cc:5118 #7 0x0000555558e833bd in open_tables (thd=0x7fff2c006890, start=0x7fffe83f23f0, counter=0x7fff2c01be48, flags=0, prelocking_strategy=0x7fffe83f2408) at /mysql/sql/sql_base.cc:5928 #8 0x0000555558e85626 in open_tables_for_query (thd=0x7fff2c006890, tables=0x7fff2cbee9b8, flags=0) at /mysql/sql/sql_base.cc:6904 #9 0x0000555559075720 in Sql_cmd_dml::prepare (this=0x7fff2cbef400, thd=0x7fff2c006890) at /mysql/sql/sql_select.cc:372 #10 0x00005555590760bf in Sql_cmd_dml::execute (this=0x7fff2cbef400, thd=0x7fff2c006890) at /mysql/sql/sql_select.cc:527 #11 0x0000555558fedc8e in mysql_execute_command (thd=0x7fff2c006890, first_level=true) at /mysql/sql/sql_parse.cc:4794 #12 0x0000555558fefe25 in dispatch_sql_command (thd=0x7fff2c006890, parser_state=0x7fffe83f3990, update_userstat=false) at /mysql/sql/sql_parse.cc:5399 #13 0x0000555558fe52d3 in dispatch_command (thd=0x7fff2c006890, com_data=0x7fffe83f4b70, command=COM_QUERY) at /mysql/sql/sql_parse.cc:2000 #14 0x0000555558fe3643 in do_command (thd=0x7fff2c006890) at /mysql/sql/sql_parse.cc:1448 #15 0x000055555920e200 in handle_connection (arg=0x555560a65790) at /mysql/sql/conn_handler/connection_handler_per_thread.cc:307 #16 0x000055555ae36375 in pfs_spawn_thread (arg=0x5555608a2e20) at /mysql/storage/perfschema/pfs.cc:2899 #17 0x00007ffff77a6609 in start_thread (arg= ) at pthread_create.c:477 #18 0x00007ffff76cb163 in clone () at ../sysdeps/unix/sysv/linux/x86_64/clone.S:95
#fill_column_from_dd函数里面最重要的是make_field函数,把字段从dd::Column转为table的field然后赋值给TABLE_SHARE。 reg_field = make_field(*col_obj, charset, share, rec_pos, null_pos, null_bit_pos);
三、知识应用
session每次获取表的信息都是在第一次打开表的时候就做好了,下次如果表没有变化就从Table_cache直接获取表信息。现在假设我们要改col4字段的集合值又不想通过alter语句来执行,那就可以直接对dd表进行操作。注意,该操作对生产环境有很大风险,这里只用来进行知识实践,不能用来在生产环境实际操作。
把col4的x,y值改为a,b:首先试着插入col4=x的记录,现在还没更改dd表所以插入成功。
mysql> insert into t1 values(1,1,'aa',1,'x','x1'); Query OK, 1 row affected (0.03 sec)
接着开始改col4的集合值:
mysql> SET SESSION debug='+d,skip_dd_table_access_check'; Query OK, 0 rows affected (0.02 sec) mysql> update mysql.columns set default_value_utf8='a' ,column_type_utf8='enum(\'a\',\'b\'))' where table_id=383 and name='col4'; Query OK, 1 row affected (0.03 sec) Rows matched: 1 Changed: 1 Warnings: 0 mysql> select name,ordinal_position,type,default_value_utf8,options,column_type_utf8 from mysql.columns where table_id=383; +-------------+------------------+-----------------------+--------------------+-------------------+------------------+ | name | ordinal_position | type | default_value_utf8 | options | column_type_utf8 | +-------------+------------------+-----------------------+--------------------+-------------------+------------------+ | col1 | 2 | MYSQL_TYPE_NEWDECIMAL | NULL | interval_count=0; | decimal(65,0) | | col2 | 3 | MYSQL_TYPE_VARCHAR | NULL | interval_count=0; | varchar(100) | | col3 | 4 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int | | col4 | 5 | MYSQL_TYPE_ENUM | a | interval_count=2; | enum('a','b')) |集合值已改 | col5 | 6 | MYSQL_TYPE_SET | NULL | interval_count=2; | set('x1','y1') | | DB_ROLL_PTR | 8 | MYSQL_TYPE_LONGLONG | NULL | NULL | | | DB_TRX_ID | 7 | MYSQL_TYPE_INT24 | NULL | NULL | | | id | 1 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int | +-------------+------------------+-----------------------+--------------------+-------------------+------------------+ 8 rows in set (0.00 sec) mysql> update mysql.column_type_elements set name='a' where column_id=4286 and element_index=1; Query OK, 1 row affected (0.03 sec) Rows matched: 1 Changed: 1 Warnings: 0 mysql> update mysql.column_type_elements set name='b' where column_id=4286 and element_index=2; Query OK, 1 row affected (0.03 sec) Rows matched: 1 Changed: 1 Warnings: 0 mysql> select * from mysql.column_type_elements where column_id=4286; +-----------+---------------+------+ | column_id | element_index | name | +-----------+---------------+------+ | 4286 | 1 | a |集合值已改 | 4286 | 2 | b |集合值已改 +-----------+---------------+------+ 2 rows in set (0.00 sec)
现在再插入一条col4=x的记录发现还是成功的,这是因为t1没有重新从dd表转为TABLE信息,需要重启后再试。
mysql> insert into t1 values(2,1,'aa',1,'x','x1'); Query OK, 1 row affected (0.02 sec)
重启数据库,然后登录。再次插入col4=x发现报错了,因为这时候的TABLE信息是重新从dd表转化的。
mysql> insert into t1 values(2,1,'aa',1,'x','x1'); ERROR 1265 (01000): Data truncated for column 'col4' at row 1
插入col4=a的记录成功,说明更改成功。
mysql> insert into t1 values(3,1,'aa',1,'a','x1'); Query OK, 1 row affected (0.02 sec)
查看建表信息,发现已经成功更改。
mysql> show create table t1; +-------+-------------------------+ | Table | Create Table | +-------+-------------------------+ | t1 | CREATE TABLE `t1` ( `id` int NOT NULL AUTO_INCREMENT, `col1` decimal(65,0) DEFAULT NULL, `col2` varchar(100) DEFAULT NULL, `col3` int DEFAULT NULL, `col4` enum('a','b') DEFAULT 'a',更改成功 `col5` set('x1','y1') DEFAULT NULL, PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci /*!50100 PARTITION BY HASH (`id`) PARTITIONS 3 */ +-------+-------------------------+
四、总结
实际上更改表结构如果通过alter命令来改流程跟上面也是一样的,也是通过更新dd表来实现表结构的变更,这里只是从更底层来介绍。以上的操作在实际生产中不能直接操作,风险很大,会影响现有的记录和相关的功能。这里只是作为一个案例来更好的说明dd的工作流程,帮助大家遇到问题知道怎么从底层排查。
理论要掌握,实操不能落!以上关于《MySQL中dd::columns表结构转table过程及应用详解》的详细介绍,大家都掌握了吧!如果想要继续提升自己的能力,那么就来关注golang学习网公众号吧!
-
164 收藏
-
382 收藏
-
128 收藏
-
302 收藏
-
368 收藏
-
475 收藏
-
266 收藏
-
273 收藏
-
283 收藏
-
210 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 糟糕的服饰
- 这篇文章内容出现的刚刚好,细节满满,写的不错,已加入收藏夹了,关注up主了!希望up主能多写数据库相关的文章。
- 2023-01-15 15:37:24
-
- 心灵美的乌冬面
- 感谢大佬分享,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢老哥分享文章!
- 2023-01-10 10:50:40
-
- 激昂的小虾米
- 好细啊,已加入收藏夹了,感谢老哥的这篇技术文章,我会继续支持!
- 2023-01-10 09:35:08
-
- 平常的大神
- 这篇博文太及时了,好细啊,很好,已加入收藏夹了,关注大佬了!希望大佬能多写数据库相关的文章。
- 2023-01-10 08:19:12
-
- 淡然的老鼠
- 太给力了,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢老哥分享技术文章!
- 2023-01-10 04:00:02
-
- 会撒娇的热狗
- 感谢大佬分享,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢楼主分享博文!
- 2023-01-07 23:03:54
-
- 傲娇的高山
- 这篇技术贴真是及时雨啊,作者大大加油!
- 2023-01-07 22:09:34
-
- 粗犷的钢铁侠
- 这篇文章出现的刚刚好,太详细了,很棒,已收藏,关注老哥了!希望老哥能多写数据库相关的文章。
- 2023-01-07 14:43:19