MySQL中dd::columns表结构转table过程及应用详解
目录
- 一、MySQL的dd表介绍
- 二、代码跟踪
- 三、知识应用
- 四、总结
一、MySQL的dd表介绍
MySQL的dd表是用来存放表结构和各种建表信息的，客户端建的表都存在mysql.table和mysql.columns表里，还有一个表mysql.column_type_elements比较特殊，用来存放SET和ENUM类型的字段集合值信息。看一下下面这张表的mysql.columns表和mysql.column_type_elements信息。为了缩短显示长度，这里只展示几个重要的值。
#建表：
CREATE TABLE t1(id int not null auto_increment primary key,col1 number,col2 VARCHAR(100),col3 pls_integer,
col4 enum('x','y') default 'x',col5 set('x1','y1')) partition by hash(id) partitions 3;
SET SESSION debug='+d,skip_dd_table_access_check';
mysql> select name,ordinal_position,type,default_value_utf8,options,column_type_utf8 from mysql.columns where table_id=383;
+-------------+------------------+-----------------------+--------------------+-------------------+------------------+
| name | ordinal_position | type | default_value_utf8 | options | column_type_utf8 |
+-------------+------------------+-----------------------+--------------------+-------------------+------------------+
| col1 | 2 | MYSQL_TYPE_NEWDECIMAL | NULL | interval_count=0; | decimal(65,0) |
| col2 | 3 | MYSQL_TYPE_VARCHAR | NULL | interval_count=0; | varchar(100) |
| col3 | 4 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int |
| col4 | 5 | MYSQL_TYPE_ENUM | x | interval_count=2; | enum('x','y') |
| col5 | 6 | MYSQL_TYPE_SET | NULL | interval_count=2; | set('x1','y1') |
| DB_ROLL_PTR | 8 | MYSQL_TYPE_LONGLONG | NULL | NULL | |
| DB_TRX_ID | 7 | MYSQL_TYPE_INT24 | NULL | NULL | |
| id | 1 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int |
+-------------+------------------+-----------------------+--------------------+-------------------+------------------+
8 rows in set (0.00 sec)
mysql.columns表说明如下：
ordinal_position是该字段在表里的偏移量，这里多了3个字段，DB_ROLL_PTR、DB_TRX_ID、id是用来执行undo的，记录了字段的版本信息。
default_value_utf8是用来保存默认值的。options里面有interval_count用来保存集合类型的数值数的。columns表的options的key一共有如下几种：
static const std::set<String_type> default_valid_option_keys = {
"column_format", "geom_type", "interval_count", "not_secondary",
"storage", "treat_bit_as_char", "zip_dict_id", "is_array"};
mysql> select * from mysql.column_type_elements where column_id=4286; +-----------+---------------+------+ | column_id | element_index | name | +-----------+---------------+------+ | 4286 | 1 | x | | 4286 | 2 | y | +-----------+---------------+------+ 2 rows in set (0.01 sec) <strong>#这里的column_id=4286是col4的id值，x和y分别对应了set定义时候的2个集合值。</strong>
二、代码跟踪
现在重新启动数据库，跟踪一下这个columns表怎么转为代码里面的TABLE的field对象。首先找到表的dd信息然后打开表获取field信息。
mysql> select * from t1;
输入该命令后找到columns表转为field的代码：
#0 fill_column_from_dd ( thd=0x555558b35a06 <std::char_traits<char>::compare(char const*, char const*, unsigned long)+61>, share=0x7fffe83f1b60, col_obj=0x555558bb0a5e <std::__cxx11::basic_string<char, std::char_traits<char>, Stateless_allocator<char, dd::String_type_alloc, My_free_functor> >::compare(std::__cxx11::basic_string<char, std::char_traits<char>, Stateless_allocator<char, dd::String_type_alloc, My_free_functor> > const&) const+142>, null_pos=0x7fffe83f1880 "\005", null_bit_pos=32767, rec_pos=0x7fff2c05ac10 "explicit_encryption", field_nr=0) at /mysql/sql/dd_table_share.cc:955 #1 0x00005555593c4c17 in fill_columns_from_dd (thd=0x7fff2c006890, share=0x7fff2cbf19e8, tab_obj=0x7fff2cbb9b38) at /mysql/sql/dd_table_share.cc:1235 #2 0x00005555593c9e54 in open_table_def (thd=0x7fff2c006890, share=0x7fff2cbf19e8, table_def=...) at /mysql/sql/dd_table_share.cc:2408 #3 0x0000555558e76a13 in get_table_share (thd=0x7fff2c006890, db=0x7fff2cbeeff0 "db1", table_name=0x7fff2cc03210 "t1", key=0x7fff2cbeed87 "db1", key_length=7, open_view=true, open_secondary=false) at /mysql/sql/sql_base.cc:801 #4 0x0000555558e76f08 in get_table_share_with_discover (thd=0x7fff2c006890, table_list=0x7fff2cbee9b8, key=0x7fff2cbeed87 "db1", key_length=7, open_secondary=false, error=0x7fffe83f1ea4) at /mysql/sql/sql_base.cc:889 #5 0x0000555558e7cd34 in open_table (thd=0x7fff2c006890, table_list=0x7fff2cbee9b8, ot_ctx=0x7fffe83f2380) at /mysql/sql/sql_base.cc:3230 #6 0x0000555558e81769 in open_and_process_table (thd=0x7fff2c006890, lex=0x7fff2c01bdf0, tables=0x7fff2cbee9b8, counter=0x7fff2c01be48, prelocking_strategy=0x7fffe83f2408, has_prelocking_list=false, ot_ctx=0x7fffe83f2380) at /mysql/sql/sql_base.cc:5118 #7 0x0000555558e833bd in open_tables (thd=0x7fff2c006890, start=0x7fffe83f23f0, counter=0x7fff2c01be48, flags=0, prelocking_strategy=0x7fffe83f2408) at /mysql/sql/sql_base.cc:5928 #8 0x0000555558e85626 in open_tables_for_query (thd=0x7fff2c006890, tables=0x7fff2cbee9b8, flags=0) at /mysql/sql/sql_base.cc:6904 #9 0x0000555559075720 in Sql_cmd_dml::prepare (this=0x7fff2cbef400, thd=0x7fff2c006890) at /mysql/sql/sql_select.cc:372 #10 0x00005555590760bf in Sql_cmd_dml::execute (this=0x7fff2cbef400, thd=0x7fff2c006890) at /mysql/sql/sql_select.cc:527 #11 0x0000555558fedc8e in mysql_execute_command (thd=0x7fff2c006890, first_level=true) at /mysql/sql/sql_parse.cc:4794 #12 0x0000555558fefe25 in dispatch_sql_command (thd=0x7fff2c006890, parser_state=0x7fffe83f3990, update_userstat=false) at /mysql/sql/sql_parse.cc:5399 #13 0x0000555558fe52d3 in dispatch_command (thd=0x7fff2c006890, com_data=0x7fffe83f4b70, command=COM_QUERY) at /mysql/sql/sql_parse.cc:2000 #14 0x0000555558fe3643 in do_command (thd=0x7fff2c006890) at /mysql/sql/sql_parse.cc:1448 #15 0x000055555920e200 in handle_connection (arg=0x555560a65790) at /mysql/sql/conn_handler/connection_handler_per_thread.cc:307 #16 0x000055555ae36375 in pfs_spawn_thread (arg=0x5555608a2e20) at /mysql/storage/perfschema/pfs.cc:2899 #17 0x00007ffff77a6609 in start_thread (arg=<optimized out>) at pthread_create.c:477 #18 0x00007ffff76cb163 in clone () at ../sysdeps/unix/sysv/linux/x86_64/clone.S:95
<strong>#fill_column_from_dd函数里面最重要的是make_field函数，把字段从dd::Column转为table的field然后赋值给TABLE_SHARE。 reg_field = make_field(*col_obj, charset, share, rec_pos, null_pos, null_bit_pos);</strong>
三、知识应用
session每次获取表的信息都是在第一次打开表的时候就做好了，下次如果表没有变化就从Table_cache直接获取表信息。现在假设我们要改col4字段的集合值又不想通过alter语句来执行，那就可以直接对dd表进行操作。注意，该操作对生产环境有很大风险，这里只用来进行知识实践，不能用来在生产环境实际操作。
把col4的x,y值改为a,b：首先试着插入col4=x的记录，现在还没更改dd表所以插入成功。
mysql> insert into t1 values(1,1,'aa',1,'x','x1'); Query OK, 1 row affected (0.03 sec)
接着开始改col4的集合值：
mysql> SET SESSION debug='+d,skip_dd_table_access_check';
Query OK, 0 rows affected (0.02 sec)
mysql> update mysql.columns set default_value_utf8='a' ,column_type_utf8='enum(\'a\',\'b\'))' where table_id=383 and name='col4';
Query OK, 1 row affected (0.03 sec)
Rows matched: 1 Changed: 1 Warnings: 0
mysql> select name,ordinal_position,type,default_value_utf8,options,column_type_utf8 from mysql.columns where table_id=383;
+-------------+------------------+-----------------------+--------------------+-------------------+------------------+
| name | ordinal_position | type | default_value_utf8 | options | column_type_utf8 |
+-------------+------------------+-----------------------+--------------------+-------------------+------------------+
| col1 | 2 | MYSQL_TYPE_NEWDECIMAL | NULL | interval_count=0; | decimal(65,0) |
| col2 | 3 | MYSQL_TYPE_VARCHAR | NULL | interval_count=0; | varchar(100) |
| col3 | 4 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int |
| col4 | 5 | MYSQL_TYPE_ENUM | a | interval_count=2; | enum('a','b')) |集合值已改
| col5 | 6 | MYSQL_TYPE_SET | NULL | interval_count=2; | set('x1','y1') |
| DB_ROLL_PTR | 8 | MYSQL_TYPE_LONGLONG | NULL | NULL | |
| DB_TRX_ID | 7 | MYSQL_TYPE_INT24 | NULL | NULL | |
| id | 1 | MYSQL_TYPE_LONG | NULL | interval_count=0; | int |
+-------------+------------------+-----------------------+--------------------+-------------------+------------------+
8 rows in set (0.00 sec)
mysql> update mysql.column_type_elements set name='a' where column_id=4286 and element_index=1;
Query OK, 1 row affected (0.03 sec)
Rows matched: 1 Changed: 1 Warnings: 0
mysql> update mysql.column_type_elements set name='b' where column_id=4286 and element_index=2;
Query OK, 1 row affected (0.03 sec)
Rows matched: 1 Changed: 1 Warnings: 0
mysql> select * from mysql.column_type_elements where column_id=4286;
+-----------+---------------+------+
| column_id | element_index | name |
+-----------+---------------+------+
| 4286 | 1 | a |<strong>集合值已改</strong>
| 4286 | 2 | b |<strong>集合值已改</strong>
+-----------+---------------+------+
2 rows in set (0.00 sec)
现在再插入一条col4=x的记录发现还是成功的，这是因为t1没有重新从dd表转为TABLE信息，需要重启后再试。
mysql> insert into t1 values(2,1,'aa',1,'x','x1'); Query OK, 1 row affected (0.02 sec)
重启数据库，然后登录。再次插入col4=x发现报错了，因为这时候的TABLE信息是重新从dd表转化的。
mysql> insert into t1 values(2,1,'aa',1,'x','x1'); ERROR 1265 (01000): Data truncated for column 'col4' at row 1
插入col4=a的记录成功，说明更改成功。
mysql> insert into t1 values(3,1,'aa',1,'a','x1'); Query OK, 1 row affected (0.02 sec)
查看建表信息,发现已经成功更改。
mysql> show create table t1;
+-------+-------------------------+
| Table | Create Table |
+-------+-------------------------+
| t1 | CREATE TABLE `t1` (
`id` int NOT NULL AUTO_INCREMENT,
`col1` decimal(65,0) DEFAULT NULL,
`col2` varchar(100) DEFAULT NULL,
`col3` int DEFAULT NULL,
`col4` enum('a','b') DEFAULT 'a',更改成功
`col5` set('x1','y1') DEFAULT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci
/*!50100 PARTITION BY HASH (`id`)
PARTITIONS 3 */
+-------+-------------------------+
四、总结
实际上更改表结构如果通过alter命令来改流程跟上面也是一样的，也是通过更新dd表来实现表结构的变更，这里只是从更底层来介绍。以上的操作在实际生产中不能直接操作，风险很大，会影响现有的记录和相关的功能。这里只是作为一个案例来更好的说明dd的工作流程，帮助大家遇到问题知道怎么从底层排查。
到此这篇关于MySQL中dd::columns表结构转table过程及应用详解的文章就介绍到这了,更多相关mysql dd::columns表结构内容请搜索我们以前的文章或继续浏览下面的相关文章希望大家以后多多支持我们！
相关推荐
-
MySQL修改表结构操作命令总结
表的结构如下: 复制代码 代码如下: mysql> show create table person; | person | CREATE TABLE `person` ( `number` int(11) DEFAULT NULL, `name` varchar(255) DEFAULT NULL, `birthday` date DEFAULT NULL ) ENGINE=MyISAM DEFAULT CHARSET=utf8 | 删除列: 复制代码 代码如下: ALTER TA
-
mysql修改表结构方法实例详解
本文实例讲述了mysql修改表结构方法.分享给大家供大家参考.具体如下: mysql修改表结构使用ALTER TABLE语句,下面就为您详细介绍mysql修改表结构的语句写法,希望对您学习mysql修改表结构方面能有所帮助. ALTER [IGNORE] TABLE tbl_name alter_spec [, alter_spec ...] alter_specification: ADD [COLUMN] create_definition [FIRST | AFTER column_nam
-
Mysql复制表结构、表数据的方法
本文给大家分享了好几种复制表结构.表数据的示例介绍,具体详情请看下文吧. 1.复制表结构及数据到新表 CREATE TABLE 新表SELECT * FROM 旧表 这种方法会将oldtable中所有的内容都拷贝过来,当然我们可以用delete from newtable;来删除. 不过这种方法的一个最不好的地方就是新表中没有了旧表的primary key.Extra(auto_increment)等属性.需要自己用"alter"添加,而且容易搞错. 2.只复制表结构到新表 CREAT
-
mysql如何将表结构导出到excel
需求如下 导出表的结构,和字段备注信息,表名等.不需要借用第三方工具即可实现. SELECT TABLE_NAME 表名, COLUMN_NAME 列名, COLUMN_TYPE 数据类型, DATA_TYPE 字段类型, CHARACTER_MAXIMUM_LENGTH 长度, IS_NULLABLE 是否为空, COLUMN_DEFAULT 默认值, COLUMN_COMMENT 备注 FROM INFORMATION_SCHEMA.COLUMNS where -- developerclu
-
mysql中复制表结构的方法小结
mysql中用命令行复制表结构的方法主要有一下几种: 1.只复制表结构到新表 CREATE TABLE 新表 SELECT * FROM 旧表 WHERE 1=2 或者 CREATE TABLE 新表 LIKE 旧表 2.复制表结构及数据到新表 CREATE TABLE 新表 SELECT * FROM 旧表 3.复制旧表的数据到新表(假设两个表结构一样) INSERT INTO 新表 SELECT * FROM 旧表 4.复制旧表的数据到新表(假设两个表结构不一样) INSERT INTO
-
mysql查看表结构的三种方法总结
目录 mysql查看表结构 1. show create table 2. desc 3. information_schema.COLUMNS 获取所有的表结构及备注 根据库名导出所有表信息 根据库名导出所有表名及表备注 mysql获取整个库的所有表,及表结构 mysql查看表结构 1. show create table show create table 表名称 这个语句每次本能想出的,语义好记,可以直接查看建表语句,但不便于代码处理. 2. desc desc 表名称 这个语句简单易用,
-
查看修改MySQL表结构命令
简述 小编经常会遇到一些数据库编码不对得问题,好TM头疼,这里做一个记录,供大家参考. 修改数据库字符集: ALTER DATABASE db_name DEFAULT CHARACTER SET character_name [COLLATE -]; 把表默认的字符集和所有字符列(CHAR,VARCHAR,TEXT)改为新的字符集: ALTER TABLE tbl_name DEFAULT CHARACTER SET character_name [COLLATE-]; 如:ALTER TAB
-
MySQL中dd::columns表结构转table过程及应用详解
目录 一.MySQL的dd表介绍 二.代码跟踪 三.知识应用 四.总结 一.MySQL的dd表介绍 MySQL的dd表是用来存放表结构和各种建表信息的,客户端建的表都存在mysql.table和mysql.columns表里,还有一个表mysql.column_type_elements比较特殊,用来存放SET和ENUM类型的字段集合值信息.看一下下面这张表的mysql.columns表和mysql.column_type_elements信息.为了缩短显示长度,这里只展示几个重要的值. #建表
-
bootstrap中的 form表单属性role="form"的作用详解
html 里面的 role 本质上是增强语义性,当现有的HTML标签不能充分表达语义性的时候,就可以借助role来说明.通常这种情况出现在一些自定义的组件上,这样可增强组件的可访问性.可用性和可交互性. role的作用是描述一个非标准的tag的实际作用.比如用div做button,那么设置div 的 role="button",辅助工具就可以认出这实际上是个button 比如, <div role="checkbox" aria-checked="c
-
bootstrap中的 form表单属性role="form"的作用详解
html 里面的 role 本质上是增强语义性,当现有的HTML标签不能充分表达语义性的时候,就可以借助role来说明.通常这种情况出现在一些自定义的组件上,这样可增强组件的可访问性.可用性和可交互性. role的作用是描述一个非标准的tag的实际作用.比如用div做button,那么设置div 的 role="button",辅助工具就可以认出这实际上是个button 比如, <div role="checkbox" aria-checked="c
-
Javaweb中Request获取表单数据的四种方法详解
目录 表单代码 request.getParamter(String name);通过name获取值 request.getParamterValues(String name);通过name获取value值(一般用于复选框获取值) 代码片段 request.getParameterNames();直接获取表单所有对象的name值,返回值是枚举集合 request.getParameterMap();直接获取表单所有对象的name值以及数据 表单代码 <!DOCTYPE html> <h
-
MySQL中B树索引和B+树索引的区别详解
目录 1.多路搜索树 2.B树-多路平衡搜索树 3.B树索引 4.B+树索引 总结 如果用树作为索引的数据结构,每查找一次数据就会从磁盘中读取树的一个节点,也就是一页,而二叉树的每个节点只存储一条数据,并不能填满一页的存储空间,那多余的存储空间岂不是要浪费了?为了解决二叉平衡搜索树的这个弊端,我们应该寻找一种单个节点可以存储更多数据的数据结构,也就是多路搜索树. 1. 多路搜索树 1.完全二叉树高度:O(log2N),其中2为对数,树每层的节点数: 2.完全M路搜索树的高度:O(logmN),其
-
MySQL中count()和count(1)有何区别以及哪个性能最好详解
目录 前言 哪种 count 性能最好? 为什么要通过遍历的方式来计数? 如何优化 count(*)? *第一种,近似值* 第二种,额外表保存计数值 总结 前言 当我们对一张数据表中的记录进行统计的时候,习惯都会使用 count 函数来统计,但是 count 函数传入的参数有很多种,比如 count(1).count(*).count(字段) 等. 到底哪种效率是最好的呢?是不是 count(*) 效率最差? 我曾经以为 count(*) 是效率最差的,因为认知上 selete * from t
-
MySQL中的引号和反引号的区别与用法详解
前言 因此我写下了这个博客,本博客也引荐了一些大佬文章的知识,如有侵权联系我哦!如果有缘人能看到这个博客希望能对你有帮助,如果一些地方有错误也可以直接指出来哦!! 1.单引号: 我们先来介绍一下单引号,下图中的 '男' 就是使用的英文单引号. 为什么要去使用单引号呢?在SQL中一些varchar(string,等字符串类型)是需要用到单引号而不是直接去使用. 一般的在数据库中数值类型是不需要去使用单引号去给他圈起来,我们来看下图的例子: 上述说的是在一般情况下是不用去加引号的,但是如果在不同的可
-
mysql中You can’t specify target table for update in FROM clause错误解决方法
mysql中You can't specify target table for update in FROM clause错误的意思是说,不能先select出同一表中的某些值,再update这个表(在同一语句中). 例如下面这个sql: 复制代码 代码如下: delete from tbl where id in ( select max(id) from tbl a where EXISTS ( select 1 from tbl b
-
MySQL中的全表扫描和索引树扫描 的实例详解
目录 引言 实例 引言 在学习mysql时,我们经常会使用explain来查看sql查询的索引等优化手段的使用情况.在使用explain时,我们可以观察到,explain的输出有一个很关键的列,它就是type属性,type表示的是扫描方式,代表 MySQL 使用了哪种索引类型,不同的索引类型的查询效率是不一样的. 在type这一列,有如下一些可能的选项: system:系统表,少量数据,往往不需要进行磁盘IOconst:常量连接eq_ref:主键索引(primary key)或者非空唯一索引(u
-
MySQL中Buffer Pool内存结构详情
目录 1.回顾一下Buffer Pool是个什么东西? 1.1 增删改直接操作的是内存还是磁盘? 1.2 数据库崩溃了,内存中数据丢了怎么办? 1.3 Buffer Pool的一句话总结 2.Buffer Pool这个内存数据结构到底长个什么样子? 2.1 如何配置MySQL的Buffer Pool的大小? 2.2 数据页 2.3 磁盘上的数据页和Buffer Pool中的数据页是如何对应起来的? 2.4 缓存页描述信息 1.回顾一下Buffer Pool是个什么东西? 1.1 增删改直接操作的