技术分享 | MySQL 在批量插入时捕捉错误信息
来源:SegmentFault
时间:2023-02-22 21:52:52 444浏览 收藏
编程并不是一个机械性的工作,而是需要有思考,有创新的工作,语法是固定的,但解决问题的思路则是依靠人的思维,这就需要我们坚持学习和更新自己的知识。今天golang学习网就整理分享《技术分享 | MySQL 在批量插入时捕捉错误信息》,文章讲解的知识点主要包括MySQL、数据库,如果你对数据库方面的知识点感兴趣,就不要错过golang学习网,在这可以对大家的知识积累有所帮助,助力开发能力的提升。
作者:杨涛涛
背景
今天的文章来源于今天客户问的一个问题。
问题大概意思是:我正在从 Oracle 迁移到 MySQL,数据已经转换为单纯的 INSERT 语句。由于语句很多,每次导入的时候不知道怎么定位到错误的语句。 如果 INSERT 语句少也就罢了,我可以手工看,不过 INSERT 语句很多,我怎么定位到是哪些语句出错了,我好改正呢?总不能每次遇到的错误的时候改一下,在重新运行继续改正吧?有没有简单点的方法。
其实 MySQL 自身就有错误诊断区域,如果能好好利用,则事半功倍。下面我来简单说下怎么使用错误诊断区域。
比如说我要插入的表结构为 n3, 保存错误信息的日志表为 error_log 两个表结构如下:
mysql -- tables definition. [ytt]>create table n3 (id int not null, id2 int generated always as ((mod(id,10)))); Query OK, 0 rows affected (0.04 sec) [ytt]>create table error_log (sqltext text, error_no int unsigned, error_message text); Query OK, 0 rows affected (0.04 sec)
假设插入的语句,为了演示,我这里仅仅简单写了 8 条语句。
mysql -- statements body. set @a1 = "INSERT INTO n3 (id) VALUES(100)"; set @a2 = "INSERT INTO n3 (id) VALUES('test')"; set @a3 = "INSERT INTO n3 (id) VALUES('test123')"; set @a4 = "INSERT INTO n3 (id) VALUES('123test')"; set @a5 = "INSERT INTO n3 (id) VALUES(200)"; set @a6 = "INSERT INTO n3 (id) VALUES(500)"; set @a7 = "INSERT INTO n3 (id) VALUES(null)"; set @a8 = "INSERT INTO n3 (id) VALUES(10000000000000)";
MySQL 的错误代码很多,不过总体归为三类:
- sqlwarning SQLSTATE 代码开始为 '01'
- not found SQLSTATE 代码开始为 '02'
- sqlexception SQLSTATE 代码开始非 '00','01','02' 的所有错误代码。
为了简单方便,我们写这些代码到存储过程里。以下为示例存储过程。
mysql -- stored routines body. drop procedure if exists sp_insert_simple; delimiter || create procedure sp_insert_simple() l1:begin DECLARE i,j TINYINT DEFAULT 1; -- loop counter. DECLARE v_errcount,v_errno INT DEFAULT 0; -- error count and error number. DECLARE v_msg TEXT; -- error details. declare v_sql json; -- store statements list. declare v_sql_keys varchar(100); -- array index. declare v_sql_length int unsigned; -- array length. -- Handler declare. DECLARE CONTINUE HANDLER FOR SQLEXCEPTION,SQLWARNING,NOT FOUND -- exception in mysql routines. l2:BEGIN get stacked diagnostics v_errcount = number; set j = 1; WHILE j
我们来调用这个存储过程看下结果。
mysql [(none)]>use ytt Reading table information for completion of table and column names You can turn off this feature to get a quicker startup with -A Database changed [ytt]>call sp_insert_simple; Query OK, 0 rows affected (0.05 sec)
表N3的结果。
mysql [ytt]>select * from n3; +-----+------+ | id | id2 | +-----+------+ | 100 | 0 | | 200 | 0 | | 500 | 0 | +-----+------+ 3 rows in set (0.00 sec)
错误日志记录了所有错误的语句。
mysql [ytt]>select * from error_log; +--------------------------------------------+----------+-------------------------------------------------------------+ | sqltext | error_no | error_message | +--------------------------------------------+----------+-------------------------------------------------------------+ | INSERT INTO n3 (id) VALUES('test') | 1366 | Incorrect integer value: 'test' for column 'id' at row 1 | | INSERT INTO n3 (id) VALUES('test123') | 1366 | Incorrect integer value: 'test123' for column 'id' at row 1 | | INSERT INTO n3 (id) VALUES('123test') | 1265 | Data truncated for column 'id' at row 1 | | INSERT INTO n3 (id) VALUES(null) | 1048 | Column 'id' cannot be null | | INSERT INTO n3 (id) VALUES(10000000000000) | 1264 | Out of range value for column 'id' at row 1 | +--------------------------------------------+----------+-------------------------------------------------------------+ 5 rows in set (0.00 sec)
其实这个问题如果用 Python 或 PHP 等外部语言来说,将会更简单,思路差不多。
理论要掌握,实操不能落!以上关于《技术分享 | MySQL 在批量插入时捕捉错误信息》的详细介绍,大家都掌握了吧!如果想要继续提升自己的能力,那么就来关注golang学习网公众号吧!
-
499 收藏
-
244 收藏
-
235 收藏
-
157 收藏
-
101 收藏
-
344 收藏
-
481 收藏
-
284 收藏
-
316 收藏
-
437 收藏
-
412 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 幽默的狗
- 细节满满,码起来,感谢作者大大的这篇文章,我会继续支持!
- 2023-04-07 00:01:54
-
- 贤惠的香氛
- 太给力了,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢作者大大分享技术文章!
- 2023-04-01 07:26:54
-
- 舒心的大雁
- 这篇博文真是及时雨啊,好细啊,受益颇多,码起来,关注博主了!希望博主能多写数据库相关的文章。
- 2023-03-30 17:34:58
-
- 受伤的猎豹
- 这篇文章真及时,博主加油!
- 2023-03-03 05:09:53
-
- 谦让的月饼
- 太细致了,码起来,感谢作者的这篇文章内容,我会继续支持!
- 2023-03-02 19:44:53
-
- 鲤鱼蛋挞
- 很有用,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢博主分享技术贴!
- 2023-02-28 20:11:48
-
- 迷路的小伙
- 这篇文章出现的刚刚好,太详细了,写的不错,码住,关注楼主了!希望楼主能多写数据库相关的文章。
- 2023-02-25 17:21:31