首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

mysql 存储过程批量插入数据

基础概念

MySQL 存储过程(Stored Procedure)是一种在 MySQL 数据库中存储和编译的 SQL 代码块,可以通过调用执行。存储过程可以简化复杂的 SQL 逻辑,提高代码的重用性和执行效率。

批量插入数据是指一次性插入多条记录到数据库表中,相比于逐条插入,批量插入可以显著提高数据插入的性能。

相关优势

  1. 简化代码:存储过程可以将复杂的 SQL 逻辑封装起来,使得调用者只需执行一个简单的调用命令。
  2. 提高性能:批量插入数据可以减少与数据库的交互次数,从而提高数据插入的效率。
  3. 增强安全性:存储过程可以设置权限,限制对数据库的操作,提高数据的安全性。

类型

MySQL 存储过程可以分为以下几种类型:

  1. 无参数存储过程:不需要传递任何参数。
  2. 带输入参数的存储过程:可以传递输入参数。
  3. 带输出参数的存储过程:可以返回输出参数。
  4. 带输入输出参数的存储过程:既可以传递输入参数,也可以返回输出参数。

应用场景

存储过程常用于以下场景:

  1. 复杂的数据操作:如批量插入、更新、删除等。
  2. 业务逻辑封装:将业务逻辑封装在存储过程中,简化应用程序代码。
  3. 数据验证和处理:在插入或更新数据之前进行数据验证和处理。

示例代码

以下是一个使用 MySQL 存储过程批量插入数据的示例:

创建存储过程

代码语言:txt
复制
DELIMITER $$

CREATE PROCEDURE BatchInsertData(IN tableName VARCHAR(255), IN data JSON)
BEGIN
    DECLARE i INT DEFAULT 0;
    DECLARE rowCount INT;
    DECLARE columns VARCHAR(255);
    DECLARE values VARCHAR(255);
    DECLARE sqlQuery VARCHAR(1000);

    SET rowCount = JSON_LENGTH(data);
    SET columns = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].columns')));
    SET values = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].values')));

    SET sqlQuery = CONCAT('INSERT INTO ', tableName, ' (', columns, ') VALUES (', values, ')');

    WHILE i < rowCount DO
        SET i = i + 1;
        SET columns = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].columns')));
        SET values = JSON_UNQUOTE(JSON_EXTRACT(data, CONCAT('$[', i, '].values')));
        SET sqlQuery = CONCAT(sqlQuery, '; INSERT INTO ', tableName, ' (', columns, ') VALUES (', values, ')');
    END WHILE;

    PREPARE stmt FROM sqlQuery;
    EXECUTE stmt;
    DEALLOCATE PREPARE stmt;
END$$

DELIMITER ;

调用存储过程

代码语言:txt
复制
CALL BatchInsertData('your_table_name', '[{"columns": "column1, column2", "values": "value1, value2"}, {"columns": "column1, column2", "values": "value3, value4"}]');

常见问题及解决方法

问题1:存储过程创建失败

原因:可能是语法错误、权限不足或表不存在。

解决方法

  1. 检查存储过程的语法是否正确。
  2. 确保有足够的权限创建存储过程。
  3. 确保表存在并且有正确的权限。

问题2:批量插入数据失败

原因:可能是数据格式不正确、表结构不匹配或存储过程逻辑错误。

解决方法

  1. 检查传递给存储过程的数据格式是否正确。
  2. 确保表结构与存储过程中使用的列匹配。
  3. 调试存储过程逻辑,确保每一步都正确执行。

参考链接

希望以上信息对你有所帮助!如果有更多问题,请随时提问。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

Mybatis批量插入与存储过程批量插入

除了传统的Mybatis映射文件中的批量插入外,还可以利用存储过程来实现批量插入。本文就来讲解一下Mybatis常用的几种批量插入方式,以及重点介绍存储过程插入。1....这种方式比较适合数据量小的情况。2. 利用存储过程批量插入存储过程接下来重点介绍利用存储过程批量插入。...存储过程是存储在数据库中的一组为了完成特定功能的SQL语句集,用户通过指定存储过程的名字和参数(如果有)来调用并执行它。使用存储过程进行批量插入可以减少与数据库的交互次数,提高性能。...在上面的示例中,你已经展示了如何使用存储过程来批量插入数据。存储过程idata和proc_initData分别用于向表t2和oms_order中插入数据。...在存储过程中,你可以使用循环结构(如WHILE循环)来迭代插入数据。这种方法适用于需要动态生成数据或者需要基于某种条件插入数据的情况。

33810
  • Mysql--批量插入数据脚本

    批量插入数据脚本 前置知识 创建一个随机产生字符串的函数rand_string(int); 创建一个随机产生一个数字的函数rand_num() 创建存储过程 调用存储过程 ---- 前置知识 CEILING...FLOOR 函数返回小于或等于所给数字表达式的最大整数 FLOOR 和 CEILING 返回值的数据类型都与输入的数字表达式的数据类型相同。...100+RAND()*10); RETURN i; END $$ 如果要删除这个自定义函数: drop function rand_num; //function后面加要删除的自定义函数名 ---- 创建存储过程...payment (id, `serial`) VALUES (i,rand_string(6)); UNTIL i = max_num END REPEAT; COMMIT; END $$ ---- 调用存储过程...DELIMITER ; //切换为;结束sql语句 CALL insert_crownsize(100001,10);//调用自定义存储过程,这里一次提交为10条

    3K20

    MySQL 批量插入:如何不插入重复数据?

    知识这个东西,看来真的要温故而知新,一直不用,都要忘记了 业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了mysql...item.username}, #{item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。 来源:www.telami.cn

    3.6K20

    【MySQL】插入优化篇——(少量插入数据优化&批量插入数据load指令)

    前言 大家好吖,欢迎来到 YY 滴MySQL系列 ,热烈欢迎!...本章主要内容面向接触过C++ Linux的老铁 主要内容含: 1.批量插入 采取以下形式,在一个insert语句中完成数据插入,而不是分成几个insert语句 Insert into tb test...values(1,'Tom'),(2,'cat'),(3, jerry'); 【1】需要大批量插入数据——load指令 如果一次性需要插入大批量数据,使用insert语句插入性能较低,此时可以使用MVSQL...本地磁盘文件中的数据,通过load直接加载到数据库表结构中 操作如下: #客户端连接服务端时,加上参数--local-infile mysql --local-infile -u root -p #设置全局参数...批量处理:对于大量的插入操作,将它们封装在一个事务中可以显著提高性能,因为数据库只需在事务结束时进行一次磁盘写入操作,而不是每次插入都写入。

    10710

    mysql批量插入大量数据「建议收藏」

    mysql批量插入大量数据 时间:2020年11月25日 今天遇到了一个批量插入大量数据任务,然后出于小白本能,直接for-each循环插入不就好了,于是手上开始噼里啪啦一顿操作,写好了从读取excel...1w条数据进行比较 1w条数据插入了11s,比上面不知道快了多少,可是这样插入是有一个弊端的,就是数据量再大一点的话,会报错的,我改成10w去跑一下给你们看一下效果 ### Cause: com.mysql.cj.jdbc.exceptions.PacketTooBigException...三、method-3 第三种,通过原生的jdbc连接设置,然后打开批量处理的方式去处理数据 MySQL的JDBC连接的url中要加rewriteBatchedStatements参数,并保证5.1.13...以上版本的驱动,才能实现高性能的批量插入。...MySQL JDBC驱动在默认情况下会无视executeBatch()语句,把我们期望批量执行的一组sql语句拆散,一条一条地发给MySQL数据库,批量插入实际上是单条插入,直接造成较低的性能。

    3.8K10

    MySql批量插入时,如何不插入重复的数据

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...几百万的数据,不可能查出来,做去重处理 说一下我Google到的解决方案 1、insert ignore into 当插入数据时,如出现错误时,如重复数据,将不返回错误,只以警告形式返回。...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    2.8K20

    Mysql批量插入时,如何不插入重复的数据

    业务很简单:需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...user (name) SELECT 'telami' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1) 这种方法其实就是使用了mysql...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    5.4K21

    MySql 批量插入时,如何不插入重复的数据

    :需要批量插入一些数据,数据来源可能是其他数据库的表,也可能是一个外部excel的导入 那么问题来了,是不是每次插入之前都要查一遍,看看重不重复,在代码里筛选一下数据,重复的就过滤掉呢?...向大数据数据库中插入值时,还要判断插入是否重复,然后插入。如何提高效率 看来这个问题不止我一个人苦恼过。...几百万的数据,不可能查出来,做去重处理 说一下我Google到的解决方案 1、insert ignore into 当插入数据时,如出现错误时,如重复数据,将不返回错误,只以警告形式返回。...item.mobileNumber} ) ON duplicate KEY UPDATE id = id 这里用的是Mybatis,批量插入的一个操作...这样在批量插入时,如果存在手机号相同的话,是不会再插入了的。

    3.5K20
    领券