mybatismysql批量insert数据_mysql数据库简介

mybatismysql批量insert数据_mysql数据库简介MySQL批量插入


Jetbrains全系列IDE稳定放心使用


前言

MySQL批量插入操作相较于单次循环插入有较大的优势,在特定场景下,有比较重要的应用价值。


一、MySQL批量插入的应用场景

我在做项目的时候遇到Excel导入基础数据的情况,在对Excel进行解析,并拿到Excel里面的数据之后,下一步是插入数据库。最简单的方式是使用单次循环插入,但是这种方法效率太慢,不具有事务特征,所以使用批量插入的方法。

二、实现过程

1、Controller层获得导入的Excel数据

代码如下(代码中的CourseInfoList就是一个List集合,存储着CourseInfo对象):

    @PostMapping("/importCourse")
    public AjaxResult importCourse(MultipartFile file) throws Exception{ 
   
        GeneralListener<CourseInfo> generalListener = new GeneralListener<>();
        EasyExcel.read(file.getInputStream(),CourseInfo.class,generalListener).sheet().doRead();
        List<CourseInfo> courseInfoList = generalListener.getList();
        courseService.insertCourseByBatch(courseInfoList);
        return AjaxResult.success();
    }

2、mapper.xml的SQL语句

service层和domain层就省略了。

  • mapper.java代码如下:
@Mapper
public interface CourseInfoMapper { 
   
    void insertCourseByBatch(@Param("list") List<CourseInfo> list);
}
  • mapper.xml代码如下:
  <insert id="insertCourseByBatch" parameterType="java.util.List">
    insert into course_info (id,courseNo,courseName, courseAttr, credit, totalHour, status, description)
    values
    <foreach collection="list" item="item" index="index" separator=",">
      (#{ 
   item.id,jdbcType=BIGINT},#{ 
   item.courseno,jdbcType=VARCHAR},#{ 
   item.coursename,jdbcType=VARCHAR},#{ 
   item.courseattr,jdbcType=VARCHAR},#{ 
   item.credit,jdbcType=INTEGER},#{ 
   item.totalhour,jdbcType=INTEGER},#{ 
   item.status,jdbcType=INTEGER},#{ 
   item.description,jdbcType=VARCHAR})
    </foreach>
  </insert>

这里遇到一个坑,网上很多博客在写这块的时候,都没有加上jdbcType,我一开始也没加,但是一直报错,后来加上jdbcType之后,才解决问题。

3、批量插入优点

  • 批量插入效率比单次插入要高很多,能节省大约2/3的时间,原因在于:(1)降低了日志(MySQL的binlog和innodb的事务日志)刷盘的数据量和频率。(2)减少了SQL语句的解析次数。(3)、减少了网络传输的IO等。
  • 操作的事务性。单次插入时,每个insert会开启一个事务,当执行很多insert的时候,会影响插入的性能。使用批量插入,可以在执行完成之后commit,保证了整批数据要么同时插入,要么都不插入。
  • 批量插入有数据量的限制,即max_allowed_packet值,超过最大值会报错,但是一般情况下不会超过最大值,如果需要插入几十万条甚至上百万条数据,就需要对这种情况进行处理。

总结

这里对mybatis批量插入进行一个小的总结,本质上是将很多条待插入的数据拼接为一条SQL语句,再执行插入操作,在Excel导入等场景下是很有用的。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/185660.html原文链接:https://javaforall.net

赞 (0)
全栈程序员-站长的头像全栈程序员-站长

相关推荐

  • HttpClient详细解释

    HttpClient详细解释Http协议的重要性相信不用我多说了,HttpClient相比传统JDK自带的URLConnection,增加了易用性和灵活性(具体区别,日后我们再讨论),它不仅是客户端发送Http请求变得容易,而且也方便了开发人员测试接口(基于Http协议的),即提高了开发的效率,也方便提高代码的健壮性。因此熟练掌握HttpClient是很重要的必修内容,掌握HttpClient后,相信对于Http协议的了解会

    2022年11月2日
  • 黑盒测试基础[通俗易懂]

    黑盒测试基础[通俗易懂]黑盒测试方法:黑盒测试也称为功能测试和数据驱动测试。它将被测软件视为一个无法打开的黑盒,主要根据功能需求设计测试用例和测试。把产品软件想象成一个只有出口和入口的黑盒。在测试过程中,你只需要知道向黑盒输入什么,知道黑盒会产生什么结果。黑盒测试方法主要有等价类划分、边界值分析、因果图、错误推测等,主要用于软件验证测试。“黑盒”法侧重于程序的外部结构,不考虑内部逻辑结构,针对测试软件界面和软件功能。“黑盒”方法是详尽的输入测试,只有当所有可能的输入都用作测试条件时,才能以这种方式检测程序中的所有错误。

    2022年10月20日
  • Git创建分支和查看分支命令「建议收藏」

    Git创建分支和查看分支命令「建议收藏」branch:分支 是指在开发主线中分离出来的,做进一步开发而不影响到原来的主线Git存储的不是一系列的更改集,而是一系列快照,当你执行一次commit时,git存储一个commit对象,她包含它包含一个指针指向你当前需要提交的内容的快照。master分支是在gitinit命令运行时默认创建一个分支,并命名为master1.查看分支gitbranch:列出本地已经存在的分支,…

    2022年8月22日
  • python内存回收的问题

    python内存回收的问题

    2021年11月27日
  • python中sqrt函数用法_Python sqrt() 函数

    python中sqrt函数用法_Python sqrt() 函数内容简介:sqrt()方法返回数字x的平方根。描述sqrt()方法返回数字x的平方根。语法以下是sqrt()方法的语法:importmathmath.sqrt(x)注意:sqrt()是不能直接访问的,需要导入math模块,通过静态对象调用该方法。参数x–数值表达式。返回值返回数字x的平方根。实例以下展示了使用sqrt()方法的实例:#!/usr/bin/pythonim…

    2022年5月30日
  • 学习笔记:03_如何使用Git命令把文件提交到版本库

    学习笔记:03_如何使用Git命令把文件提交到版本库

    2021年7月11日

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号