MyBatisPlus 批量插入速度慢问题解决方案

最新推荐文章于 2025-04-24 16:46:07 发布

山东馍馍

最新推荐文章于 2025-04-24 16:46:07 发布

阅读量3.7k

点赞数

CC 4.0 BY-SA版权

分类专栏： MyBatisPlus 文章标签：数据库 mysql

本文链接：https://blog.csdn.net/qq_41113081/article/details/120641038

MyBatisPlus 专栏收录该内容

1 篇文章

订阅专栏

本文介绍了如何通过设置`rewriteBatchedStatements=true`来提升MySQL批量插入的效率，解释了其工作原理，并分析了MyBatisPlus的saveBatch方法，揭示了默认情况下逐个插入和批量提交的策略。建议在处理大量数据时使用自定义SQL和此优化策略。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1、saveBatch批量插入等批量操作耗时特别长，对于上万条数据更是十几秒

答：先说解决方案：jdbc URL后追加参数 rewriteBatchedStatements=true，让多个insert/update/delete语句同一批次提交，而不是分开多次提交，除此之外，还需要自定义insert sql，不使用MP的saveXXX

2、原理

mysql jdbc driver发布文档，从3.1.13开始加入了该功能：https://dev.mysql.com/doc/relnotes/connector-j/5.1/en/news-3-1-13.html
添加了性能功能，重写批处理执行 Statement.executeBatch()（对于所有 DML 语句）和 PreparedStatement.executeBatch()（仅对于具有 VALUE 子句的 INSERT）。通过在 JDBC URL 中使用“rewriteBatchedStatements=true”来启用。（错误＃18041）
doc文档：https://dev.mysql.com/doc/connectors/en/connector-j-connp-props-performance-extensions.html#cj-conn-prop_rewriteBatchedStatements
文档截图：

3、MP源码解析

在这里插入图片描述

如果不传每次批量提交，默认每1000提交一次

INSERT_ONE("insert", "插入一条数据（选择字段插入）", "<script>\nINSERT INTO %s %s VALUES %s\n</script>"),
public boolean saveBatch(Collection<T> entityList, int batchSize) {
    String sqlStatement = getSqlStatement(SqlMethod.INSERT_ONE);
    return executeBatch(entityList, batchSize, (sqlSession, entity) -> sqlSession.insert(sqlStatement, entity));
}