mybatis-plus大批量数据插入缓慢问题
生活随笔
收集整理的這篇文章主要介紹了
mybatis-plus大批量数据插入缓慢问题
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
文章目錄
- 問題
- 排查
- 結(jié)果
- 建議
問題
最近項目用的mybatis-plus做的映射,有個批處理文件內(nèi)容的需求,在使用mybatis-plus的批處理方法saveBatch時發(fā)現(xiàn)速度特別慢,測試從1000到10000到80000條基本上是線性增加,80000條時差不多要90秒。
排查
經(jīng)debug排查sql語句是批量執(zhí)行,所以應該不是框架本身的問題,由于用的是公司的手腳架,在mysql連接配置中發(fā)現(xiàn)了問題
這里少配置了一個參數(shù)rewriteBatchedStatements=true
結(jié)果
修改前24w數(shù)據(jù)大概在254709 ms
修改后24w數(shù)據(jù)大概在42506 ms
單次批量插入10000條大概在1700ms
建議
由于我這邊沒有特殊的性能要求,沒有做更多的性能測試,如果對性能有要求的小伙伴可以利用其他手段再進行測試
總結(jié)
以上是生活随笔為你收集整理的mybatis-plus大批量数据插入缓慢问题的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 玩转 VS Code 专栏
- 下一篇: java 集成 kafka 0.8.