如何对项目中大量批量操作进行优化提升项目性能（mybitis中sql优化）。

偏执的太偏执、 2022-02-19 10:18 276阅读 0赞

后台web程序及接口性能相关因素。

多年开发总结的影响性能因数。

1，对象的创建。

2，线程的创建。

3，链接的创建（数据库链接等）。

4.，SQL语句执行时间。

本篇博文主要针对3，4两点影响性能的因数进行优化。前两点将在以后的博文中进行讲解。（前两点偏向于业务优化相关）

情况说明

1，项目中有大量的导出，导入功能。在导入数据量超过一定量（10w）时候系统运行十分缓慢。导致系统运行很卡。检查后台发现

后台导入功能是一个传入list不断循环list然后一条一条插入。（刚开始已将循环体内的创建对象，线程等代码移到循环体外，未有明显效果）

由上情况可以确定，该导入功能是由于不断创建数据库链接导致性能缓慢（因为每插入一条数据即要创建一次数据库链接）。

解决方案

对导入功能进行优化，执行批量sql语句减少数据库链接数量提升性能。

mybitis批量sql实现

![20190416140246579.png][]

批量插入sql语句实现方法。

情况说明

2，当程序运行一段时间数据库数据量大大增加，几张主要的表都已达到百万级别。查询显示功能变的很慢。每次查询显示都需要1-10秒的显示时间，检查后台发现，后台查询存在大量的表链接操作，且表结构没有建索性，查询语句存在大量的冗余sql执行时间占程序运行时间的很大一部分。

由上情况可以确定程序运行缓慢，程序性能不好，是由于sql语句执行效率低下导致的。

解决方案

# explain执行计划详解[https://blog.csdn.net/wuseyukui/article/details/71512793][https_blog.csdn.net_wuseyukui_article_details_71512793] #

查看sql语句的执行计划，优化sql，提升sql执行效率，当优化语句后程序执行效率大大提升。

本篇博文主要理解当程序数据量变的巨大时候程序性能优化方案（以上2个实例主要讲解性能优化）

此致敬礼 ：感谢各位网友的阅读2019-4-16

[20190416140246579.png]: /images/20220219/ee66434774e04baea3b7ecc59d7f592c.png
[https_blog.csdn.net_wuseyukui_article_details_71512793]: https://blog.csdn.net/wuseyukui/article/details/71512793

发表评论取消回复

表情：

评论列表（有 0 条评论，276人围观）

还没有评论，来说两句吧...

相关阅读

相关性能优化：Python项目中常见的性能瓶颈及提升方案

在Python项目中，常见的性能瓶颈包括： 1. **循环效率低**：如果代码中存在大量的for或while循环，并且循环体内部操作复杂，这会显著降低程序性能。 2. **

野性酷女/ 2025年02月19日 03:18/ 0 赞/ 4 阅读

相关开发工程师的挑战：Python项目中如何进行性能优化？

在Python项目中进行性能优化是一个持续的过程，主要包括以下几个方面： 1. **理解需求和数据**： - 了解应用的具体场景和操作频率。 - 对数据进行分析，

忘是亡心i/ 2025年01月01日 10:15/ 0 赞/ 27 阅读

相关性能优化难题：在Python项目中如何进行高效的资源管理和优化？

在Python项目中，进行高效的资源管理和优化可以从以下几个方面进行： 1. **内存管理**： - 使用`with`语句打开文件，使用完毕后自动关闭，减少内存占用。

野性酷女/ 2024年12月28日 19:15/ 0 赞/ 33 阅读

相关如何优化Java中大量的数据操作

在Java中，优化大量数据操作可以通过以下几个方面进行： 1. 数据结构选择：根据数据的特性（如重复性、关联性等）选择合适的数据结构。例如，使用HashSet存储不重复元素。

梦里梦外;/ 2024年10月14日 10:18/ 0 赞/ 81 阅读

相关项目实际场景中的SQL优化

1.当 limit 的基数比较大时可以使用 between 来代替。比如一个查询需要使用 limit 语句从排序了的数据中的第10w条数据开始，查看后面的10条数据，li

深碍√TFBOYSˉ_/ 2024年02月20日 03:52/ 0 赞/ 79 阅读

相关 Vue 项目如何进行 SEO 优化

目录 1.前言 2.SSR服务器渲染 3.静态化 (博客, 介绍性官网) 4.预渲染 prerender-spa-plugin (插件) 5.使用Phantomj

朴灿烈づ我的快乐病毒、/ 2023年10月02日 04:26/ 0 赞/ 42 阅读

相关项目中大量if...else...优化策略

项目中大量if…else…优化策略开发中，随着项目逻辑越来越复杂，可能会出现越来越多的`if... else...`，这样会导致代码的可读性变差，也不利于管理和后来者阅

谁借莪１个温暖的怀抱￠/ 2023年06月25日 11:28/ 0 赞/ 40 阅读

相关项目中的SQL性能的优化？

前两天遇到一个有意思的问题，后台管理有一个查询，足足查询有30多秒，页面一直不出数据，上级叫我优化一下，然后一直看到SQL层，下面是我做的一个实验: ![70][]

╰半夏微凉°/ 2022年05月16日 02:16/ 0 赞/ 217 阅读

相关通过批量操作优化性能

1、更新优化（插入、修改、删除）数据量大的时间，批量插入大量数据可能会导致数据库崩溃，所以可分批批量插入，如现在要批量插入用户数据，可以一次插入200条； Lis

àì夳堔傛蜴生んèń/ 2022年04月13日 12:59/ 0 赞/ 283 阅读

相关如何对项目中大量批量操作进行优化提升项目性能（mybitis中sql优化）。

后台web程序及接口性能相关因素。多年开发总结的影响性能因数。 1，对象的创建。 2，线程的创建。 3，链接的创建（数据库链接等）。 4.，SQL语句执行时间。

偏执的太偏执、/ 2022年02月19日 10:18/ 0 赞/ 277 阅读