常见数据库批量插入，如何不插入重复数据？Mysql 4 种方式避免重复插入数据！

冷不防 2023-10-14 17:21 32阅读 0赞

最常见的方式就是为字段设置主键或唯一索引，当插入重复数据时，抛出错误，程序终止，但这会给后续处理带来麻烦，因此需要对插入语句做特殊处理，尽量避开或忽略异常，下面我简单介绍一下，感兴趣的朋友可以尝试一下：

这里为了方便演示，我新建了一个user测试表，主要有id，username，sex，address这4个字段，其中主键为id(自增)，同时对username字段设置了唯一索引：

> 当插入数据时，如出现错误时，如重复数据，将不返回错误，只以警告形式返回。所以使用ignore请确保语句本身没有问题，否则也会被忽略掉。例如：

INSERT IGNORE INTO user (field) VALUES ('xxx')

> 注意 ignore 有其他副作用，请查看 ignore 的具体含义。

### 2、on duplicate key update ###

当primary或者unique重复时，则执行update语句，如update后为无用语句，如id=id，则同1功能相同，但错误不会被忽略掉。

例如，为了实现name重复的数据插入不报错，可使用一下语句：

INSERT INTO user (field) VALUES ('xxx') ON duplicate KEY UPDATE id = id

这种方法有个前提条件，就是，需要插入的约束，需要是主键或者唯一约束（在你的业务中那个要作为唯一的判断就将那个字段设置为唯一约束也就是unique key）。

### 3、insert … select … where not exist ###

根据select的条件判断是否插入，可以不光通过primary 和unique来判断，也可通过其它条件。例如：

INSERT INTO user (field) SELECT 'xxx' FROM dual WHERE NOT EXISTS (SELECT id FROM user WHERE id = 1)

这种方法其实就是使用了mysql的一个临时表的方式，但是里面使用到了子查询，效率也会有一点点影响，如果能使用上面的就不使用这个。

### 4、replace into ###

如果存在primary or unique相同的记录，则先删除掉。再插入新记录。

REPLACE INTO user SELECT 1, 'telami' FROM books

这种方法就是不管原来有没有相同的记录，都会先删除掉然后再插入。

发表评论取消回复

表情：

评论列表（有 0 条评论，32人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL 批量插入，如何不插入重复数据？根据条件 MyBatis不插入重复数据

目录前言解决方案 1、insert ignore into 2、on duplicate key update 3、insert … select … where

小灰灰/ 2024年03月31日 13:03/ 0 赞/ 69 阅读

相关避免 MySQL 插入重复数据的 4 种方式

最常见的方式就是为字段设置主键或唯一索引，当插入重复数据时，抛出错误，程序终止，但这会给后续处理带来麻烦，因此需要对插入语句做特殊处理，尽量避开或忽略异常，下面我简单介绍一下，

小鱼儿/ 2024年03月27日 00:28/ 0 赞/ 81 阅读

相关常见数据库批量插入，如何不插入重复数据？Mysql 4 种方式避免重复插入数据！

最常见的方式就是为字段设置主键或唯一索引，当插入重复数据时，抛出错误，程序终止，但这会给后续处理带来麻烦，因此需要对插入语句做特殊处理，尽量避开或忽略异常，下面我简单介绍一下，

冷不防/ 2023年10月14日 17:21/ 0 赞/ 33 阅读

相关 MySQL——避免重复插入数据

1. insert ignore：insert ignore 会忽视数据库中已经存在的数据，根据主键或者唯一索引判断，如果数据库没有数据，就会插入新的数据，如果有数据的话就跳

本是古典何须时尚/ 2023年01月11日 03:54/ 0 赞/ 163 阅读

相关 Mysql 4种方式避免重复插入数据！

点击上方“程序猿技术大咖”，关注加群讨论 ![format_png][] > 作者丨小小猿爱嘻嘻 > > 来源丨wukong.com/question/674906119

朴灿烈づ我的快乐病毒、/ 2022年12月16日 15:25/ 0 赞/ 120 阅读

相关 MySQL 批量插入，如何不插入重复数据？

![0D5F937FE12312312D81F17F.jpg][] 程序员的成长之路互联网/程序员/技术/资料共享 [关注][Link 1] 阅读本文大概需要 2.

淩亂°似流年/ 2022年10月16日 11:27/ 0 赞/ 237 阅读

相关美团面试题：MySql批量插入时，如何不插入重复的数据？

业务很简单：需要批量插入一些数据，数据来源可能是其他数据库的表，也可能是一个外部excel的导入那么问题来了，是不是每次插入之前都要查一遍，看看重不重复，在代码里筛选一下数

淩亂°似流年/ 2022年10月09日 14:30/ 0 赞/ 141 阅读

相关 MySQL 批量插入：如何不插入重复数据？

> 向大数据数据库中插入值时，还要判断插入是否重复，然后插入。如何提高效率 1、insert ignore into > 当插入数据时，如出现错误时，如重复数据，将不返

绝地灬酷狼/ 2022年09月09日 09:16/ 0 赞/ 256 阅读

相关并发避免数据库插入重复数据

一、怎么避免数据库插入重复数据用的 Sql Server 可以用直接添加索引的方式具体操作步骤见下链接 [https://www.cnblogs.com/vuenote

àì夳堔傛蜴生んèń/ 2022年04月24日 07:38/ 0 赞/ 229 阅读

相关 MySQL 批量插入：如何不插入重复数据？

知识这个东西，看来真的要温故而知新，一直不用，都要忘记了???? 业务很简单：需要批量插入一些数据，数据来源可能是其他数据库的表，也可能是一个外部excel的导入那

不念不忘少年蓝@/ 2021年09月08日 13:30/ 0 赞/ 586 阅读