mysql多表重复数据只保留一行的思路

喜欢ヅ旅行 2024-02-17 09:50 43阅读 0赞

## 一、问题描述 ##

假设有3个表，`test_a`，`test_b`，`test_c`；

`test_a`和`test_b`中有些重复数据；

现在要把这2个表的数据同步到表c，但是重复数据只保留1行。

样例如下：  
![在这里插入图片描述][c5c7546998144241ae05ce0e553139e7.png]  
![在这里插入图片描述][d8c67aafe8b947fdac445491081f7c71.png]  
![在这里插入图片描述][c673d621825748498cbafec7cd9fddbd.png]  
具体要求如下：  
1.`test_a`与`test_b`中都存在的数据（根据card关联），以`test_a`为准，并且把authority字段拼起来（逗号分隔），移动到`test_c`

2.对于`test_a`不存在但是`test_b`存在的数据，以`test_b`为准，移动到`test_c`

3.对于`test_a`存在但是`test_b`不存在的数据，以`test_a`为准，移动到`test_c`

## 二、sql样例 ##

1.首先查询到`test_a`不存在但是`test_b`存在的数据：

SELECT
    	NULL AS user_id,
    	b.card,
    	b. NAME,
    	b.authority
    FROM
    	test_b b
    LEFT JOIN test_a a ON b.card = a.card
    WHERE
    	a.id IS NULL

使用`a.id is null`，就说明是test\_b存在、test\_a不存在了；  
然后可以把这部分数据存入`test_c`

2.然后查询`test_a 存在 && ( test_b 存在 || test_b 不存在)`的数据

SELECT
    	a.user_id,
    	a.card,
    	ifnull(a.NAME, b.NAME),
    	CASE
    WHEN a.authority IS NULL
    AND b.authority IS NULL THEN
    	NULL
    WHEN a.authority IS NOT NULL
    AND b.authority IS NOT NULL THEN
    	concat(
    		a.authority,
    		',',
    		b.authority
    	)
    WHEN a.authority IS NOT NULL
    AND b.authority IS NULL THEN
    	a.authority
    WHEN a.authority IS NULL
    AND b.authority IS NOT NULL THEN
    	b.authority
    ELSE
    	a.authority
    END AS authority
    FROM
    	test_a a
    LEFT JOIN test_b b ON a.card = b.card

使用了`ifnull(a.NAME, b.NAME),`，可以当test\_a表的数据为空时（不准确了），使用test\_b表的数据；

注意这里有个坑，使用`concat(a.authority,',',b.authority)`时，如果有一个表的数据为null，那么最终结果就会是null，不符合预期；

//这样有些问题
    //select a.user_id,a.card,a.name,a.authority,b.authority,concat(a.authority,',',b.authority) from test_a a left join test_b b on a.card=b.card

![在这里插入图片描述][af96474ddbb144638d86cfeced5afb34.png]

并且还需要判断是否需要拼接`,`；

因此sql中使用了`case when`写法。

[c5c7546998144241ae05ce0e553139e7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/5ca48eab8ce1409288e67d196e6ff72e.png
[d8c67aafe8b947fdac445491081f7c71.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/de08d3e8a53240269dab6298bfa9decc.png
[c673d621825748498cbafec7cd9fddbd.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/98e0aeff70ef4d80bdc880386935c372.png
[af96474ddbb144638d86cfeced5afb34.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/02/06/4048aae93049469385b16c0918d1a973.png