【MySQL】使用远程连接做数据清洗

刺骨的言语ヽ痛彻心扉 2022-11-19 12:43 213阅读 0赞

#### 1. 启用Federated引擎 ####

由于要对远程数据库做外部映射，所以在本地库中需要先开启参数项federated，通过开启Federated引擎来实现数据映射。

先通过

show engines;

查看本地mysql中是否开启了Federated引擎。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70]  
如上图所示，当前是没有开启Federated引擎的。接下来就需要通过修改配置文件来开启federated引擎。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70 1]  
注意：由于使用的是docker镜像的mysql，所以配置文件中需要配置路径的时候一定要写镜像中Linux的路径。

在cnf文件中添加“federated”后重启一下mysql服务。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70 2]  
之后，重新登录查看是否已经启用federated引擎，如下图：  
![在这里插入图片描述][20210113162942375.png]

#### 2. 创建Federated Server来连接远程数据库 ####

其实一般来说直接通过Federated的Connection就可以连接到远程的服务器对应的数据库和表，如下图：  
![在这里插入图片描述][20210113163110459.png]  
但是可恶就可恶在密码那边存在了一个“@”号。由于“@”是保留字符，在直接创建连接时就会出现以下报错：

Error Code: 1432. Can't create federated table. The data source connection string 'mysql://paohe:paohe!@#@192.168.100.253:3306/spot_paohe/spot_trad' is not in the correct format

为了解决这个问题需要创建一个Federated Server来解决这种特殊字符的问题，以本例子为例：

CREATE SERVER `spot_paohe_client`
    FOREIGN DATA WRAPPER mysql
    OPTIONS (
      HOST '192.168.100.253',
      PORT 3306,
      USER 'paohe',
      PASSWORD 'paohe!@#',
      DATABASE 'spot_paohe'
    );

创建完成后可以通过以下命令进行连接。  
![在这里插入图片描述][20210113163319488.png]  
这样就创建出来了对应的表了。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70 3]  
之后就可以在本地做完所有的数据清洗了。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70]: /images/20221119/e8bcf671030a401098e48075558586d6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20210113162334119.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70 2]: https://img-blog.csdnimg.cn/20210113162850825.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg==,size_16,color_FFFFFF,t_70
[20210113162942375.png]: https://img-blog.csdnimg.cn/20210113162942375.png
[20210113163110459.png]: https://img-blog.csdnimg.cn/20210113163110459.png
[20210113163319488.png]: https://img-blog.csdnimg.cn/20210113163319488.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg_size_16_color_FFFFFF_t_70 3]: https://img-blog.csdnimg.cn/20210113163350905.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2tpZGFfeXVhbg==,size_16,color_FFFFFF,t_70