基于CentOS Stream 9平台搭建Nacos2.2.0集群以及OpenResty反向代理以及GRPC协议配置

怼烎@ 2024-03-24 10:24 8阅读 0赞

#### 目录展示 ####

*   *  Nacos2.2.0集群搭建
     *   *  1. 下载
         *  2. 解压
         *  3.修改配置
         *   *  3.1分别修改下启动类中JDK路径以及启动大小
             *  3.2 分别配置数据源
             *  3.3 创建nacos数据库
         *  3.4 修改cluster.conf配置
         *   *  3.4.1 复制 conf目录下的cluster.conf.example 并修改
             *  3.4.2 编辑文件，修改三台主机地址
             *  3.4.3 分别放入另外两个nacos的conf目录下:
         *  4. 启动集群
         *  5. 设置服务开机启动
         *   *  5.1 创建脚本：
             *  5.2 添加内容：
             *  5.3 赋权：
             *  5.4 开机自启
             *   *  新建服务文件
                 *  添加内容：
                 *  赋权：
                 *  设置开机自启：
                 *  重载配置
                 *  重启尝试脚本可行性（reboot）
     *  6. OpenResty
     *   *  6.1 下载
         *  6.2 解压
         *  6.3 进入目录
         *  6.4 执行configure命令
         *  6.5 配置nginx.conf文件（\`后面grpc协议一定要配置\`）
         *  6.6 重新加载配置文件
         *  6.7 设置服务开机自启：
         *  6.8 设置开机自启：
     *  7. 服务器相关配置、避免nacos连接出错
     *   *  7.1 准备工作

--------------------

> 准备环境  
> ![环境][f34fdc824374443eb0f715ac9d3e4f7a.png]  
> 前提环境准备：  
> [JDK安装及环境配置，参考][JDK]  
> [MySQL安装及环境配置，参考][MySQL]  
> [Maven安装及环境配置，参考][Maven]

--------------------

### Nacos2.2.0集群搭建 ###

搭建项目的时候一定要一一对应！！！  
`版本说明：`[https://github.com/alibaba/spring-cloud-alibaba/wiki/%E7%89%88%E6%9C%AC%E8%AF%B4%E6%98%8E][https_github.com_alibaba_spring-cloud-alibaba_wiki_E7_89_88_E6_9C_AC_E8_AF_B4_E6_98_8E]  
![2021分支][2021]  
![组件版本][b08acb2e8fec4fada2d755fc740e5a09.png]

--------------------

#### 1. 下载 ####

[官网Github：][Github]

新建目录

mkdir /usr/local/nacos-cluster

进入目录

cd /usr/local/nacos-cluster

在线下载  
wget [https://github.com/alibaba/nacos/releases/download/2.2.0/nacos-server-2.2.0.tar.gz][https_github.com_alibaba_nacos_releases_download_2.2.0_nacos-server-2.2.0.tar.gz]

--------------------

#### 2. 解压 ####

> 因为在同一台机器，伪集群，所以就改端口，

（1） 解压、重命名区分（也可以先配置好一台，然后再拷贝两份，改下端口就行）

> `至于为啥没8848，因为集群启动报错，提示8848端口占用....`  
> 至于为啥端口设置的这么离谱，问就是官方设置端口占用有偏移量1000±,然后（主要是我看不到到底是那个端口被占用了，去查又没有…搞玄学来的，，之前设置8840、8850、8860这种连续端口，启动的时候报一堆错，差点没把我送走，折腾了好久。后来实在不甘心，随便整个端口跑一下，结果就跑起来了。**`总结：不要使用连续端口`**）  
> Caused by: io.grpc.netty.shaded.io.netty.channel.unix.Errors$NativeIoException: bind(…) failed: Address already in use

tar -zxvf nacos-server-2.2.0.tar.gz 
    mv nacos nacos8140

（2）

tar -zxvf nacos-server-2.2.0.tar.gz 
    mv nacos nacos8550

（3）

tar -zxvf nacos-server-2.2.0.tar.gz 
    mv nacos nacos8960

![nacos][]

--------------------

#### 3.修改配置 ####

##### 3.1分别修改下启动类中JDK路径以及启动大小 #####

vi /usr/local/nacos-cluster/nacos8140/bin/startup.sh

> ESC状态下`:set number`可以显示行号

30行 jdk路径  
![jdk][]

55 行 默认集群模式启动  
![默认][abc3d3a09bee4073b8a62ebfb3494d59.png]  
93行 启动大小，可以自行修改  
![改][0c968fd707f74901b5d1a4a2f038aec4.png]

ESC :wq保存并退出

> 另外两台替换一下：

`cp /usr/local/nacos-cluster/nacos8140/bin/startup.sh /usr/local/nacos-cluster/nacos8550/bin/`

--------------------

`cp /usr/local/nacos-cluster/nacos8140/bin/startup.sh /usr/local/nacos-cluster/nacos8960/bin/`

--------------------

##### 3.2 分别配置数据源 #####

vi /usr/local/nacos-cluster/nacos8140/conf/application.properties
    vi /usr/local/nacos-cluster/nacos8550/conf/application.properties
    vi /usr/local/nacos-cluster/nacos8960/conf/application.properties

![修改][e35342ed11be4075900069ee09c7410c.png]

大概136行，将false改为true 可以开启nacos后台权限控制  
![136行][136]

> \#修改端口  
> server.port=8140  
> \#去掉前面的\#注释（修改数据库地址、数据库用户名、密码）  
> \#\#\#If use MySQL as datasource:  
> spring.datasource.platform=mysql  
> \#\#\#Count of DB:  
> db.num=1  
> \#\#\#Connect URL of DB:  
> db.url.0=jdbc:mysql://192.168.20.128:3306/nacos?characterEncoding=utf8&connectTimeout=1000&socketTimeout=3000&autoReconnect=true&useUnicode=true&useSSL=false&serverTimezone=UTC  
> db.user.0=root  
> db.password.0=123456

##### 3.3 创建nacos数据库 #####

> 新建`nacos`库  
> sql**脚本**在对应的**conf目录下**,放到本地创建数据库，执行一下，导入到新建的数据库中  
> 例如：/usr/local/nacos-cluster/nacos8140/conf

![sql][]

![nacos数据库][nacos 1]

#### 3.4 修改cluster.conf配置 ####

> 就是将 conf目录下的cluster.conf.example 文件改为cluster.conf文件  
> 然后修改文件里的集群地址

##### 3.4.1 复制 conf目录下的cluster.conf.example 并修改 #####

cp /usr/local/nacos-cluster/nacos8140/conf/cluster.conf.example /usr/local/nacos-cluster/nacos8140/conf/cluster.conf

##### 3.4.2 编辑文件，修改三台主机地址 #####

vi /usr/local/nacos-cluster/nacos8140/conf/cluster.conf

![ip配置][ip]

ESC :wq保存并退出

##### 3.4.3 分别放入另外两个nacos的conf目录下: #####

`cp /usr/local/nacos-cluster/nacos8140/conf/cluster.conf /usr/local/nacos-cluster/nacos8550/conf`

--------------------

`cp /usr/local/nacos-cluster/nacos8140/conf/cluster.conf /usr/local/nacos-cluster/nacos8960/conf`

--------------------

#### 4. 启动集群 ####

> 记得开放端口或者直接关闭防火墙：  
> `firewall-cmd --zone=public --add-port=3306/tcp --permanent`  
> `--zone` \# 作用域  
> `--add-port=3306/tcp` \# 添加端口，格式为：端口/通讯协议  
> `--permanent` \# 永久生效，没有此参数重启后失效  
> 查看开放的端口：  
> **cat /etc/firewalld/zones/public.xml**  
> 或者直接  
> 停止防火墙  
> systemctl stop firewalld  
> 永久关闭防火墙  
> systemctl disable firewalld  
> 防火墙状态  
> systemctl status firewalld

sh /usr/local/nacos-cluster/nacos8140/bin/startup.sh 
    sh /usr/local/nacos-cluster/nacos8550/bin/startup.sh 
    sh /usr/local/nacos-cluster/nacos8960/bin/startup.sh

可查看对应启动日志：

tail -f /usr/local/nacos-cluster/nacos8140/logs/start.out

![日志][91dd45ded9084caea81a93986063742a.png]

> 访问地址：http://IP:端口/nacos/  
> 例如：[http://192.168.20.128:8140/nacos/][http_192.168.20.128_8140_nacos]  
> ![nacos首页截图][nacos 2]

> 相关命令  
> 非集群：  
> 单机启动sh startup.sh -m standalone
> 
> --------------------
> 
> 集群模式：  
> 使用内置数据源  
> sh startup.sh -p embedded  
> 使用外置数据源  
> sh startup.sh

--------------------

#### 5. 设置服务开机启动 ####

##### 5.1 创建脚本： #####

vi nacos-cluster.sh

##### 5.2 添加内容： #####

#!/bin/bash
    case $1 in
    "start" )
            #echo ========= 启动nacos集群 =========
            #echo ========= 启动nacos8140 =========
            sh /usr/local/nacos-cluster/nacos8140/bin/startup.sh
            #echo ========= 启动nacos8550=========
            sh /usr/local/nacos-cluster/nacos8550/bin/startup.sh
            #echo ========= 启动nacos8960 =========
            sh /usr/local/nacos-cluster/nacos8960/bin/startup.sh
         ;;
         "stop" )
            #echo ========= 停止nacos集群 =========
            #echo========= 停止nacos8140 =========
            /usr/local/nacos-cluster/nacos8140/bin/shutdown.sh
            #echo========= 停止nacos8550=========
            /usr/local/nacos-cluster/nacos8550/bin/shutdown.sh
            #echo ========= 停止nacos8960 =========
            /usr/local/nacos-cluster/nacos8960/bin/shutdown.sh
         ;;
    esac

##### 5.3 赋权： #####

chmod u+x nacos-cluster.sh

> 脚本单独使用命令  
> 启动：sh nacos-cluster.sh start  
> 停止：sh nacos-cluster.sh stop  
> ![停止][6406382f783a490590b620b197ad5102.png]  
> ![启动][8aa913b654e44026852fdc8981d979a5.png]

##### 5.4 开机自启 #####

> 准备设置一个.service，开机执行这个脚本文件，以此实现自启效果  
> 系统启动脚本目录 /etc/systemd/system/

###### 新建服务文件 ######

vi /etc/systemd/system/nacos-cluster.service

###### 添加内容： ######

[Unit]
    Description=nacos-cluster
    After=network.target remote-fs.target nss-lookup.target mysql8.service zookeeper.service kafka.service
    
    [Service]
    Type=forking
    ExecStart=sh /usr/local/nacos-cluster/nacos-cluster.sh start
    ExecStop=sh /usr/local/nacos-cluster/nacos-cluster.sh stop
    PrivateTmp=true
    
    [Install]
    WantedBy=multi-user.target

![启动][5e11fe9dd62d4f20a796c8cc4ca4bfa8.png]

> 按ESC :wq保存并退出

###### 赋权： ######

chmod 754 /etc/systemd/system/nacos-cluster.service

###### 设置开机自启： ######

systemctl enable nacos-cluster.service

###### 重载配置 ######

systemctl daemon-reload

###### 重启尝试脚本可行性（reboot） ######

> 重启后等待一会，nacos启动要点时间

systemctl status nacos-cluster.service

![没问题][04152c3a8b47488b8f4fd5834a3a751d.png]

--------------------

### 6. OpenResty ###

> 通过使用Lua扩展NGINX的可扩展Web平台

[中文官网：http://openresty.org/cn/][http_openresty.org_cn]  
[支持的lua模块: http://openresty.org/cn/components.html][lua_ http_openresty.org_cn_components.html]  
[下载页面：http://openresty.org/cn/download.html][http_openresty.org_cn_download.html]  
[下载链接：https://openresty.org/download/openresty-1.21.4.1.tar.gz][https_openresty.org_download_openresty-1.21.4.1.tar.gz]

#### 6.1 下载 ####

cd /usr/local/
    yum install -y wget
    wget https://openresty.org/download/openresty-1.21.4.1.tar.gz

#### 6.2 解压 ####

tar -zxvf openresty-1.21.4.1.tar.gz

#### 6.3 进入目录 ####

cd /usr/local/openresty-1.21.4.1

#### 6.4 执行configure命令 ####

> 默认安装目录 `--prefix=/usr/local/openresty`

必要环境：

yum -y install gcc gcc-c++ perl make kernel-headers kernel-devel

--------------------

yum -y install pcre-devel

执行命令：

`./configure --prefix=/usr/local/openresty --with-luajit --with-http_stub_status_module --with-pcre --with-pcre-jit --with-http_gzip_static_module --with-http_ssl_module`

![编译][57b00faa8ba946b9bcb7621ce452d6bf.png]

执行命令:

make
    make install

#### 6.5 配置nginx.conf文件（`后面grpc协议一定要配置`） ####

vi /usr/local/openresty/nginx/conf/nginx.conf

**添加内容：**

upstream nacoscluster{
        
          server 192.168.20.128:8140;
          server 192.168.20.128:8550;
          server 192.168.20.128:8960;
        }
        server {
        
            # post
            listen       8999;
            server_name  localhost;
        location /nacos/{
        
            proxy_pass http://nacoscluster/nacos/;
            }
        }

![配置][d9a0b3f0b2c64f6bbe829f7e0e04a944.png]  
`底部新增nacos的grpc协议配置！！！`

> 有效解决项目连接集群时报  
> Caused by: com.alibaba.nacos.api.exception.NacosException: Client not connected, current status:STARTING错误

# nacos的grpc协议配置
    stream {
        
        upstream nacoscluster-grpc{
        
            # nacos2版本，grpc端口与要比主端口多1000，主端口为8140、8550、8960
            server 192.168.20.128:9140 weight=1;
            server 192.168.20.128:9550 weight=1;
            server 192.168.20.128:9960 weight=1;
            }
        server{
        
               listen 9999;
            proxy_pass nacoscluster-grpc;
            }
    }

![grpc协议][grpc]

ESC :wq保持并退出

cd /usr/local/openresty/nginx/sbin/

openresty启动命令：

./nginx

#### 6.6 重新加载配置文件 ####

./nginx -s reload

服务调用访问地址：[http://192.168.20.128:8999/nacos/][http_192.168.20.128_8999_nacos]  
![加载地址][ffd6d006eeec4a529e6c7d0c6faf51bc.png]

#### 6.7 设置服务开机自启： ####

vi /etc/systemd/system/open-resty.service

添加：

[Unit]
    Description=open-resty
    After=network.target remote-fs.target nss-lookup.target mysql8.service zookeeper.service kafka.service nacos-cluster.service
    
    [Service]
    Type=forking
    ExecStart=/usr/local/openresty/nginx/sbin/nginx -c /usr/local/openresty/nginx/conf/nginx.conf
    PrivateTmp=true
    
    [Install]
    WantedBy=multi-user.target

![nginx][]  
ESC :wq保存并退出

#### 6.8 设置开机自启： ####

systemctl enable open-resty.service

![开机自启][8c3b5ebfa3c24999ae01fe4290946403.png]

> 相关命令记录：  
> 禁止开机启动：systemctl disable open-resty.service  
> 启动服务：systemctl start open-resty.service  
> 停止服务：systemctl stop open-resty.service  
> 重启服务：systemctl restart open-resty.service  
> 查看服务状态：systemctl status open-resty.service  
> 查看所有已启动的服务：systemctl list-units --type=service

--------------------

### 7. 服务器相关配置、避免nacos连接出错 ###

#### 7.1 准备工作 ####

> `确保localhost和主机名对应` 避免nacos连接出错

查看主机名：

hostname

![coisini][]

可以修改主机名称（修改的话记得`reboot`重启才能生效）：

vi /etc/hostname

修改hosts将localhost和主机名对应

vi /etc/hosts

添加：

127.0.0.1  localhost  coisini

![hosts][]  
查看是否正常显示127.0.0.1

hostname -i

![127.0.0.1][]

hostnamectl

![查看][8432b112ffdc41cfa86375e8f984a0bc.png]

部署完毕，感谢阅览~  
END

--------------------

[f34fdc824374443eb0f715ac9d3e4f7a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/86be14822afe4fa798a270ae79e18b64.png
[JDK]: https://blog.csdn.net/qq_44870331/article/details/129641888
[MySQL]: https://blog.csdn.net/qq_44870331/article/details/129713600
[Maven]: https://blog.csdn.net/qq_44870331/article/details/129763111
[https_github.com_alibaba_spring-cloud-alibaba_wiki_E7_89_88_E6_9C_AC_E8_AF_B4_E6_98_8E]: https://github.com/alibaba/spring-cloud-alibaba/wiki/%E7%89%88%E6%9C%AC%E8%AF%B4%E6%98%8E
[2021]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/ab45cb41f3204e959dd6f7bc77217a74.png
[b08acb2e8fec4fada2d755fc740e5a09.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/a3efab04ee7f4163bff74ad32cf288ee.png
[Github]: https://github.com/alibaba/nacos/releases/tag/2.2.0
[https_github.com_alibaba_nacos_releases_download_2.2.0_nacos-server-2.2.0.tar.gz]: https://github.com/alibaba/nacos/releases/download/2.2.0/nacos-server-2.2.0.tar.gz
[nacos]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/692666c6ff66443f84d42be67d94d729.png
[jdk]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/678b8c73efd44c3bafe5e7c969c81835.png
[abc3d3a09bee4073b8a62ebfb3494d59.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/f42a399946ee497d84088f24592ec15f.png
[0c968fd707f74901b5d1a4a2f038aec4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/c22b931703384299b1fa50131eb27829.png
[e35342ed11be4075900069ee09c7410c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/b08fbd16136743089cdcceeba7a909e7.png
[136]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/043a87aecdca4ac68bdf676626133c42.png
[sql]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/fa49dc3885cf41dfb6a28b1159fc5b02.png
[nacos 1]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/c61b5c012dbd47caa3058368554ec28a.png
[ip]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/8d6287e9b7ef46289ebc4b994ad88350.png
[91dd45ded9084caea81a93986063742a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/e7e4e5fc000942e1b6e86026a4a27a36.png
[http_192.168.20.128_8140_nacos]: http://192.168.20.128:8140/nacos/
[nacos 2]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/052f596059ad4ecdaf4e01253e975712.png
[6406382f783a490590b620b197ad5102.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/ffedda2d9a0744d89742fab73394c864.png
[8aa913b654e44026852fdc8981d979a5.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/12d0a6981b0049fdadfedff16be4935d.png
[5e11fe9dd62d4f20a796c8cc4ca4bfa8.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/53ac44c95a7d4c66a1f65e9aed7a7633.png
[04152c3a8b47488b8f4fd5834a3a751d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/b8b464cb00584f8f8c6f5780574ec8f5.png
[http_openresty.org_cn]: http://openresty.org/cn/
[lua_ http_openresty.org_cn_components.html]: http://openresty.org/cn/components.html
[http_openresty.org_cn_download.html]: http://openresty.org/cn/download.html
[https_openresty.org_download_openresty-1.21.4.1.tar.gz]: https://openresty.org/download/openresty-1.21.4.1.tar.gz
[57b00faa8ba946b9bcb7621ce452d6bf.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/19613155477947b8b75b2cbd16a4e1fa.png
[d9a0b3f0b2c64f6bbe829f7e0e04a944.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/6fa53e86e1fb484089a0e490fecaff05.png
[grpc]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/98e552096da7478781941d224a7151bc.png
[http_192.168.20.128_8999_nacos]: http://192.168.20.128:8999/nacos/
[ffd6d006eeec4a529e6c7d0c6faf51bc.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/7b5d94c7e5484313b8ebd3757e1a08db.png
[nginx]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/dfe42e9ce5c648239741dbd172497593.png
[8c3b5ebfa3c24999ae01fe4290946403.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/8a2132412e654dcb8c1bef0b4d93d9be.png
[coisini]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/8a1938bbadc642edb00016164e807da8.png
[hosts]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/68e1ce622f2c4939baac8aef3da171aa.png
[127.0.0.1]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/bfdad681140945a097a31684ff509999.png
[8432b112ffdc41cfa86375e8f984a0bc.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/24/18542116afe3480e9267567a02005011.png