imply安装部署

刺骨的言语ヽ痛彻心扉 2022-11-05 12:48 9阅读 0赞

### Imply介绍 ###

*  Imply也是Druid的核心团队开发的，它基于Apache Druid开发了一整套大数据分析解决方案
 *  Imply基于Druid进行了一些组件开发，提供开源社区版本和商业版，简化了部署

## 集群规划 ##

<table> 
 <thead> 
  <tr> 
   <th>主机名称</th> 
   <th>IP地址</th> 
   <th>角色</th> 
   <th>数据库</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>hadoop102</td> 
   <td>192.168.121.140</td> 
   <td>zk、kafka、druid(overlord、coordinator)</td> 
   <td>MySQL</td> 
  </tr> 
  <tr> 
   <td>hadoop103</td> 
   <td>192.168.121.141</td> 
   <td>zk、kafka、druid(middleManager、historical)</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>hadoop104</td> 
   <td>192.168.121.142</td> 
   <td>zk、kafka、druid(broker、router)</td> 
   <td></td> 
  </tr> 
 </tbody> 
</table>

## 下载imply ##

**Imply-3.0.4 基于 apache-druid-0.15.0-Incubating**  
1、下载imply

cd /export/softwares/
    wget https://static.imply.io/release/imply-3.0.4.tar.gz

2、直接使用资料 imply安装包jps’

将该 `imply安装包\imply-3.0.4.tar.gz` 安装包上传到 /exports/softwares

## 解压imply-3.0.4 ##

tar -xvzf imply-3.0.4.tar.gz -C ../servers
    cd ../servers/imply-3.0.4

## 配置imply-3.0.4 ##

**mysql中创建imply相关的数据库**

CREATE DATABASE `druid` DEFAULT CHARACTER SET utf8;
    CREATE DATABASE `pivot` DEFAULT CHARACTER SET utf8;

**修改并上传配置文件**  
1、将 imply 安装目录的 conf 目录重命名为 conf.bak

mv conf conf.bak

1、上传 `imply配置文件\conf.zip` 到 imply-3.0.4 安装目录  
2、解压缩

unzip conf.zip

3、修改 conf/druid/\_common/common.runtime.properties 文件  
修改zookeeper的配置

druid.zk.service.host=hadoop102:2181,hadoop103:2181,hadoop104:2181

修改MySQL的配置

druid.metadata.storage.type=mysql
    druid.metadata.storage.connector.connectURI=jdbc:mysql://hadoop102:3306/druid
    druid.metadata.storage.connector.user=root
    druid.metadata.storage.connector.password=000000

4、修改 conf/pivot/config.yaml 配置文件  
修改mysql的配置

stateStore:
      type: mysql
      location: mysql
      connection: 'mysql://root:123456@hadoop102:3306/pivot'

将配置好的 imply 分发到不同节点

scp -r imply-3.0.4/ hadoop103:$PWD
    scp -r imply-3.0.4/ hadoop104:$PWD

## 配置环境变量 ##

在每台服务器上配置DRUID\_HOME环境变量

# DRUID
    export DRUID_HOME=/export/servers/imply-3.0.4

source /etc/profile 重新加载环境变量

## 启动 imply 集群 ##

1、启动zk集群  
2、hadoop102节点（使用外部zk而不使用imply自带zk启动overlord和coordinator）

# 使用外部zk而不使用imply自带zk启动overlord和coordinator
    /export/servers/imply-3.0.4/bin/supervise -c /export/servers/imply-3.0.4/conf/supervise/master-no-zk.conf

3、hadoop103节点（启动historical和middlemanager）

/export/servers/imply-3.0.4/bin/supervise -c /export/servers/imply-3.0.4/conf/supervise/data.conf

4、hadoop104节点（启动broker和router）

/export/servers/imply-3.0.4/bin/supervise -c /export/servers/imply-3.0.4/conf/supervise/query.conf

**注意事项**

*  如果希望imply运行在后台，在每个执行命令后面加 --daemonize，

## 访问WebUI ##

<table> 
 <thead> 
  <tr> 
   <th>组件名</th> 
   <th>URL</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>broker</td> 
   <td>http://hadoop104:8888</td> 
  </tr> 
  <tr> 
   <td>coordinator、overlord</td> 
   <td>http://hadoop102:8081/index.html</td> 
  </tr> 
  <tr> 
   <td>middleManager、historical</td> 
   <td>http://hadoop102:8090/console.html</td> 
  </tr> 
 </tbody> 
</table>