Elasticsearch安装和配置 + 数据库同步数据

Bertha 。 2022-05-15 11:49 354阅读 0赞

> 希望通过这篇文章，减少你的时间，愿同你一起修行，任重而道远！

**先来看看最终效果：**  
![这里写图片描述][70]

> **第一.安装：Elasticsearch**

1.  安装之前检查\*\*\*jdk\*\*\*是否安装：

cmd  输入命令  java -version

![这里写图片描述][70 1]  
2. 下载：Elasticsearch [https://www.elastic.co/downloads/elasticsearch][https_www.elastic.co_downloads_elasticsearch] 本例子版本*Elasticsearch6.1.4.zip*  
![这里写图片描述][70 2]  
下载完解压即可：直接双击/bin/ElasticSearch.bat  
![这里写图片描述][70 3]  
浏览器输入：[http://127.0.0.1:9200][http_127.0.0.1_9200] 查看效果  
![这里写图片描述][70 4]  
修改一下config/elasticsearch.yml配置文件：(方便之后使用),修改后重启效果  
![这里写图片描述][70 5]

> \*\* 第二.下载node.js \*\* （head需要从node.js安装）

1、Windows 安装包(.msi)  
32 位安装包下载地址 : [https://nodejs.org/dist/v4.4.3/node-v4.4.3-x86.msi][https_nodejs.org_dist_v4.4.3_node-v4.4.3-x86.msi]  
64 位安装包下载地址 : [https://nodejs.org/dist/v4.4.3/node-v4.4.3-x64.msi][https_nodejs.org_dist_v4.4.3_node-v4.4.3-x64.msi]  
安装教程：[https://www.runoob.com/nodejs/nodejs-install-setup.html][https_www.runoob.com_nodejs_nodejs-install-setup.html]  
![这里写图片描述][70 6]  
查看node.js是否生效：

cmd 输入 node -v

显示出信息：  
![这里写图片描述][70 7]

> 安装grunt 【head插件就是通过grunt启动】

到安装node.js的目录下，输入栏中输入cmd即可进入cmd命令操作符界面：  
![这里写图片描述][70 8]  
![这里写图片描述][70 9]

cmd 输入  npm install -g grunt-cli

![这里写图片描述][70 10]  
之后：查看是否安装成功，出现版本就表示成功了

cmd 输入 grunt -version

![这里写图片描述][70 11]

> **第三.下载head**

点击下载：https://github.com/mobz/elasticsearch-head/archive/master.zip 解压zip  
修改文件：  
![这里写图片描述][70 12]

找到connect，复制下面de数据替换原始数据
    connect: {
    			server: {
    				options: {
    					port: 9100,
    					base: '.',
    					hostname: '*',
    					keepalive: true
    				}
    			}
    		}

![这里写图片描述][70 13]  
同样输入框：cmd 到该目录

![这里写图片描述][70 14]

输入命令  npm install  回车执行

![这里写图片描述][70 15]  
然后：

输入  npm run start 启动服务

![这里写图片描述][70 16]  
浏览器中输入：[http://localhost:9100][http_localhost_9100] 查看现象  
![这里写图片描述][70 17]  
好了现在head 安装，已经成功了！！

> **第四.下载 logstash-6.1.4** (注意版本对应Elasticsearch6.1.4)

下载链接：[https://www.elastic.co/fr/downloads/logstash][https_www.elastic.co_fr_downloads_logstash] 在 past releases.找到logstash-6.1.4.zip 解压  
![这里写图片描述][70 18]  
进入bin目录中创建：一个bin文件夹(本例子为bin,命名随意)，jdbc.sql，logstash.conf文件  
![这里写图片描述][70 19]

*  bin 文件夹放数据库连接包：[https://pan.baidu.com/s/1eBLmgQDmyfB7fCkL97zz1A][https_pan.baidu.com_s_1eBLmgQDmyfB7fCkL97zz1A] 密码：f12b  
    ![这里写图片描述][70 20]
 *  jdbc.sql 文件放入下面sql语句：

SELECT id,birthday,sex,address from user

*  logstash.conf

input {
        stdin {
        
        }
        jdbc {
           # mysql 数据库链接,mybatis为数据库名
          jdbc_connection_string => "jdbc:mysql://127.0.0.1:3306/mybatis"
          # 用户名和密码
          jdbc_user => "root"
          jdbc_password => "123456"
          # 驱动 修改为mysql连接包位置
          jdbc_driver_library => "D:/chromeDownload/elasticsearch-6.1.4-log-mysql/logstash-6.1.4/bin/bin/mysql-connector-java-5.1.7-bin.jar"
          # 驱动类名
          jdbc_driver_class => "com.mysql.jdbc.Driver"
          jdbc_paging_enabled => "true"
          jdbc_page_size => "50000"
          # 执行的sql 文件路径+名称 
          statement_filepath => "jdbc.sql"
          # 设置监听间隔  各字段含义（由左至右）分、时、天、月、年，全部为*默认含义为每分钟都更新
          schedule => "* * * * *"
        }
    }
    output {
        elasticsearch {
            # ES的IP地址及端口
            hosts => ["localhost:9200"]
            # 索引名称 可自定义
            index => "test"
            # 需要关联的数据库中有有一个id字段，对应类型中的id
            document_id => "%{id}"
            document_type => "test"
        }
        stdout {
            # JSON格式输出
            codec => json_lines
        }
    }

— \[logstash.conf更多配置详情\]：[https://yq.aliyun.com/articles/152043][https_yq.aliyun.com_articles_152043]

*  mysql数据库中user的信息：

DROP TABLE IF EXISTS `user`;
    CREATE TABLE `user` (
      `id` int(11) NOT NULL AUTO_INCREMENT,
      `username` varchar(32) NOT NULL COMMENT '用户名称',
      `birthday` date DEFAULT NULL COMMENT '生日',
      `sex` char(1) DEFAULT NULL COMMENT '性别',
      `address` varchar(256) DEFAULT NULL COMMENT '地址',
      PRIMARY KEY (`id`)
    ) ENGINE=InnoDB AUTO_INCREMENT=33 DEFAULT CHARSET=utf8;
    
    INSERT INTO `user` VALUES ('1', '王五', '2018-08-28', '2', '上海');
    INSERT INTO `user` VALUES ('10', '张三', '2014-07-10', '1', '北京市');
    INSERT INTO `user` VALUES ('16', '张小明', '2018-08-16', '1', '河南郑州');
    INSERT INTO `user` VALUES ('22', '陈小明', '2018-08-17', '1', '河南郑州');
    INSERT INTO `user` VALUES ('24', '张三丰', '2018-08-26', '1', '河南郑州');
    INSERT INTO `user` VALUES ('25', '陈小明', '2018-08-14', '1', '河南郑州');
    INSERT INTO `user` VALUES ('26', '王五', '2018-08-28', '1', '北京');
    INSERT INTO `user` VALUES ('30', '马小跳', '2018-08-28', '1', '西安');

> **第五步.启动程序**

1.  **启动elasticsearch-6.1.4**  
    ![这里写图片描述][70 21]
2.  **启动elasticsearch-head-master**

elasticsearch-head-master 目录下输入  npm run start  或者  npm start

![这里写图片描述][70 22]

3.**接下来：**  
![这里写图片描述][70 23]

输入  logstash -f logstash.conf   (logstash.conf  文件创建的路径+文件名)

![这里写图片描述][70 24]

显示出下列信息的话,成功！！

![这里写图片描述][70 25]

浏览器中再次输入：[http://localhost:9100][http_localhost_9100]  
![这里写图片描述][70 26]  
显示出数据  
![这里写图片描述][70 27]

Elasticsearch + head + mysql同步数据到这里就结束了！至于怎么结合到项目中做\*\*“全文搜索这种功能”\*\*，继续探索吧！  
留言区等你！

linux安装es:[https://blog.csdn.net/hljkdwh/article/details/85386935][https_blog.csdn.net_hljkdwh_article_details_85386935]

[70]: /images/20220515/e8de324fe9b74f9da78b53d3126614fd.png
[70 1]: /images/20220515/2f2696c1055848a5bcc2070f88df4590.png
[https_www.elastic.co_downloads_elasticsearch]: https://www.elastic.co/downloads/elasticsearch
[70 2]: /images/20220515/1c9b53e040954426812f664c9c282bdf.png
[70 3]: /images/20220515/f14189e061cc4bc9b79a8acbe5ca6adc.png
[http_127.0.0.1_9200]: http://127.0.0.1:9200
[70 4]: /images/20220515/16d11f1408d841eab82862204e227a61.png
[70 5]: /images/20220515/7ba29b09e07e40108f222ddd90a55e70.png
[https_nodejs.org_dist_v4.4.3_node-v4.4.3-x86.msi]: https://nodejs.org/dist/v4.4.3/node-v4.4.3-x86.msi
[https_nodejs.org_dist_v4.4.3_node-v4.4.3-x64.msi]: https://nodejs.org/dist/v4.4.3/node-v4.4.3-x64.msi
[https_www.runoob.com_nodejs_nodejs-install-setup.html]: https://www.runoob.com/nodejs/nodejs-install-setup.html
[70 6]: /images/20220515/6141745d6d4d4c1882d2f952560a6d28.png
[70 7]: /images/20220515/452d1df833114aef9f0b9db6fcd62a53.png
[70 8]: /images/20220515/13d9dc1cef9348efb41ec989b555bc00.png
[70 9]: /images/20220515/e821c60126aa407583cbbc75427c6677.png
[70 10]: /images/20220515/07108f19599b4909a6ee336a31fec0fe.png
[70 11]: /images/20220515/13b867b34086430ca8052ec2730750c8.png
[70 12]: /images/20220515/5346d73662bf470185519d30c4468802.png
[70 13]: /images/20220515/4fd0c88b48974f579897869330110b6c.png
[70 14]: /images/20220515/1159f7d773a24c22bd0d703ea1dcff63.png
[70 15]: /images/20220515/589cb0de44104b0fb0b37b2a9a87dae1.png
[70 16]: /images/20220515/fccad840a64049ea851be309e72e1951.png
[http_localhost_9100]: http://localhost:9100
[70 17]: /images/20220515/240be2e97d464b1c8d69912be60676a9.png
[https_www.elastic.co_fr_downloads_logstash]: https://www.elastic.co/fr/downloads/logstash
[70 18]: /images/20220515/c0d5f63fec654d40a7c358c14290b53a.png
[70 19]: /images/20220515/7a3f3e7a4d014068bffccf207441283e.png
[https_pan.baidu.com_s_1eBLmgQDmyfB7fCkL97zz1A]: https://pan.baidu.com/s/1eBLmgQDmyfB7fCkL97zz1A
[70 20]: /images/20220515/98431af87bf74ad4b480e3e0ff7bb716.png
[https_yq.aliyun.com_articles_152043]: https://yq.aliyun.com/articles/152043
[70 21]: /images/20220515/ad526f648d4d4ec38cc4e8294ddff1c2.png
[70 22]: /images/20220515/3bbad4b0570f4825867f5e92da381f71.png
[70 23]: /images/20220515/56f17a92ce8344c9946d5f92714977e0.png
[70 24]: /images/20220515/45deba7bcc35440a9158944d77f04139.png
[70 25]: /images/20220515/a3686149c68e47df8b18fdd316c8d45b.png
[70 26]: /images/20220515/c35462beba134be4ae205d330dfa6d5b.png
[70 27]: /images/20220515/c6452688a51a4e78b9c47e696ef10547.png
[https_blog.csdn.net_hljkdwh_article_details_85386935]: https://blog.csdn.net/hljkdwh/article/details/85386935