【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接

一.   搭建 elasticsearch

創(chuàng)新互聯(lián)建站總部坐落于成都市區(qū)，致力網(wǎng)站建設(shè)服務(wù)有成都網(wǎng)站建設(shè)、成都做網(wǎng)站、網(wǎng)絡(luò)營(yíng)銷策劃、網(wǎng)頁設(shè)計(jì)、網(wǎng)站維護(hù)、公眾號(hào)搭建、微信小程序開發(fā)、軟件開發(fā)等為企業(yè)提供一整套的信息化建設(shè)解決方案。創(chuàng)造真正意義上的網(wǎng)站建設(shè)，為互聯(lián)網(wǎng)品牌在互動(dòng)行銷領(lǐng)域創(chuàng)造價(jià)值而不懈努力！

1.      上傳 jdk-8u181-linux-x64.tar.gz 和 elasticsearch-6.1.4.tar.gz 文件到系統(tǒng)任意目錄，


安裝 java

解壓jdk-8u181-linux-x64.tar.gz文件

tar -zxvf jdk-8u181-linux-x64.tar.gz

編輯profile文件，添加jdk環(huán)境變量

vim /etc/profile

在最后添加

#JDK環(huán)境變量

  1. JAVA_HOME=/usr/local/jdk1.8.0_181

  2. CLASSPATH=$JAVA_HOME/lib/

  3. PATH=$PATH:$JAVA_HOME/bin

  4. export PATH JAVA_HOME CLASSPATH



引用環(huán)境變量

source /etc/profile

直接執(zhí)行java  –version 確定java已可用


解壓 elasticsearch-6.1.4.tar.gz 文件

tar –zxvf elasticsearch-6.1.4.tar.gz

編輯修改 elasticsearch 的配置文件 elasticsearch.yml

vim elasticsearch-6.1.4/config/elasticsearch.yml

主要修改以下信息（數(shù)據(jù)存放目錄以及日志存放目錄需要添加執(zhí)行權(quán)限，）



【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接


配置文件解析如下：


【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接



開啟服務(wù)（可以使用 -d 后臺(tái)啟用）

/usr/local/elasticsearch-6.1.4/bin/elasticsearch

樂維 Tips：在啟動(dòng)服務(wù)時(shí)，不能以 root 用戶開啟服務(wù)， elasticsearch 需要以其他用戶開啟服務(wù)；

1、  需要?jiǎng)?chuàng)建用戶；

添加 es 用戶

useradd es -m

設(shè)置 es 用戶密碼

passwd es

2、  需要修改elasticsearch-6.1.4目錄、數(shù)據(jù)存放目錄、日志存放目錄的所屬組和所屬用戶

  1. chown es:es /usr/local/elasticsearch-6.1.4/data

  2. chown es:es /usr/local/elasticsearch-6.1.4/logs

  3. chown es:es /usr/local/elasticsearch-6.1.4/


3 、 ERROR:bootstrap checks failed ： max file descriptors [4096] for elasticsearchprocess likely too low, increase to at least [65536]

原因：無法創(chuàng)建本地文件問題 , 用戶最大可創(chuàng)建文件數(shù)太小

解決方案：

切換到 root 用戶，編輯 limits.conf 配置文件，

添加類似如下內(nèi)容：

vi/etc/security/limits.conf

添加如下內(nèi)容：

  1. *  soft nofile 65536

  3. * hard nofile 131072

  5. * soft nproc 2048

  7. * hard nproc 4096


注： *  代表 Linux 所有用戶名稱 ( 比如 hadoop)

保存、退出、重新登錄才可生效

4 、 max virtualmemory areas vm.max_map_count [65530] likely too low, increase to at least[262144]

原因：最大虛擬內(nèi)存太小

解決方案：切換到 root 用戶下，修改配置文件 sysctl.conf

vi /etc/sysctl.conf

添加下面配置：

vm.max_map_count=655360

并執(zhí)行命令： sysctl -p


5 、 max number ofthreads [1024] for user [es] likely too low, increase to at least [2048]

原因：無法創(chuàng)建本地線程問題 , 用戶最大可創(chuàng)建線程數(shù)太小

解決方案：

切換到 root 用戶，進(jìn)入 limits.d 目錄下，修改 90-nproc.conf  配置文件。

vi /etc/security/limits.d/90-nproc.conf

修改  * soft nproc 1024  為   * soft nproc 2048


以 es 用戶啟動(dòng)服務(wù) (-d  可以后臺(tái)啟動(dòng)  )

su es

/usr/local/elasticsearch-6.1.4/bin/elasticsearch

開啟防火墻端口 9200 TCP

firewall-cmd --zone=public --add-port=9200/tcp–permanent

在 WEB 上輸入 IP ： 9200 測(cè)試是否可以正常訪問使用



【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接


二.   與 zabbix 對(duì)接


需要修改 zabbix_server 的配置文件

修改 HistoryStorageURL=http://192.168.150.10:9200



【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接


修改 zabbix.conf.php 文件

vi/usr/local/nginx/html/zabbix/conf/zabbix.conf.php

【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接



重啟 zabbix_server


同步成功后


【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接



方法 1 、 ElasticSearch Head 可以直接在谷歌瀏覽器上進(jìn)行安裝 （推薦）

直接把文件拖到擴(kuò)展程序進(jìn)行添加



【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接


方法 2 、這里介紹一個(gè)  Elasticsearch  可視化的管理插件  elasticsearch-head ，可方便的查看，刪除，管理數(shù)據(jù)

安裝 elasticsearch-head 插件需要 nodejs 的支持

1.  nodejs安裝

2.      head安裝配置

請(qǐng)參考 https://blog.csdn.net/zoubf/article/details/79007908



三.   Elasticsearch 常用命令

（由于沒有自帶的數(shù)據(jù)清理功能，需要手動(dòng)編寫腳本）

1 、 curl  命令的使用

curl -X<VERB>'< PROTOCOL>://<HOST>:< PORT>/< PATH>?<QUERY_STRING>'-d '<BODY>'VERB       HTTP 方法： GET, POST, PUT, HEAD, DELETE

PROTOCOL   http 或者 https 協(xié)議（只有在 Elasticsearch 前面有 https 代理的時(shí)候可用）

HOST       Elasticsearch 集群中的任何一個(gè)節(jié)點(diǎn)的主機(jī)名

PORT       Elasticsearch HTTP 服務(wù)所在的端口，默認(rèn)為 9200

PATH       API 路徑，資源路徑（例如 _count 將返回集群中文檔的數(shù)量）

QUERY_STRING     一些可選的查詢請(qǐng)求參數(shù)，例如 ?pretty 參數(shù)將返回易讀的 JSON 數(shù)據(jù)

BODY        一個(gè) JSON 格式的請(qǐng)求主體（如果請(qǐng)求需要的話）



具體詳細(xì)方法，請(qǐng)參考

https://www.linuxidc.com/Linux/2016-10/136548.htm



添加索引（ zabbix 為數(shù)據(jù)庫(kù)名）

curl -XPUT'http://192.168.1.20:9090/zabbix?pretty'

創(chuàng)建成功后，默認(rèn)會(huì)分配五個(gè)主分片（創(chuàng)建后不可更改，通過算法將數(shù)據(jù)存放在這五個(gè)分片中的一個(gè)，增刪改都是針對(duì)主分片的）和一個(gè)復(fù)制分片（可修改，每個(gè)主分片都對(duì)應(yīng)一個(gè)復(fù)制分片），這兩個(gè)默認(rèn)值都可以在配置文件中修改，也可以在創(chuàng)建的時(shí)候指定，如

curl -XPUT 'http://192.168.1.20:9090/zabbix?pretty'-d '{

    "settings": {

        "number_of_shards" : 2,     #2個(gè)主分片

        "number_of_replicas" : 0    #0個(gè)復(fù)制分片

    }


}'



查看索引

curl -XGET'http://192.168.1.20:9090/zabbix?pretty'

查詢方式；

例如：


查詢所有文檔 
等同于 curl-XGET ‘ http://localhost:9200/test/article/_search?pretty ’

curl -XGET  'http://localhost:9200/test/article/_search?pretty'   -d   '

{    "query": {

        "match_all": {}

    }

}'#返回

{

   # 用時(shí) 毫秒

   "took"  :  4 ,

   "timed_out"  :  false ,

   #分片信息

   "_shards"  : {

     "total"  :  5 ,

     "successful"  :  5 ,

     "failed"  : 

  },

   "hits"  : {

     #文檔數(shù)

     "total"  :  3 ,

     "max_score"  :  1.0 ,

     "hits"  : [ {

       "_index"  :  "test" ,

       "_type"  :  "article" ,

       "_id"  :  "AVf_6fM1vEkwGPLuUJqp" ,

       "_score"  :  1.0 ,

       "_source"  : {

         "id"  :  2 ,

         "subject"  :  "第二篇文章標(biāo)題" ,

         "content"  :  "第二篇文章內(nèi)容" ,

         "author"  :  "jam"

      }

    }, {

       "_index"  :  "test" ,

       "_type"  :  "article" ,

       "_id"  :  "4" ,

      "_score"  :  1.0 ,

      "_source"  : {

         "id"  :  4 ,

         "subject"  :  "第四篇文章標(biāo)題" ,

         "content"  :  "第四篇文章內(nèi)容-更新后" ,

         "author"  :  "tomi"

      }

    }, {

       "_index"  :  "test" ,

       "_type"  :  "article" ,

       "_id"  :  "3" ,

       "_score"  :  1.0 ,

       "_source"  : {

         "id"  :  3 ,

         "subject"  :  "第三篇文章標(biāo)題" ,

         "content"  :  "第三篇文章內(nèi)容" ,

         "author"  :  "jam"

      }

  } }

查詢作者是名字包含“jam” 的文檔，返回id 是2和3 的文檔

curl -XGET  'http://localhost:9200/test/article/_search?pretty'  -d  '

{

    " query ": {

        " match ": {

           " author ": " jam "

        }

    }

}'

查詢文章內(nèi)容包含“更新” 的文檔，返回id 是4 的文檔

curl -XGET  'http://localhost:9200/test/article/_search?pretty'  -d  '

{    " query ": {

        " match ": {

            " content ": " 更新 "

        }

    }

}'

查詢?nèi)克饕?/p>

curl -XGET 'http://192.168.150.10:9200/_cat/indices/?v'

刪除所有數(shù)據(jù)包括自行添加的索引

curl -XDELETE 'http://192.168.150.10:9200/*'

2、   Elasticsearch 清理數(shù)據(jù)

由于 Elasticsearch 沒有自帶的數(shù)據(jù)刪除配置，所以需要腳本進(jìn)行清理數(shù)據(jù)

1 ）刪除索引是會(huì)立即釋放空間的，不存在所謂的“標(biāo)記”邏輯。

2 ）刪除文檔的時(shí)候，是將新文檔寫入，同時(shí)將舊文檔標(biāo)記為已刪除。磁盤空間是否釋放取決于新舊文檔是否在同一個(gè)segment file里面，因此ES后臺(tái)的segment merge在 合并segment file的過程中有可能觸發(fā)舊文檔的物理刪除 。

但因?yàn)橐粋€(gè)shard可能會(huì)有上百個(gè)segment file，還是有很大幾率新舊文檔存在于不同的segment里而無法物理刪除。想要手動(dòng)釋放空間，只能是定期做一下force merge，并且將max_num_segments設(shè)置為1 。

刪除文檔  【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接

釋放空間   【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接

配置計(jì)劃任務(wù)


【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接


jdk-8u181-linux-x64.tar.gz、elasticsearch-6.1.4.tar.gz文件下載 密碼：x6I7

原文地址

教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接

http://www.lwops.cn/forum.php?mod=viewthread&tid=70

(出處: 樂維_一站式運(yùn)維監(jiān)控管理平臺(tái))

新聞標(biāo)題：【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對(duì)接
URL鏈接：http://bm7419.com/article26/pcdojg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站收錄、Google、網(wǎng)站策劃、網(wǎng)站改版、軟件開發(fā)、響應(yīng)式網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)

外貿(mào)網(wǎng)站制作