zoukankan      html  css  js  c++  java
  • Docker安装Elasticsearch与Kibana

    一、Elasticsearch

      Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java语言开发的,并作为Apache许可条款下的开放源码发布,是一种流行的企业级搜索引擎。Elasticsearch用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。官方客户端在Java、.NET(C#)、PHP、Python、Apache Groovy、Ruby和许多其他语言中都是可用的。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr,也是基于Lucene。

      Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便的使大量数据具有搜索、分析和探索的能力。充分利用Elasticsearch的水平伸缩性,能使数据在生产环境变得更有价值。Elasticsearch 的实现原理主要分为以下几个步骤,首先用户将数据提交到Elasticsearch 数据库中,再通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据,当用户搜索数据时候,再根据权重将结果排名,打分,再将返回结果呈现给用户。

      Elasticsearch是与名为Logstash的数据收集和日志解析引擎以及名为Kibana的分析和可视化平台一起开发的。这三个产品被设计成一个集成解决方案,称为“Elastic Stack”(以前称为“ELK stack”)。
    Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。Elasticsearch是分布式的,这意味着索引可以被分成分片,每个分片可以有0个或多个副本。每个节点托管一个或多个分片,并充当协调器将操作委托给正确的分片。再平衡和路由是自动完成的。相关数据通常存储在同一个索引中,该索引由一个或多个主分片和零个或多个复制分片组成。一旦创建了索引,就不能更改主分片的数量。

      Elasticsearch使用Lucene,并试图通过JSON和Java API提供其所有特性。它支持facetting和percolating,如果新文档与注册查询匹配,这对于通知非常有用。另一个特性称为“网关”,处理索引的长期持久性;例如,在服务器崩溃的情况下,可以从网关恢复索引。Elasticsearch支持实时GET请求,适合作为NoSQL数据存储,但缺少分布式事务。

    二、Kibana

      Kibana是一个开源的分析与可视化平台,设计出来用于和Elasticsearch一起使用的。你可以用kibana搜索、查看存放在Elasticsearch中的数据。Kibana与Elasticsearch的交互方式是各种不同的图表、表格、地图等,直观的展示数据,从而达到高级的数据分析与可视化的目的。

      Elasticsearch、Logstash和Kibana这三个技术就是我们常说的ELK技术栈,可以说这三个技术的组合是大数据领域中一个很巧妙的设计。一种很典型的MVC思想,模型持久层,视图层和控制层。Logstash担任控制层的角色,负责搜集和过滤数据。Elasticsearch担任数据持久层的角色,负责储存数据。而我们这章的主题Kibana担任视图层角色,拥有各种维度的查询和分析,并使用图形化的界面展示存放在Elasticsearch中的数据。

    三、Docker安装Elasticsearch与Kibana

    下载镜像

    docker pull elasticsearch:7.16.2

    docker pull kibana:7.16.2

    创建软件目录

    mkdir -p /opt/elasticsearch/config

    mkdir -p /opt/elasticsearch/data

    mkdir -p /opt/elasticsearch/plugins

    vim /opt/elasticsearch/config/elasticsearch.yml

    1 http.host: 0.0.0.0

    编写创建容器的脚本

    vim /opt/elasticsearch/elasticsearch.sh

    1 docker run --name elasticsearch -p 9200:9200 -p 9300:9300 \
    2 -e "discovery.type=single-node" \
    3 -e ES_JAVA_OPTS="-Xms64m -Xmx512m" \
    4 -v /opt/elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
    5 -v /opt/elasticsearch/data:/usr/share/elasticsearch/data \
    6 -v /opt/elasticsearch/plugins:/usr/share/elasticsearch/plugins \
    7 -d elasticsearch:7.16.2

    vim /opt/elasticsearch/kibana.sh

    1 docker run --name kibana -e ELASTICSEARCH_HOSTS=http://172.19.45.101:9200 -p 5601:5601 \
    2 -d kibana:7.16.2

    创建容器

    chmod -R 777 /opt/elasticsearch

    cd /opt/elasticsearch

    ./elasticsearch.sh

    ./kibana.sh

    查看安装结果

    docker ps

     浏览器访问9200与5601端口即可看到已安装成功。

  • 相关阅读:
    redo log 转csdn之ppp_10001
    Kafka的topic的partitions数的选取
    log4j:WARN No appenders could be found for logger
    HBase统计表的行数
    /bin/bash: /us/rbin/jdk1.8.0/bin/java: No such file or directory
    HBase shell命令
    Linux按名字杀死进程
    Kafka常用命令
    Plugin 'mavenassemblyplugin:' not found
    Linux搜索指定目录中所有文件的内容
  • 原文地址:https://www.cnblogs.com/guanghe/p/15766827.html
Copyright © 2011-2022 走看看