1、ElasticSearch
ES是一个基于Lucene实现的开源、分布式、Restful的全文本搜索引擎;
此外,它还是一个分布式实时文档存储,其中每个文档的每个field均是被索引的数据,且可被搜索;
也是一个带实时分析功能的分布式搜索引擎,能够扩展至数以百计的节点实时处理PB级的效据。
2、基本组件
索引(index):文档容器,换句话说,素引是具有类似属性的文档的集合。类似于表。素引名必须使用小写字母;
类型(type):类型是索引内部的逻辑分区,其意义完全取决于用户需求。一个索引内部可定义一个或多个类型。一般来说,类型就是拥有相同的域的文档的预定义。
文档(document):文档是Lucene素引和搜索的原子单位,它包含了一个或多个域。是域的容器:基于JSON格式表示。
每个域的组成部分:一个名字,一个或多个值:拥有多个值的域,通常称为多值域;
映射(mapping):原始内容存储为文档之前需要事先进行分析,例如切词、过滤掉某些词等:映射用于定义此分析机制该如何实现;
除此之外,ES还为映射提供了诸如将域中的内容排序等功能。
3、ES的集群组件
Cluster:ES的集群标识为集群名称:默认为“elasticsearch”。节点就是靠此名字来决定加入到哪个集群中。一个节点只能属于一个集群。
Node:运行了单个ES实例的主机即为节点。用于存储数据、参与集群索引及搜索操作。节点的标识靠节点名。
Shard:将索引切割成为的物理存储组件:但每一个shard都是一个独立且完整的索引;创建索引时,ES默认将其分割为5个shard,用户也可以按需自定义,创建完成之后不可修改。
shard有两种类型:primary shard和replica。Replica用于数据冗余及查询时的负载均衡。每个主shard的副本数量可自定义,且可动态修改。
4、ES Cluster工作过程
启动时,通过多播(默认)或单播方式在9300/tcp查找同一集群中的其它节点,并与之建立通信。
集群中的所有节点会选举出一个主节点负责管理整个集群状态,以及在集群范围内决定各shards的分布方式。站在用户角度而言,每个均可接收并响应用户的各类请求。
集群有状态:green,red,yellow
5、安装ES
https://www.elastic.co/cn/elasticsearch
(1)下载
这里下载了ES1.7版本;elasticsearch-1.7.2.noarch.rpm
https://download.elastic.co/elasticsearch/elasticsearch/elasticsearch-1.7.2.noarch.rpm
这里使用环境为三台centos7,配置了ssh互信:
192.168.3.111 node1
192.168.3.112 node2
192.168.3.113 node3
(2)安装jdk1.8
#三台主机都要安装
yum -y install java-1.8.0-openjdk.x86_64
yum -y install java-1.8.0-openjdk-devel.x86_64
yum -y install java-1.8.0-openjdk-headless.x86_64
[root@node1 ~]# vim /etc/profile.d/java.sh
export JAVA_HOME=/usr
[root@node1 ~]# scp /etc/profile.d/java.sh node2:/etc/profile.d/
[root@node1 ~]# scp /etc/profile.d/java.sh node3:/etc/profile.d/
#最后都执行source
source /etc/profile.d/java.sh
(3)安装es
node1节点:
# node1 上传下载好的rpm包,可以scp到node2 node3 [root@node1 ~]# yum -y install elasticsearch-1.7.2.noarch.rpm #修改配置文件 [root@node1 ~]# vim /etc/elasticsearch/elasticsearch.yml cluster.name: myes node.name: "node1" http.port: 9200 #启动 systemctl daemon-reload systemctl enable elasticsearch.service systemctl start elasticsearch.service
node2、node3
node2与node3要执行和node1一样的步骤,不过要把配置文件中的node.name字段改为自己的主机名(node2、node3);
然后分别启动即可;
ss -ntl
(4)
ES端口:
参与集群的事务: 9300/tcp 配置字段:transport.tcp.port 接收请求: 9200/tcp 配置字段:http.port
(5)Restful API:
四类API: (1)检查集群、节点索引等健康与否,以及获取其相应状态: (2)管理集群、节点、索引及元数据: (3)执行CRUD操作: (4)执行高级操作,例如paging,filtering等: ES访问接口:9200/tcp #用curl命令访问API curl -X<VERB> '<PROTOCOL>://HOST:PORT/<PATH>?<QUERY_STRING>' -d '<BODY>' VERB: GET, PUT, DELETE... PROTOCOL: http, https QUERY_STRING: 查询参数,例如?pretty 表示用易读的json格式输出 BODY:请求的主体
查看某节点上的ES是否工作正常:
ES的cat接口命令:
查看集群状态:
* :表示master节点
m:表示可以成为master节点
还可以查看帮助:
[root@node1 ~]# curl -X GET 'http://node1:9200/_cat/node?help'
查看master: