zoukankan      html  css  js  c++  java
  • ElasticSearch入门

    1.为什么要使用全文检索

    用户访问我们的首页,一般都会直接搜索来寻找自己想要购买的商品。

    而商品的数量非常多,而且分类繁杂。如果能正确的显示出用户想要的商品,并进行合理的过滤,尽快促成交易,是搜索系统要研究的核心。

    面对这样复杂的搜索业务和数据量,使用传统数据库搜索就显得力不从心,一般我们都会使用全文检索技术。

    常见的全文检索技术有 Lucene、solr 、elasticsearch 等。

    2.理解索引结构 倒排索引

    下图是索引结构,下边黑色部分是物理结构,上边黄色部分是逻辑结构,逻辑结构也是为了更好的去描述工作原理及去

    逻辑结构部分是一个倒排索引表:

    1、将要搜索的文档内容分词,所有不重复的词组成分词列表。

    2、将搜索的文档最终以Document方式存储起来。

    3、每个词和docment都有关联。

    如下:

     

    现在,如果我们想搜索 quick brown ,我们只需要查找包含每个词条的文档:

     

    两个文档都匹配,但是第一个文档比第二个匹配度更高。如果我们使用仅计算匹配词条数量的简单 相似性算法 ,那么,我们可以说,对于我们查询的相关性来讲,第一个文档比第二个文档更佳。

    那么什么是ElasticSearch呢?

    ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。 我们建立一个网站或应用程序,并要添加搜索功能,但是想要完成搜索工作的创建是非常困难的。我们希望搜索解决方案要运行速度快,我们希望能有一个零配置和一个完全免费的搜索模式,我们希望能够简单地使用JSON通过HTTP来索引数据,我们希望我们的搜索服务器始终可用,我们希望能够从一台开始并扩展到数百台,我们要实时搜索,我们要简单的多租户,我们希望建立一个云的解决方案。因此我们利用Elasticsearch来解决所有这些问题及可能出现的更多其它问题。

    官方网址:https://www.elastic.co/cn/products/elasticsearch

    Github:https://github.com/elastic/elasticsearch

    优点:

    (1)可以作为一个大型分布式集群(数百台服务器)技术,处理PB级数据,服务大公司;也可以运行在单机上

    (2)将全文检索、数据分析以及分布式技术,合并在了一起,才形成了独一无二的ES;

    (3)开箱即用的,部署简单

    (4)全文检索,同义词处理,相关度排名,复杂数据分析,海量数据的近实时处理

    下表是Elasticsearch与MySQL数据库逻辑结构概念的对比

    Elasticsearch关系型数据库Mysql
    索引(index) 数据库(databases)
    类型(type) 表(table)
    文档(document) 行(row)
  • 相关阅读:
    ImportError: libgthread-2.0.so.0: cannot open shared object file: No such file or directory
    pycocotools使用教程
    with torch.no_grad() 详解
    虚拟机Ubuntu上下载Pytorch显示超时
    Deep Layer Aggregation DLA网络的结构
    tgz文件解压命令
    install mysql at linux
    devops issue
    process data
    unittest
  • 原文地址:https://www.cnblogs.com/liujinqq7/p/12656771.html
Copyright © 2011-2022 走看看