ElasticSearch 实时搜索引擎

在这里插入图片描述

Elasticsearch简介

Elasticsearch（简称ES）是一个基于Apache Lucene™的开源搜索引擎，无论在开源还是专有领域，Lucene可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。

一、基本概念

ElasticSarch是基于Lucene的全文检索库，其本质也是存储数据，很多概念与Mysql相类似

为了更方便理解，这是ES和MySql的对比关系：

索引(index)---------Databases数据库
类型（type）----------Table 数据表
文档（Document）----------------Row 行
字段（Field）-------------------Columns 列 

详细说明：

索引库（index）：

Elastic 会索引所有字段，经过处理后写入一个反向索引（Inverted Index）。查找数据的时候，直接查找该索引。

所以，Elastic 数据管理的顶层单位就叫做 Index（索引）。它是单个数据库的同义词。每个 Index （即数据库）的名字必须是小写。

类型（type）：

Document 可以分组，这种分组就叫做 Type，它是虚拟的逻辑分组，主要用来过滤 Document。

文档（document):

Index 里面单条的记录称为 Document（文档）。许多条 Document 构成了一个 Index。

字段（field）：

document中的属性

映射配置（mappings）：

字段的数据类型、属性、是否索引、是否存储等特性

是否索引：是否以该字段进行查询
是否存储：是否需要在搜索结果集中展示该字段

因为ElaseicSearch本身就是分布式的，所以也会有一些集群相关的概念。

• 索引集（Indices，index的复数）：逻辑上的完整索引 collection1
• 分片（shard）：数据拆分后的各个部分
• 副本（replica）：每个分片的复制

关系图：

二、使用Kibanna可视化平台来交互存储在Elasticsearch索引中的数据。

创建索引：

删除索引：

删除索引使用DELETE请求

语法

DELETE /索引库名

创建映射：

索引有了，接下来肯定是添加数据，但是，在添加数据前，必须定义映射。

什么是映射？

映射是定义文档的过程，文档包含哪些字段，这些字段是否保存，是否索引，是否分词等

只有配置清楚，Elasticsearch才会帮我们进行索引库的创建（不一定）

创建映射字段

请求方式依然是PUT

语法

PUT /索引库名/_mapping/类型名称
{
“properties”: {
“字段名”: {
“type”: “类型”,
“index”: true，
“store”: true，
“analyzer”: “分词器”
}
}
}

• 类型名称：就是前面将的type的概念，类似于数据库中的不同表
  字段名：任意填写 ，可以指定许多属性，例如：
• type：类型，可以是text、long、short、date、integer、object等
• index：是否索引，默认为true
• store：是否存储，默认为false
• analyzer：分词器，这里使用ik分词器

示例

发起请求：

PUT jaychan/_mapping/goods
{
“properties”: {
“title”: {
“type”: “text”,
“analyzer”: “ik_max_word”
},
“images”: {
“type”: “keyword”,
“index”: “false”
},
“price”: {
“type”: “float”
}
}
}

响应结果：

{
“acknowledged”: true
}

字段type属性详解

Elasticsearch中支持的数据类型非常丰富：

简单来说，可以分成三种

• String类型，又分两种：

  • text：可分词，不可参与聚合
  • keyword：不可分词，数据会作为完整字段进行匹配，可以参与聚合

• Numerical：数值类型，分两类

  • 基本数据类型：long、interger、short、byte、double、float、half_float
  • 浮点数的高精度类型：scaled_float
    • 需要指定一个精度因子，比如10或100。elasticsearch会把真实值乘以这个因子后存储，取出时再还原。

• Date：日期类型

  elasticsearch可以对日期格式化为字符串存储，但是建议存储为毫秒值，存储为long，节省空间。

index属性详解

index影响字段的索引情况。

• true：字段会被索引，则可以用来进行搜索。默认值就是true
• false：字段不会被索引，不能用来搜索

index的默认值就是true，也就是说你不进行任何配置，所有字段都会被索引。

store属性详解

是否将数据进行额外存储。

在学习lucene和solr时，我们知道如果一个字段的store设置为false，那么在文档列表中就不会有这个字段的值，用户的搜索结果中不会显示出来。

但是在Elasticsearch中，即便store设置为false，也可以搜索到结果。

原因是Elasticsearch在创建文档索引时，会将文档中的原始数据备份，保存到一个叫做_source的属性中。而且我们可以通过过滤_source来选择哪些要显示，哪些不显示。

而如果设置store为true，就会在_source以外额外存储一份数据，多余，因此一般我们都会将store设置为false，事实上，store的默认值就是false。

三、新增数据

创建好索引和映射后，接下来要做的自然是添加数据。

使用POST请求，向一个已经存在的索引库中添加数据。

语法：

POST /索引库名/类型名
{
    "key":"value"
}

示例：

POST /jaychan/goods/
{
    "title":"小米手机",
    "images":"http://www.abc.com/12479122.jpg",
    "price":2699.00
}

响应：

{
  "_index": "jaychan",
  "_type": "goods",
  "_id": "r9c1KGMBIhaxtY5rlRKv",
  "_version": 1,
  "result": "created",
  "_shards": {
    "total": 3,
    "successful": 1,
    "failed": 0
  },
  "_seq_no": 0,
  "_primary_term": 2
}

通过kibana查看数据：

get _search
{
    "query":{
        "match_all":{}
    }
}

响应：

{
  "_index": "jaychan",
  "_type": "goods",
  "_id": "r9c1KGMBIhaxtY5rlRKv",
  "_version": 1,
  "_score": 1,
  "_source": {
    "title": "小米手机",
    "images": "http://www.abc.com/12479122.jpg",
    "price": 2699
  }
}

可以看到，这里的id是随机生成的，如果我们想自己新增的时候指定id，可以这么做：

POST /jaychan/goods/2
{
    "title":"大米手机",
    "images":"http://image.leyou.com/12479122.jpg",
    "price":2899.00
}

这样id便手动设置成2了

四、智能判断

ElasticSearch非常智能，可以不需要给索引库设置任何mapping映射，它可以根据你输入的数据来判断数据类型，自动添加数据映射。

直接看demo

POST /jaychan/goods/3
{
    "title":"超米手机",
    "images":"http://www.abc.com/12479122.jpg",
    "price":2899.00,
    "stock": 200,
    "saleable":true
}

可以看到，我们额外添加了stock库存和saleable是否上架两个字段。
看响应结果

{
  "_index": "jaychan",
  "_type": "goods",
  "_id": "3",
  "_version": 1,
  "_score": 1,
  "_source": {
    "title": "超米手机",
    "images": "http://www.abc.com/12479122.jpg",
    "price": 2899,
    "stock": 200,
    "saleable": true
  }
}

查看在索引库下的映射关系

{
  "heima": {
    "mappings": {
      "goods": {
        "properties": {
          "images": {
            "type": "keyword",
            "index": false
          },
          "price": {
            "type": "float"
          },
          "saleable": {
            "type": "boolean"
          },
          "stock": {
            "type": "long"
          },
          "title": {
            "type": "text",
            "analyzer": "ik_max_word"
          }
        }
      }
    }
  }
}

可以看到 stock和saleable都被成功映射了。

2.8.删除数据
删除使用DELETE请求，同样，需要根据id进行删除：

语法

DELETE /索引库名/类型名/id值