elasticsearch

elasticsearch是一款非常强大的开源搜索引擎，具备非常多强大功能，可以帮助我们从海量数据中快速找到需要的内容

elasticsearch结合kibana、Logstash、Beats，也就是elastic stack（ELK）。被广泛应用在日志数据分析、实时监控等领域：

elasticsearch底层是基于lucene来实现的。Lucene是一个Java语言的搜索引擎类库，是Apache公司的顶级项目，由DougCutting于1999年研发。官网地址：Apache Lucene - Welcome to Apache Lucene 。

倒排索引

• 正向索引是最传统的，根据id索引的方式。但根据词条查询时，必须先逐条获取每个文档，然后判断文档中是否包含所需要的词条，是根据文档找词条的过程。

• 而倒排索引则相反，是先找到用户要搜索的词条，根据词条得到保护词条的文档的id，然后根据id获取文档。是根据词条找文档的过程。

正向索引：

• 优点：

  • 可以给多个字段创建索引

  • 根据索引字段搜索、排序速度非常快

• 缺点：

  • 根据非索引字段，或者索引字段中的部分词条查找时，只能全表扫描。

倒排索引：

• 优点：

  • 根据词条搜索、模糊搜索时，速度非常快

• 缺点：

  • 只能给词条创建索引，而不是字段

  • 无法根据字段做排序

mysql与elasticsearch

• Mysql：擅长事务类型操作，可以确保数据的安全和一致性

• Elasticsearch：擅长海量数据的搜索、分析、计算

往往是两者结合使用：

• 对安全性要求较高的写操作，使用mysql实现

• 对查询性能要求较高的搜索需求，使用elasticsearch实现

• 两者再基于某种方式，实现数据的同步，保证一致性

索引库操作

mapping映射属性?

mapping是对索引库中文档的约束，常见的mapping属性包括：

• type：字段数据类型，常见的简单类型有：

  • 字符串：text（可分词的文本）、keyword（精确值，例如：品牌、国家、ip地址）

  • 数值：long、integer、short、byte、double、float、

  • 布尔：boolean

  • 日期：date

  • 对象：object

• index：是否创建索引，默认为true

• analyzer：使用哪种分词器

• properties：该字段的子字段

索引库的CRUD

• 创建索引库：PUT /索引库名

  PUT?/索引库名称
  {
  ??"mappings":?{
  ????"properties":?{
  ??????"字段名":{
  ????????"type":?"text",
  ????????"analyzer":?"ik_smart"
  ??????},
  ??????"字段名2":{
  ????????"type":?"keyword",
  ????????"index":?"false"
  ??????},
  ??????"字段名3":{
  ????????"properties":?{
  ??????????"子字段":?{
  ????????????"type":?"keyword"
  ??????????}
  ????????}
  ??????},
        // ...略
  ????}
  ??}
  }

• 查询索引库：GET /索引库名

  GET /索引库名

• 删除索引库：DELETE /索引库名

  PUT?/索引库名/_mapping
  {
  ??"properties":?{
  ????"新字段名":{
  ??????"type":?"integer"
  ????}
  ??}
  }

• 添加字段：PUT /索引库名/_mapping

  DELETE /索引库名

文档操作

• 创建文档：POST /{索引库名}/_doc/文档id { json文档 }

  POST?/索引库名/_doc/文档id
  {
  ????"字段1":?"值1",
  ????"字段2":?"值2",
  ????"字段3":?{
  ????????"子属性1":?"值3",
  ????????"子属性2":?"值4"
  ????},
      // ...
  }

• 查询文档：GET /{索引库名}/_doc/文档id

  GET /{索引库名称}/_doc/{id}

• 删除文档：DELETE /{索引库名}/_doc/文档id

  DELETE /zsyp/_doc/1

• 修改文档：

  • 全量修改：PUT /{索引库名}/_doc/文档id { json文档 }

    PUT?/{索引库名}/_doc/文档id
    {
    ????"字段1":?"值1",
    ????"字段2":?"值2",
        // ... 略
    }
    

  • 增量修改：POST /{索引库名}/_update/文档id { "doc": {字段}}

    POST?/{索引库名}/_update/文档id
    {
    ????"doc": {
             "字段名":?"新的值",
        }
    }