ES 核心概念

ES中:集群,节点,索引,类型,文档,分片,映射都是什么?

ElasticSearch是面向文档的,关系型数据库和ElasticSearch客观的对比!

 

 

 

 

 

物理设计:

ElasticSearch在后台把每一个索引划分红多个分片,每片分片能够在集群中的不一样服务器之间迁移

逻辑设计:

一个索引类型中,包含多个文档,例如说文档1,文档2,当咱们索引一篇文档时,能够经过这样一个顺序找到它:

索引 -> 类型 -> 文档ID

经过这个组合咱们就能所引导某个具体的文档

注意:ID没必要是整数,实际上他是个字符串

 

文档:

以前说ElasticSearch是面向文档的,那么就意味着索引和搜索数据的最小单位是文档,ElasticSearch中,文档有几个重要属性:

• 自我包含,一篇文档同时包含字段和对应的值,也就是同时包含Key:value
• 能够是层次型的,一个文档中包含子文档,复杂的逻辑实体就是你这么来的
• 灵活的结构 ,文档不依赖预先定义的模式,咱们知道关系型数据库中,要先提早定义字段才能使用,在ElasticSearch中,对于字段是很是灵活的有时候,有时候咱们能够忽略该字段,或者动态添加一个新字段

尽管咱们能够随意的新增和忽略某个字段,可是每一个字段的类型很是重要,好比一个年龄字段类型,能够是字符串也能够是整型,由于ElasticSearch会保存字段和类型之间的映射及其余的设置,这种映射具体到每一个映射的每种类型,这也是为何在ElasticSearch中,类型有时候也称为映射类型

类型:

类型是文档的逻辑容器,就像关系型数据库同样,表格是行的容器,类型中对于字段的定义成为映射,好比name映射为字符串类型,咱们说文档是无模式的,他们不须要拥有映射中所定义的全部字段,好比新增一个字段,那么ElasticSearch是则么作的呢?

ElasticSearch会自动的将新字段加入映射,可是这个字段的不肯定他是什么类型,ElasticSearch就开始猜,若是这个值是16,那么ElasticSearch会认为它是整形,可是ElasticSearch也可能猜不对,因此最安全的方式就是提早定义好所须要的映射,这点跟关系型数据库异曲同工了,先定义好字段,而后再使用,别瞎整

索引:

索引是映射类型的容器,ElasticSearch中的索引是一个很是的强大的文档集合,索引存储了映射类型的字段和其余设置,而后他们被存储到了各个分片上,咱们来研究下分片是如何工做的

物理设计:节点和分片 如何工做

一个集群至少有一个节点,而一个节点就是一个ElasticSearch进程节点能够有多个索引默认的,若是你建立索引,那么索引会至少有5个分片(primary shard ,又称为主分片)构成的,每个主分片会有一个副本(replica shard,又称为复制分片)

 

上图是一个有3个节点的集群,能够看到主分片和对应的复制分片都不会在同一个节点内,这样有利于某个节点挂掉了,数据也不至于丢失,实际上一个分片就是一个Lucene索引,一个包含倒排索引的文件目录,倒排索引的结构使得ElasticSearch在不扫描所有文档的状况下,就能够告诉你那些文档包含特定的关键字,不过额,倒排索引是啥?

倒排索引:

ElasticSearch使用的是一种称为倒排索引的结构,采用Lucene倒排索引做为底层,这种结构适用于快速的全文检索,一个索引由文档中全部不重复的列表构成,对于每个词,都包含他的文档列表,

列如如今有两个文档,每一个文档包含以下内容

 

 

 为了建立倒排索引,咱们首先要将每一个文档拆分红独立的词(或称为词条或者tokens),而后建立一个不包含全部补充度的词条的排序列表,而后列出每一个词出如今那个文档

 

 

 如今,咱们视图搜索 to forever,只须要查看包含每一个词条的文档

 

 

 经过二维表的命中,来决定搜索的结果和权重的高低

两个文档都匹配,可是第一个文档比第二个文档的匹配程度更高,若是没有别的条件,如今这个刘昂个包含关键字的文档都将返回

在来看一个示例,好比咱们经过博客标题来搜索博客文章,那么倒排索引列表就是这样的一个是结构

 

若是要搜索含有python标签的文章,那相对于查找全部原始数据而言,查找倒排索引后的数据将会快的多,只须要查看标签这一栏,而后获取相关的文章ID便可,彻底过滤到无关的数据,来提升检索的效率

ElasticSearch的索引和Lucene的索引对比
在ElasticSearch中,索引这个词被频繁使用,这就是术语的使用,在ElasticSearch中,索引被分为多个分片,每份分片是一个Lucene的索引,因此一个ElasticSearch索引是由多个Lucene的索引组成的,这没啥好说的,由于ElasticSearch是使用,Lucene做为底层的封装,如无特指,提及索引都是指ElasticSearch的索引

做者：彼岸舞

时间：2020\09\10

内容关于：ElasticSearch

本文来源于网络，只作技术分享，一律不负任何责任