3

基本概念

有一些概念是Elasticsearch的核心,从一开始就理解这些概念将极大地帮助简化学习过程。

接近实时(NRT)

Elasticsearch是一个近乎实时的搜索平台,这意味着从索引文档到可搜索文档的时间有一点延迟(通常是一秒)。

集群

集群是一个或多个节点(服务器)的集合,它们共同保存您的整个数据,并提供跨所有节点的联合索引和搜索功能。集群由一个唯一的名称标识,默认情况下这个名称是“elasticsearch”。这个名称很重要,因为如果节点被设置为以这个名称加入集群,那么节点才能是集群的一部分。

确保不要在不同的环境中重用相同的集群名称,否则可能会导致节点加入错误的集群。例如,你可以使用logging-devlogging-stagelogging-prod进行开发、阶段和生产集群。

节点

节点是作为群集一部分的单个服务器,存储数据并参与群集的索引和搜索功能。就像群集一样,节点由名称标识,默认情况下,该名称是在启动时分配给节点的随机通用唯一标识符(UUID)。如果不想要默认的节点名,可以定义任何想要的节点名。此名称对于管理目的非常重要,你可以在其中识别网络中哪些服务器与Elasticsearch集群中的哪些节点相对应。

节点可以被配置为通过集群名称加入特定的集群。默认情况下,每个节点都设置为加入名为elasticsearch的集群,这意味着如果你在网络上启动了许多节点并且假设它们可以相互发现 - 它们将自动形成并加入名为elasticsearch的单个集群。

在单个群集中,你可以拥有任意数量的节点。此外,如果你的网络上当前没有其他Elasticsearch节点正在运行,则默认情况下,启动单个节点将形成名为elasticsearch的新单节点集群。

索引

索引是具有某些类似特征的文档集合。例如,你可以拥有客户数据的索引,产品目录的另一个索引以及订单数据的另一个索引。索引由名称标识(必须全部小写),此名称用于在对其中的文档执行索引,搜索,更新和删除操作时引用索引。

在单个群集中,你可以根据需要定义任意数量的索引。

类型

在6.0.0中已弃用
参见删除映射类型

一种类型,曾经是索引的逻辑类别/分区,允许你在同一索引中存储不同类型的文档,例如一种类型用于用户,另一种类型用于博客帖子。不再可能在索引中创建多个类型,并且将在更高版本中删除类型的整个概念,更多信息请参见删除映射类型

文档

文档是可以被索引的基本信息单元。例如,你可以为一个客户提供一个文档,为一个产品提供另一个文档,为一个订单提供另一个文档,该文档用JSON (JavaScript对象表示法)表示,这是一种普遍存在的internet数据交换格式。

在索引/类型中,可以存储任意数量的文档,请注意,尽管文档在物理上驻留在索引中,但实际上文档必须被索引/分配到索引中的类型中。

碎片和副本

索引可能存储大量可能超过单个节点的硬件限制的数据。例如,占用1TB磁盘空间的十亿个文档的单个索引可能不适合单个节点的磁盘,或者可能太慢而无法单独从单个节点提供搜索请求。

为了解决这个问题,Elasticsearch提供了将索引细分为多个称为碎片的能力,创建索引时,只需定义所需的碎片数即可。每个碎片本身都是一个功能齐全且独立的“索引”,可以托管在集群中的任何节点上。

碎片之所以重要,主要有两个原因:

  • 它允许你水平分割/缩放你的内容量
  • 它允许你跨碎片(可能在多个节点上)分发和并行操作,从而提高性能/吞吐量

碎片的分布方式以及如何将其文档聚合回搜索请求的机制完全由Elasticsearch管理,对用户而言是透明的。

在随时都可能发生故障的网络/云环境中,这非常有用,强烈建议使用故障转移机制,以防碎片/节点以某种方式脱机或因任何原因消失。为此,Elasticsearch允许你将索引的碎片的一个或多个副本制作成所谓的副本碎片或简称副本。

复制之所以重要,主要有两个原因:

  • 它在碎片/节点发生故障时提供高可用性。因此,请务必注意,副本碎片永远不会在与从中复制的原始/主碎片相同的节点上分配。
  • 它允许你扩展搜索量/吞吐量,因为可以在所有副本上并行执行搜索。

总而言之,每个索引可以拆分为多个碎片,索引也可以复制为零(表示没有副本)或更多次。复制后,每个索引都将具有主碎片(从中复制的原始碎片)和副本碎片(主碎片的副本)。

可以在创建索引时为每个索引定义碎片和副本的数量。创建索引后,你还可以随时动态更改副本数,你可以使用_shrink_split API更改现有索引的碎片数,但这不是一项简单的任务,预先计划正确数量的碎片是最佳方法。

默认情况下,Elasticsearch中的每个索引都分配了5个主碎片和1个副本,这意味着如果群集中至少有两个节点,则索引将包含5个主碎片和另外5个副本碎片(1个完整副本),总计为每个索引10个碎片。

每个Elasticsearch碎片都是Lucene索引,单个Lucene索引中可以包含最大数量的文档。从LUCENE-5843开始,这个极限是2,147,483,519(= Integer.MAX_VALUE - 128)个文档,你可以使用_cat/shards API监视碎片大小。

有了这些,让我们开始有趣的部分……


上一篇:介绍

下一篇:安装


博弈
2.5k 声望1.5k 粉丝

态度决定一切