认识Elasticsearch的核心概念和配置文件

Elasticsearch核心概念

Near Realtime&＃xff08;近实时&＃xff09;&＃xff1a;Elasticsearch是一个近乎实时的搜索平台&＃xff0c;这意味着从索引文档到可搜索文档之间只有一个轻微的延迟(通常是一秒钟)。

Cluster&＃xff08;集群&＃xff09;&＃xff1a;群集是一个或多个节点的集合&＃xff0c;它们一起保存整个数据&＃xff0c;并提供跨所有节点的联合索引和搜索功能。每个群集都有自己的唯一群集名称&＃xff0c;节点通过名称加入群集。

Node&＃xff08;节点&＃xff09;&＃xff1a;节点是指属于集群的单个Elasticsearch实例&＃xff0c;存储数据并参与集群的索引和搜索功能。可以将节点配置为按集群名称加入特定集群&＃xff0c;默认情况下&＃xff0c;每个节点都设置为加入一个名为elasticsearch的群集。一个节点也是由一个名字来标识的&＃xff0c;默认情况下&＃xff0c;这个名字是一个随机的Universally Unique IDentifier (UUID)&＃xff0c;这个名字会在节点启动时分配给节点。

Index&＃xff08;索引&＃xff09;&＃xff1a;索引是一些具有相似特征的文档集合&＃xff0c;类似于MySql中数据库的概念。我们可以根据不同的特征来建立不同的索引&＃xff0c;由名字标识索引。

Type&＃xff08;类型&＃xff09;&＃xff1a;类型是索引的逻辑类别分区&＃xff0c;通常&＃xff0c;为具有一组公共字段的文档类型&＃xff0c;类似MySql中表的概念。注意&＃xff1a;在Elasticsearch 6.0.0及更高的版本中&＃xff0c;一个索引只能包含一个类型。

Document&＃xff08;文档&＃xff09;&＃xff1a;文档是可被索引的基本信息单位&＃xff0c;以JSON形式表示&＃xff0c;类似于MySql中行记录的概念。

Shards&＃xff08;分片&＃xff09;&＃xff1a;当索引存储大量数据时&＃xff0c;可能会超出单个节点的硬件限制&＃xff0c;为了解决这个问题&＃xff0c;Elasticsearch提供了将索引细分为分片的概念。分片机制赋予了索引水平扩容的能力、并允许跨分片分发和并行化操作&＃xff0c;从而提高性能和吞吐量。

分片作用&＃xff1a;

1、允许水平分割/扩展内容容量

2、允许在分片&＃xff08;位于多个节点上&＃xff09;之上进行分布式的、并行的操作&＃xff0c;进而提高性能/吞吐量

Replicas&＃xff08;副本&＃xff09;&＃xff1a;在可能出现故障的网络环境中&＃xff0c;需要有一个故障切换机制&＃xff0c;Elasticsearch提供了将索引的分片复制为一个或多个副本的功能&＃xff0c;副本在某些节点失效的情况下提供高可用性。

副本作用&＃xff1a;

1、在分片/节点失败的情况下&＃xff0c;复制提供了高可用性。复制分片不与原/主要分片置于同一节点上是非常重要的。

2、因为搜索可以在所有的复制上并行运行&＃xff0c;复制可以扩展你的搜索量/吞吐量

Elasticsearch的配置文件

Elasticsearch的配置文件在Elasticsearch安装目录下的config目录下

config目录是elasticsearch配置文件的存放目录主要有如下配置文件&＃xff1a;

elasticsearch.keystore
jvm.options
role_mapping.yml
users
elasticsearch.yml
log4j2.properties
roles.yml
users_roles


其中elasticsearch.yml、log4j2.properties以及jvm.options是比较重要的配置文件&＃xff0c;elasticsearch.yml是elasticsearch的基本配置文件&＃xff0c;log4j2是日志输出配置文件&＃xff0c;jvm则是jvm基本参数配置。

下面是elasticsearch.yml配置文件的解释

# &＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61; Elasticsearch Configuration &＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;
#
# NOTE: Elasticsearch comes with reasonable defaults for most settings.
# Before you set out to tweak and tune the configuration, make sure you
# understand what are you trying to accomplish and the consequences.
#
# The primary way of configuring a node is via this file. This template lists
# the most important settings you may want to configure for a production cluster.
#
# Please consult the documentation for further information on configuration options:
# https://www.elastic.co/guide/en/elasticsearch/reference/index.html
#
# ---------------------------------- 集群配置 -----------------------------------
#
# Use a descriptive name for your cluster:
#配置集群名字&＃xff0c;集群名字默认为elasticsearch&＃xff0c;
#elasticsearch会自动发现在同一网段下的elasticsearch节点。
#读者在第一次启动elasticsearch时&＃xff0c;在浏览器中输入http://localhost:9200&＃xff0c;
#在返回的数据中&＃xff0c;就有集群名字&＃xff0c;默认即为elasticsearch。
#cluster.name: my-application
#
# ------------------------------------ 节点配置 ------------------------------------
#
# Use a descriptive name for the node:
#配置节点名称
#node.name: node-1
#
# Add custom attributes to the node:
#给节点添加自定义属性
#node.attr.rack: r1
#
# ----------------------------------- 路径配置 ------------------------------------
#
# Path to directory where to store the data (separate multiple locations by comma):
#数据存放目录&＃xff0c;默认是elasticsearch下的data目录&＃xff0c;可以指定多个目录&＃xff0c;用,隔开&＃xff0c;如&＃xff1a;
#path.data:/path/data1,/path/data2
#path.data: /path/to/data
#
# Path to log files:
#日志存放目录&＃xff0c;默认为elasticsearch下的logs目录
#path.logs: /path/to/logs
#
# ----------------------------------- 内存配置 -----------------------------------
#
# Lock the memory on startup:
#配置是否锁住内存。当jvm开始swapping时&＃xff0c;elasticsearch的效率降低&＃xff0c;为了避免这种情况&＃xff0c;可以设置为true。
#bootstrap.memory_lock: true
#
# Make sure that the heap size is set to about half the memory available
# on the system and that the owner of the process is allowed to use this
# limit.
#
# Elasticsearch performs poorly when the system is swapping the memory.
#
# ---------------------------------- 网络配置 -----------------------------------
#
# Set the bind address to a specific IP (IPv4 or IPv6):
#设置绑定的ip地址
#network.host: 192.168.0.1
#
# Set a custom port for HTTP:
#配置对外提供服务的http端口号
#http.port: 9200
#
# For more information, consult the network module documentation.
#
# --------------------------------- 集群节点发现参数 ----------------------------------
#
# Pass an initial list of hosts to perform discovery when new node is started:
# The default list of hosts is ["127.0.0.1", "[::1]"]
#设置集群中master节点的初始列表&＃xff0c;通过这个配置可以发现新加入的集群的节点。
#discovery.zen.ping.unicast.hosts: ["host1", "host2"]
#
# Prevent the "split brain" by configuring the majority of nodes (total number of master-eligible nodes / 2 &＃43; 1):
#保证集群中的节点可以知道其他n个有master资格的节点&＃xff0c;防止出现split brain&＃xff0c;默认为1
#discovery.zen.minimum_master_nodes:
#
# For more information, consult the zen discovery module documentation.
#
# ---------------------------------- Gateway -----------------------------------
#
# Block initial recovery after a full cluster restart until N nodes are started:
#当n个节点启动后&＃xff0c;再开始集群的恢复
#gateway.recover_after_nodes: 3
#
# For more information, consult the gateway module documentation.
#
# ---------------------------------- Various -----------------------------------
#
# Require explicit names when deleting indices:
#
#action.destructive_requires_name: true