「Elasticsearch」- 索引 @20210202

本文介绍了Elasticsearch中的索引概念及其如何通过分片和副本机制来提高数据存储能力和检索效率。分片机制使得索引可以跨多台服务器存储大量数据,并通过并行操作提升性能;副本则确保了数据的高可用性和容错性。

索引,是具有某些类似特征的文档集合。 例如,可以拥有客户数据索引、产品目录索引、订单数据索引。 索引由名称进行标识(必须全部小写),此名称用于引用索引,以在对其中的文档执行索引、搜索、更新、删除操作。

在单个群集中,可以根据需要定义任意数量的索引。

默认情况下,在Elasticsearch中的每一个索引都分配了5个索引分片和1个索引副本,这意味着:如果群集中至少有两个节点,则一个索引将包含5个主索引分片和另外5个副本分片(一个完整的索引副本),总计为每个索引有10个索引分片。

「分片」与「副本」

关于分片(Shard)

一个索引可以存储很多的数据,但是过多的数据会超过硬件的限制。比如,对于有1TB数据的索引,如果存储在单个节点的硬盘上,可能会空间不足,或者搜索速度很慢。

为了解决这个问题,ES提供了将一个索引分割成多个“片”的能力,这个“片”被称为「分片」。当定义「索引」时,你可以指定「分片」的数量。每个「分片」本身都是一个功能完整且独立的「索引」,它拥有「整个索引」的一部分数据,可以托管在集群中的任何节点上。

从另一个角度看,「索引」是一个逻辑上的概念,实际在存储时被分成多个「分片」。

对索引分片有两个重要的原因:

 

  • 更方便的水平扩容
  • 可以夸分片进行并行/分布操作,因此增加性能/吞吐

 

「分片」的分布和搜索结果的聚合完全由ES管理,对用户来说是透明的。

关于副本(Replica)

在网路环境中,随时都可能发生故障。强烈建议有一个故障迁移机制,在「分片」或「节点」离线/消失时发挥作用。

在ES中,允许你创建“索引的分片”的“复制”,这些“复制”称为「副本」。

副本的存在有两个重要的原因:

 

  • 在分片/节点失败时,提供高可用性。鉴于此,”副本分片“绝对不会和”它所拷贝的主分片“在同一个节点上
  • 扩展搜索量/吞吐量,因为可以在所有「副本」上并行地执行搜索

 

总而言之,每个「索引」可以拆分为多个「分片」。 「索引」也可以被复制零次或更多次。复制后,每个「索引」都将具有「主分片」(从中复制的原始分片)和「副本分片」(主分片的副本)。

在索引创建是,可以基于索引定义「分片」和「副本」数。创建后,可以随意修改「副本」数量。可以使用「_shrink」和「_split」接口更改现有「索引」的「分片」数量,但这不是一个简单的任务,最好是能够预先计划正确数量的「分片」数量。

默认情况下,会为每个「索引」分配5个「主分片」和1个「副本」,如果你有两个节点,那你的「索引」将会有五个「主分片」,五个「副本分片」(一个完整的副本),也就是说每个「索引」有十个分片。

参考文献

WikiNotes/索引
Elasticsearch Reference [6.6] » Getting Started » Basic Concepts

基于可靠性评估序贯蒙特卡洛模拟法的配电网可靠性评估研究(Matlab代码实现)内容概要:本文围绕“基于可靠性评估序贯蒙特卡洛模拟法的配电网可靠性评估研究”,介绍了利用Matlab代码实现配电网可靠性的仿真分析方法。重点采用序贯蒙特卡洛模拟法对配电网进行长时间段的状态抽样与统计,通过模拟系统元件的故障与修复过程,评估配电网的关键可靠性指标,如系统停电频率、停电持续时间、负荷点可靠性等。该方法能够有效处理复杂网络结构与设备时序特性,提升评估精度,适用于含分布式电源、电动汽车等新型负荷接入的现代配电网。文中提供了完整的Matlab实现代码与案例分析,便于复现和扩展应用。; 适合人群:具备电力系统基础知识和Matlab编程能力的高校研究生、科研人员及电力行业技术人员,尤其适合从事配电网规划、运行与可靠性分析相关工作的人员; 使用场景及目标:①掌握序贯蒙特卡洛模拟法在电力系统可靠性评估中的基本原理与实现流程;②学习如何通过Matlab构建配电网仿真模型并进行状态转移模拟;③应用于含新能源接入的复杂配电网可靠性定量评估与优化设计; 阅读建议:建议结合文中提供的Matlab代码逐段调试运行,理解状态抽样、故障判断、修复逻辑及指标统计的具体实现方式,同时可扩展至不同网络结构或加入更多不确定性因素进行深化研究。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值