面试题答案
一键面试master节点职责
- 集群管理：负责管理整个Elasticsearch集群，如创建、删除索引，跟踪集群中节点的状态变化等。
- 元数据管理：维护集群的元数据信息，包括索引的设置、映射、别名等。
data节点职责
- 数据存储：负责存储实际的文档数据，执行数据的增删改查操作。
- 数据处理：承担数据的分片和副本的存储与管理，以及搜索、聚合等运算。
ingest节点职责
- 数据预处理：在文档被索引之前，对其进行转换、丰富等预处理操作，比如解析IP地址、去除敏感信息等。
节点角色分配策略
- 高可用与稳定性：
- master节点：应部署多个，形成主节点选举池，以提高集群的高可用性。建议3 - 5个，数量为奇数，避免脑裂。同时，避免将master节点与data节点部署在同一台机器上，以确保master节点有足够资源处理集群管理任务，保证稳定性。
- data节点：根据数据量和查询负载确定数量。数据量增长快或查询密集型业务，需增加data节点数量以提高存储和处理能力。为提高数据可靠性，设置合适的副本数，每个分片至少有一个副本分布在不同data节点上。
- 性能优化：
- ingest节点：若有大量数据预处理需求，可单独部署ingest节点，避免预处理操作影响data节点性能。对于简单数据预处理，也可将ingest功能集成到client节点或data节点上。
- client节点：查询负载高时，部署client节点。它接收用户请求并将其分发到合适的data节点，分担master和data节点的请求处理压力，提高集群整体性能。
- 资源利用：
- 硬件资源：根据节点角色需求分配硬件资源。master节点需要较少磁盘空间，但需要较多CPU和内存资源处理集群管理任务；data节点需要大量磁盘空间存储数据，同时需要足够的CPU和内存进行数据处理；ingest节点主要消耗CPU资源用于数据预处理。
- 网络资源：确保节点间网络带宽足够，尤其是data节点之间，以保障数据复制和同步的效率。同时，合理规划网络拓扑，减少网络延迟对集群性能的影响。