面试题：ElasticSearch集群角色中的协调节点配置优化

1. 硬件资源调整

CPU：
- 调整思路：协调节点需要处理大量的请求路由和数据聚合等任务，当集群规模扩大时，CPU 可能成为瓶颈。增加 CPU 核心数，以并行处理更多请求。
- 配置参数：无直接配置参数，根据服务器硬件进行升级，如从 4 核 CPU 升级到 8 核或更高。
内存：
- 调整思路：协调节点在处理查询时，会缓存部分数据和元数据以提高查询性能。增加内存可容纳更多缓存数据，减少磁盘 I/O。
- 配置参数：通过 ES_HEAP_SIZE 环境变量设置 Elasticsearch 堆内存大小，例如，在 elasticsearch - env 文件中设置 ES_HEAP_SIZE = 16g（根据实际情况调整，一般建议不超过物理内存的 50%，且不超过 32g）。

2. 网络配置优化

带宽：
- 调整思路：随着集群规模扩大，节点间的数据传输量增加，更高的网络带宽可避免网络拥塞，加快数据传输速度。
- 配置参数：无直接配置参数，升级网络设备和网络线路，如从千兆网络升级到万兆网络。
TCP 缓冲区：
- 调整思路：优化 TCP 缓冲区大小，可提高网络传输效率，减少数据丢失和重传。
- 配置参数：在操作系统层面调整，例如在 Linux 系统中，可通过修改 /etc/sysctl.conf 文件，增加如下配置：

net.core.rmem_max = 16777216
net.core.wmem_max = 16777216
net.ipv4.tcp_rmem = 4096 87380 16777216
net.ipv4.tcp_wmem = 4096 65536 16777216

然后执行 sysctl - p 使配置生效。

3. Elasticsearch 配置参数调整

线程池配置：
- 调整思路：协调节点使用线程池处理不同类型的任务，合理调整线程池大小可提高任务处理效率。
- 配置参数：
  - 搜索线程池：在 elasticsearch.yml 文件中，通过 thread_pool.search.size 配置搜索线程池大小，例如 thread_pool.search.size: 30（根据 CPU 核心数调整，一般为 CPU 核心数的 1 - 2 倍）。
  - 写入线程池：thread_pool.write.size 配置写入线程池大小，如 thread_pool.write.size: 20，根据写入负载调整。
分片和副本配置：
- 调整思路：合理分配分片和副本数量，可提高查询性能和数据可用性。随着集群规模扩大，适当增加分片数量可并行处理更多查询，但过多分片会增加管理开销。
- 配置参数：
  - 索引创建时设置分片数：创建索引时使用 settings.index.number_of_shards 参数，例如 PUT /my_index { "settings": { "index.number_of_shards": 5 } }（根据数据量和集群规模调整，一般经验值是每个分片不超过 30 - 50GB 数据）。
  - 副本数设置：通过 settings.index.number_of_replicas 参数设置副本数，如 PUT /my_index { "settings": { "index.number_of_replicas": 1 } }，副本数根据对数据可用性和查询性能的需求调整，一般 1 - 2 个副本。
缓存配置：
- 调整思路：协调节点的字段数据缓存和过滤器缓存可提高查询性能，适当调整缓存大小可适应集群规模扩大后的需求。
- 配置参数：
  - 字段数据缓存：通过 indices.fielddata.cache.size 配置，例如 indices.fielddata.cache.size: 40%（表示使用堆内存的 40% 作为字段数据缓存，根据实际情况调整）。
  - 过滤器缓存：indices.cache.filter.size 配置过滤器缓存大小，如 indices.cache.filter.size: 20%。

4. 负载均衡

节点角色分离：
- 调整思路：将协调节点的角色进一步细分，例如将读请求和写请求分别路由到不同的协调节点，以减轻单个协调节点的负载。
- 配置参数：通过 node.master、node.data 和 node.ingest 等参数设置节点角色，如设置专门的协调节点：node.master: false，node.data: false，node.ingest: false，node.coordinating_only: true。
外部负载均衡器：
- 调整思路：使用外部负载均衡器（如 Nginx、HAProxy 等）将客户端请求均匀分配到多个协调节点上，提高集群的整体可用性和处理能力。
- 配置参数：以 Nginx 为例，在 Nginx 配置文件中添加如下配置：

upstream elasticsearch {
    server 192.168.1.10:9200;
    server 192.168.1.11:9200;
    server 192.168.1.12:9200;
}
server {
    listen 80;
    location / {
        proxy_pass http://elasticsearch;
        proxy_set_header Host $host;
        proxy_set_header X - Real - IP $remote_addr;
        proxy_set_header X - Forwarded - For $proxy_add_x_forwarded_for;
    }
}

根据实际的协调节点 IP 和端口进行配置。

面试题：ElasticSearch集群角色中的协调节点配置优化

知识考点

面试题答案

1. 硬件资源调整

2. 网络配置优化

3. Elasticsearch 配置参数调整

4. 负载均衡