面试题：Hbase集群中常用端口及其作用

Question

请详细阐述Hbase集群中几个常用端口（如2181、16000、16020等）各自承担的功能是什么，以及它们在集群运行时如何相互协作？

Answer 1

HBase集群常用端口及功能

1. 2181端口
   • 功能：该端口是Zookeeper所使用的客户端端口。Zookeeper在HBase集群中扮演着至关重要的角色，它用于管理HBase集群的元数据信息，比如记录HBase表的Region分布情况。同时，Zookeeper还负责监控HBase RegionServer的状态，通过心跳机制确定每个RegionServer是否存活。另外，Zookeeper协助选举HMaster，保证HBase集群在主节点故障时能够快速恢复正常运行。
2. 16000端口
   • 功能：此端口是HMaster的Web UI端口。HMaster主要负责管理RegionServer，包括分配Region到各个RegionServer，处理RegionServer的上线与下线操作。通过16000端口，管理员可以在浏览器中访问HMaster的Web界面，查看HBase集群的整体状态，如集群负载、RegionServer数量、表的状态等信息，方便对集群进行监控与管理。
3. 16020端口
   • 功能：16020端口是RegionServer的Web UI端口。RegionServer负责实际存储和处理HBase的数据，它管理着多个Region，每个Region包含了表中一部分连续的数据。通过16020端口，管理员可以查看单个RegionServer的详细状态，如该RegionServer所承载的Region数量、内存使用情况、读写请求的性能指标等，有助于定位和排查单个RegionServer的性能问题。

它们在集群运行时的协作方式

1. 启动阶段
   • 首先Zookeeper在2181端口启动并初始化，创建用于HBase集群管理的节点结构。
   • 接着HMaster启动，它连接到Zookeeper，在Zookeeper中注册自己，并获取集群的元数据信息，同时监听RegionServer在Zookeeper中的注册节点。
   • RegionServer启动后，会在Zookeeper中注册自己，并向HMaster汇报自己的状态，HMaster通过这些信息来进行Region的分配。
2. 运行阶段
   • 客户端请求数据时，首先会访问Zookeeper获取HBase表的元数据信息，了解Region的分布情况，从而确定要访问的RegionServer。
   • 客户端根据从Zookeeper获取的信息，直接与对应的RegionServer进行数据读写操作。在此过程中，HMaster不参与具体的数据读写，而是专注于集群的管理，如负载均衡（当某个RegionServer负载过高时，HMaster会将部分Region迁移到其他RegionServer）。
   • RegionServer通过16020端口向管理员展示自身运行状态，HMaster通过16000端口展示集群整体状态，管理员可通过这些Web UI来监控集群，Zookeeper则一直维护集群的元数据及各节点状态信息，确保整个集群的稳定运行与故障恢复。