面试题：Hbase中HFile物理结构常用的压缩策略有哪些及其特点

Question

在Hbase的HFile物理结构中，存在多种压缩策略，请列举出至少两种常用的压缩策略，并阐述每种策略在压缩比、压缩速度、解压缩速度以及对CPU资源占用等方面的特点。

Answer 1

• GZIP：
  • 压缩比：较高，能有效减少存储空间。
  • 压缩速度：相对较慢，因为需要更多的计算资源来实现高压缩比。
  • 解压缩速度：也较慢，同样需要较多计算资源。
  • CPU资源占用：高，在压缩和解压缩过程中都会占用大量CPU资源。
• Snappy：
  • 压缩比：中等，比GZIP低，但仍能节省一定存储空间。
  • 压缩速度：快，能快速处理数据。
  • 解压缩速度：也快，能够快速恢复数据。
  • CPU资源占用：较低，对CPU资源消耗相对较少，适合对速度要求较高的场景。
• LZO：
  • 压缩比：介于GZIP和Snappy之间，能较好平衡存储与速度。
  • 压缩速度：较快，在速度方面表现不错。
  • 解压缩速度：较快，能迅速解压数据。
  • CPU资源占用：适中，在压缩和解压缩时对CPU资源的需求处于中间水平 。