新零售大数据平台的复杂性要求对其进行全面的运维监控,以保障系统稳定高效运行。为此,基于开源Hue平台进行二次开发,扩展其功能以支持更多大数据组件的管理和监控显得尤为重要。

需要为以下组件添加监控和管理功能:

  • Hadoop: 监控集群健康状态、资源利用率和作业运行情况。
  • Hive: 监控元数据、查询执行情况和性能指标。
  • HBase: 监控集群运行状态、Region分布、读写性能。
  • ZooKeeper: 监控集群运行状态、连接情况和数据一致性。
  • Kettle: 监控作业执行情况、转换性能和出错信息。