该数据服务框架为大数据平台提供高效数据服务,其功能涵盖:

  • 基于Kafka实现实时数据的过滤、清洗、转换和消费
  • 利用Spark SQL实现对Redis、MongoDB等非关系型数据库的数据读写
  • 集成规则引擎,支持基于规则引擎实现客户标签、画像等功能