竞赛项目聚焦大数据技术与应用,要求选手在Spark、Flink平台下,灵活运用Spark Core、Spark SQL、Flume、Kafka、Flink等技术,解决实际问题。具体包括基于Spark的离线分析平台、基于Flink的实时分析平台的开发,数据抽取与写入Hive分区表,以及使用Scala完成电商系统的离线统计和用户操作日志处理。