Spark 源码解读

推荐先构建环境，IntelliJ 配置就绪，然后开始阅读。

深入 ZooKeeper 源码，了解其类初始化过程，包括日志环境初始化和环境变量获取。环境变量以键值对形式存储在 Environment 类中，可通过 System.getProperty 获取。

环境搭建：掌握Spark的安装与配置技巧，打造稳定高效的运行环境。 RDD原理：深入剖析弹性分布式数据集（RDD）的实现机制，了解数据存储与处理的底层逻辑。 调度机制：揭秘Spark的作业调度算法，探索如何优化资源利用率，提升计算效率。

深入探索 Redis 内部 本项目提供了 Redis 3.0 源码的注释版本，原始代码源自 https://github.com/antirez/redis 。作者在编写新版《Redis 设计与实现》的过程中，为了深入理解 Redis 的内部机制而进行了详细的注释。所有书中涉及的内容，都在源码中添加了相应的解释。注释过程中，仅对空格和空行进行了微调，最大程度地保留了原始代码的结构和风格。 注释目标 帮助开发者理解 Redis 的内部实现 提供学习 Redis 的参考资料 注释原则 保持代码原汁原味 注释清晰易懂 希望这份注释源码能够帮助大家更好地学习和理解 Redis。

《Learning Spark SQL》的配套源码，与书本内容相辅相成，帮助读者深入理解Spark SQL

提供 Spark 1.6.0 的源码，需自行编译获取可执行程序。

Apache Tez 是一个构建于 YARN 之上的开源计算框架，支持 DAG 作业。Tez 源于 MapReduce 框架，但其核心思想是将 Map 和 Reduce 操作进一步拆分为更细粒度的元操作，例如 Input、Processor、Sort、Merge 和 Output。这些元操作可以自由组合，形成新的操作，并通过控制程序组装成复杂的 DAG 作业。 Tez 的主要特点包括：- 作为 Apache 二级开源项目，其源代码已正式发布。- 运行于 YARN 之上，可有效利用集群资源。- 适用于 DAG（有向图）应用，可替代 Hive/Pig 等传统数据处理工具，类似于 Impala、Dremel 和 Drill。

Lucene 原理解析，底层源码剖析，应用场景实践，配置指南

spark源码下载：spark-master.zip。为了方便无法访问GitHub的用户下载。如果需要进一步交流，请私下联系。