Tez

Apache Tez 为大数据处理提供 DAG 作业支持，提升数据处理速度。面向开发者，优化应用程序性能与扩展性。Tez 助力 Hadoop 应对实时查询和机器学习等场景。

Apache Tez 是一个构建于 YARN 之上的开源计算框架，支持 DAG 作业。Tez 源于 MapReduce 框架，但其核心思想是将 Map 和 Reduce 操作进一步拆分为更细粒度的元操作，例如 Input、Processor、Sort、Merge 和 Output。这些元操作可以自由组合，形成新的操作，并通过控制程序组装成复杂的 DAG 作业。 Tez 的主要特点包括：- 作为 Apache 二级开源项目，其源代码已正式发布。- 运行于 YARN 之上，可有效利用集群资源。- 适用于 DAG（有向图）应用，可替代 Hive/Pig 等传统数据处理工具，类似于 Impala、Dremel 和 Drill。

CDH6.3.2版本中集成了Tez框架。

Apache Tez 是一个轻量级并行框架，它专为 Apache Hadoop 而设计，它提供了高性能、可伸缩性和低延迟。 Hive LLAP 是一种轻量级事务处理引擎，它允许您在 Hive 中快速有效地执行查询。它利用 Apache Tez 的并行处理能力，可以显著提高 Hive 查询的性能。 将 Hive LLAP 与 Apache Tez 结合使用可以帮助您提高数据仓库和分析应用程序的性能。

Tez是Apache推出的DAG计算框架，它源于MapReduce框架。核心思想是将Map和Reduce操作拆分为更小的元操作，如Map拆分为Input、Processor、Sort、Merge和Output，Reduce拆分为Input、Shuffle、Sort、Merge、Processor和Output。这些元操作可以灵活组合形成新的操作，最终组装成一个大的DAG作业。Tez的主要特点包括： （1）Apache二级开源项目 （2）运行在YARN之上 （3）适用于DAG应用，可替代Hive/Pig。

该资源包含 Hive 1.2.1 和 Tez 0.9.1 的安装包。 如需安装配置指南，请参考我的博客。 如有任何问题，请联系我以获取帮助。

该压缩包包含Tez开源项目的0.1版本源码。Tez是Apache Hadoop社区开发的数据处理框架，改进了MapReduce模型，提升了大数据处理效率。

Tez是Apache最新的支持DAG作业的开源计算框架，它可以将多个有依赖的作业转换为一个作业，从而大幅提升DAG作业的性能。Tez并不直接面向最终用户——事实上，它允许开发者为最终用户构建性能更快、扩展性更好的应用程序。Hadoop传统上是一个大量数据批处理平台，但是，许多用例需要近乎实时的查询处理性能。还有一些工作不适合MapReduce，例如机器学习。Tez的目的就是帮助Hadoop处理这些用例场景。