本章内容

本章首先讲解大数据开发的总体架构；然后介绍Spark的主要组件、运行时架构、集群的搭建与测试；最后讲解向Spark集群中提交应用程序的步骤以及Spark Shell命令的使用。

本章目标

● 了解大数据开发的总体架构

● 了解Spark的概念及主要构成组件

● 掌握Spark运行时架构

● 掌握Spark集群环境搭建

● 掌握Spark HA搭建

● 掌握Spark任务的提交

● 掌握Spark Shell的使用 6Fu0AJ62UTTWHyaYESNbPF6ffy1xP8aGlhqqpLdX3LhwoaEVQKbJRwAp/BEypxGp