本章内容
本章首先讲解大数据开发的总体架构;然后介绍Spark的主要组件、运行时架构、集群的搭建与测试;最后讲解向Spark集群中提交应用程序的步骤以及Spark Shell命令的使用。
本章目标
• 了解大数据开发的总体架构
• 了解Spark的概念及主要构成组件
• 掌握Spark运行时架构
• 掌握Spark集群环境搭建
• 掌握Spark HA搭建
• 掌握Spark任务的提交
• 掌握Spark Shell的使用