Spark伪分布模式安装部署

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是——Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。

通过本任务,您将掌握以下内容:

1、掌握Spark Standalone集群模式的安装流程。

2、准确理解Spark Standalone集群模式运行原理。

3、学会独立安装Spark Standalone集群模式。


  • 教学老师:lin
  • 任务难度:
  • 主题分类:基础学习
  • 预计学习时间:2h
展开剩余
收 起
  • 01
    Spark Standalone集群模式安装
    完成本任务之前,您需熟练掌握Linux操作系统下的常用命令。
    2h
150
学员评论(0)