首先通过WinSCP将下载的scala压缩文件上传至master用户主目录下Downloads目录下，使用命令 tar –zxvf scala2.11.12.tgz 解压scala2.11.12.tgz至用户主目录下，解压后的文件夹名为scala-2.11.12。scp -r .
前言 本章将对Spark做一个简单的介绍，更多教程请参考：Spark教程本章知识点概括Apache Spark简介Spark的四种运行模式Spark基于Standlone的运行流程Spark基于YARN的运行流程Apache Spark是什么？
Spark拥有Hadoop MapReduce所具有的优点，但不同于Hadoop MapReduce的是，Hadoop每次经过Job执行的中间结果都存储到HDFS等磁盘上，而Spark的Job中间输出结果可以保存在内存中，而不再需要读写HDFS。
据估计，到2017年底，90%的CPU cycles 将会致力于移动硬件，移动计算正在迅速上升到主导地位。Spark为此重新设计了Spark体系结构，允许Spark在移动设备上运行Spark。Spark为现代化数据中心和大数据应用进行设计和优化，但是它目前不适合移动计算。
INSERT INTO。“insert into”是向Iceberg表中插入数据，有两种语法形式:“INSERT INTO tbl VALUES ，”、“INSERT INTO tbl SELECT ...”，以上两种方式比较简单，这里不再详细记录。
作者简介：岑玉海，滴滴出行数据架构工程师，专注于于分布式存储和分布式计算。责编：仲浩（zhonghao@csdn.net）本文为《程序员》原创文章，未经允许不得转载，更多精彩文章请订阅2016年程序员：http://dingyue.programmer.com.
《大数据和人工智能交流》头条号向广大初学者新增C 、Java 、Python 、Scala、javascript 等目前流行的计算机、大数据编程语言，希望大家以后关注本头条号更多的内容。（一）Spark简介1、什么是sparkSpark是一种基于内存计算的开源框架。
市面上大多都是Scala的教程，这里专门介绍如何使用Java编写相关Spark程序。本文需要熟悉Java，Maven工具。下载开发工具IDEA进入idea官网 https://www.jetbrains.com/idea 下载社区版即可。
Apache Hadoop是一个成熟的开发框架,其连接着庞大的生态系统，并且得到了Cloudera、Hortonwork、Yahoo这些卓越机构的支持与贡献，并且为各个组织提供了许多工具来管理不同大小规则的数据。
版权声明:本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。
