使用IntelliJ IDEA编写Scala在Spark中运行

使用IntelliJ IDEA编写Scala在Spark中运行使用Scala写一个测试代码：object Test {
def main（args: Array[String]）: Unit = {
println（"hello world"）
}
}就把这个Test视为类，项目组织结构如：然后设置编译选项：然后在项目文件夹下面可以找到编译好的Jar包：复制到Spark指定的目录下（自己建的）：启动Spark，然后提交任务：spark-submit --class Test --master spark://localhost:7077 /home/data/myjar/Hello.jar从上面控制台中已经能够看到执行的输出信息，同样，我们也可在web管理器中查看任务信息：接下来的事情就只剩下编写Scala程序实现自己的算法了。Scala编程完整中文版 PDF http://www.linuxidc.com/Linux/2015-08/121033.htm快学Scala （中文完整扫描版） PDF http://www.linuxidc.com/Linux/2015-08/120950.htmUbuntu 安装 2.10.x版本的Scala http://www.linuxidc.com/Linux/2015-04/116455.htmSpark1.0.0部署指南 http://www.linuxidc.com/Linux/2014-07/104304.htmCentOS 6.2（64位）下安装Spark0.8.0详细记录 http://www.linuxidc.com/Linux/2014-06/102583.htmSpark简介及其在Ubuntu下的安装使用 http://www.linuxidc.com/Linux/2013-08/88606.htm安装Spark集群（在CentOS上） http://www.linuxidc.com/Linux/2013-08/88599.htmHadoop vs Spark性能对比 http://www.linuxidc.com/Linux/2013-08/88597.htmSpark安装与学习 http://www.linuxidc.com/Linux/2013-08/88596.htmSpark 并行计算模型 http://www.linuxidc.com/Linux/2012-12/76490.htmScala 的详细介绍：请点这里
Scala 的下载地址：请点这里本文永久更新链接地址：http://www.linuxidc.com/Linux/2015-08/122283.htm