1.SparkForJava

下载并安装winutil插件

创建maven项目,引入相关依赖(spark,log4j)

编写javaWordCount代码,打包

java在windows运行local模式

在linux编写shell脚本,设置参数等

运行local,client,cluster三种模式

2.SparkForScala

eclipse安装scala的archetype

使用scala的archetype骨架创建maven项目

测试maven项目是否可以运行java与scala的HelloWorld项目

使用Scala编写WordCount代码

打包上传linux

编写shell脚本,设置参数,路径等

运行local,client,cluster三种模式