1. //设置hadoop用户名
  2. System.setProperty("HADOOP_USER_NAME", "admin")
  4. //初始化SparkConf对象，设置基本任务参数
  5. val conf = new SparkConf()
  6. //设置目标Master机器地址
  7. .setMaster("local[*]")
  8. //设置任务名称
  9. .setAppName("WC")
  10. //      .setMaster("spark://hdp03:10016")
  11. .setJars(List("/Users/twx/code-space/internet/SparkSyllabusBook/chapter-3/target/chapter-3-1.0-SNAPSHOT.jar"))
  12. .setIfMissing("spark.driver.host", "172.26.1.184")
  15. /实例化SparkContext，Spark的对外接口，即负责用户与Spark内部的交互通信
  16. val sc = new SparkContext(conf)

方式二

在VM options中指定hadoop_user_name和spark.master

image.png