找不到 jar包或者 class

使用 spark-submit 提交任务的时候，如果是 client 模式，那就老老实实使用本地文件，如果是集群模式，那就把jar包放到 hdfs 上。

  1. ./spark-submit --master yarn --deploy-mode cluster --class com.cuteximi.spark.mllib.lr.LogisticRegression04  hdfs://tsl/ml/jar/spark-all-1.1.jar hdfs://tsl/ml/data/healthStatus04.txt hdfs://tsl/ml/model

image.png

当我在 client 模式下制定了 hdfs 的 jar 之后，任务执行的时候，直接跳过了，Warning: Skip remote jar hdfs://tsl/ml/jar/spark-all-1.1.jar.