
平臺(tái) 論壇博客文庫(kù)

› 論壇 › IT運(yùn)維 › Hadoop和大數(shù)據(jù)技術(shù) › 在maven項(xiàng)目中添加了spark-core依賴(lài)以后提示錯(cuò)誤: 找不 ...

最近訪問(wèn)板塊

查看: 59006 | 回復(fù): 2

[Spark] 在maven項(xiàng)目中添加了spark-core依賴(lài)以后提示錯(cuò)誤: 找不到或無(wú)法加載主類(lèi) [復(fù)制鏈接]

ighack

白手起家

論壇徽章:: 0

電梯直達(dá)

1樓 [收藏(0)] [報(bào)告]

發(fā)表于 2017-11-06 09:00 |只看該作者 |倒序?yàn)g覽

我在idea建的maven項(xiàng)目

public class App {
public static void main(String[] args){
System.out.println("asfasd");
}
}

復(fù)制代碼

打包成jar運(yùn)行沒(méi)有問(wèn)題
但當(dāng)我添加了spark-core依賴(lài)以后在java -jar javaspark.jar以后就提示錯(cuò)誤
錯(cuò)誤: 找不到或無(wú)法加載主類(lèi) App

<dependency>
<groupId>org.apache.spark</groupId>
<artifactId>spark-core_2.11</artifactId>
<version>2.2.0</version>
</dependency>

復(fù)制代碼

我用spark-submit 的方法提交，也提示相同的錯(cuò)誤

ighack

白手起家

論壇徽章:: 0

2樓 [報(bào)告]

發(fā)表于 2017-11-07 15:13 |只看該作者

本帖最后由 ighack 于 2017-11-07 15:29 編輯

spark的程序打包成jar以后。要把什么spark,hadoop,scala的依賴(lài)刪除掉在打包
不然會(huì) 報(bào)找不到或無(wú)法加載主類(lèi)，打包成JAR以后只能在linux的spark集群中運(yùn)行。本地不能運(yùn)行
如果要提交到y(tǒng)arn-cluster中的話，不要設(shè)置setMaster("local")，在spark-submit --master spark://tester:7077可以有setMaster("local")，這樣.foreach(println)才會(huì)顯示到終端
在IDEA里運(yùn)行時(shí)可以用setMaster("local")