spark-submit
submit jars
Maven 打包流程
- 创建project
- 修改pom文件
- clean package
pom文件中org.scala-tools这个插件决定能否用maven打包
4.0.0 com.ifeng.zgx WorldCount 1.0-SNAPSHOT 1.7 1.7 UTF-8 2.10.6 2.10 aliyunmaven http://maven.aliyun.com/nexus/content/groups/public/ org.apache.spark spark-core_2.11 2.1.2 src/main/scala net.alchim31.maven scala-maven-plugin 3.2.0 org.scala-tools maven-scala-plugin compile testCompile 2.11.8 -target:jvm-1.7 提交任务
spark-submit --master yarn--class com.testxx.jar
https://www.jianshu.com/p/ecc6eb298b8f
本文来自互联网用户投稿，文章观点仅代表作者本人，不代表本站立场，不承担相关法律责任。如若转载，请注明出处。 如若内容造成侵权/违法违规/事实不符，请点击【内容举报】进行投诉反馈！