说明：本人是在Linux下搭建的单机Spark环境，也是在Linux下使用Idea14.02进行代码编辑

1. 打开IDEA，在欢迎界面从右下角的Configure -> Plugins进入，安装Scala插件

2.从左下角的Install JetBrains plugin进入，再在搜索输入框中输入 scala，由于我已经装好scala插件了，所以右侧出现的是Uninstall plugin ;若没有装好scala插件，应该会出现 Install plugin按钮，点击安装，装好后会要求重启IDEA.

3.配置默认JDK，如下图

进入后会看到 No SDK

点击New

找到你的Java JDK所在目录

4.新建项目

5.选择Scala 和 SBT。其实我后面并没有对SBT的配置文件进行编辑，之前编辑过sbt的配置文件，但是由于网络原因，部分包一直下载不下来，所以干脆不用sbt了，我只是为了让它自动生成一些目录而已。

6.在如图所示的scala目录中新建scala object文件

输入相应的测试代码：

7.打包相关的配置

找到spark安装目录下的lib目录，也可以从其它机器上将需要的jar拷贝过来：

点

击Main Class后面的按钮，选择main函数

下图中右侧蓝色的包可以删掉，只留最后的  'sparktest' compile output那一项即可，否则打好的包会比较大，我之前只写了几行代码，但是把scala和spark相关的包都包含进去了，所以一个包有100多M。

8.开始打包

打包好后，应该就能看到对应的ja包了

9.进行测试：

  1. bin/spark-submit --master spark://macor:7077 --class getSum /root/IdeaProjects/SParkTest/out/artifacts/sparktest_jar/sparktest.jar

执行正确：

Idea 编写 Spark 示例代码并打包成Jar的更多相关文章

  1. 手把手教你如何把java代码，打包成jar文件以及转换为exe可执行文件

    1.背景: 学习java时,教材中关于如题问题,只有一小节说明,而且要自己写麻烦的配置文件,最终结果却只能转换为jar文件.实在是心有不爽.此篇博客教你如何方便快捷地把java代码,打包成jar文件以 ...

  2. java代码打包成jar以及转换为exe

    教你如何把java代码打包成jar文件以及转换为exe可执行文件 1.背景: 学习java时,教材中关于如题问题,只有一小节说明,而且要自己写麻烦的配置文件,最终结果却只能转换为jar文件.实在是心有 ...

  3. pyinstaller将python编写的打卡程序打包成exe

    编写了一个简易的定时提醒下班打卡程序,python代码如下: #coding:utf-8 import time import datetime from tkMessageBox import * ...

  4. 【Android端】代码打包成jar包/aar形式

    Android端代码打包成jar包和aar形式: 首先,jar包的形式和aar形式有什么区别? 1.打包之后生成的文件地址: *.jar:库/build/intermediates/bundles/d ...

  5. 将Java代码打包成jar文件转换为.exe可执行程序方法

    ​ 做完学生管理系统后我想将代码打包成一个可执行程序,那样就可以直接点击在Windows下运行了,下面就跟大家分享下打包方法. 将Java的代码转换成 .exe 文件需要先把代码打包成 jar 文件然 ...

  6. [JAR包] android引入JAR包，打包成JAR包，打包成Library项目，导入Library项目

    (1)项目导入JAR包:1.在项目目录里建立一个libs目录,将外部jar包拷贝在里面.2.右键点击项目,Bulid Path->Configure Build Path3.在设置Libraie ...

  7. 转载：java程序打包成jar 配置文件信息路径

    一个普通的java project,里面引用了config.properties配置文件,将项目打成Runnable jar,然后将config.properties放到打包后的jar路径下,执行该j ...

  8. java程序打包成jar 配置文件信息路径

    一个普通的java project,里面引用了config.properties配置文件,将项目打成Runnable jar,然后将config.properties放到打包后的jar路径下,执行该j ...

  9. [Java] Java 打包成jar包 和 解压jar包

    解压jar包 jar xf xxx.jar 打包成jar包 方法一:通过jar命令 jar命令的用法: 下面是jar命令的帮助说明: 用法:jar {ctxui}[vfm0Me] [jar-file] ...

随机推荐

  1. str 转 md5

    @interface NSString (MD5) + (NSString *)md5To32bit:(NSString *)str; @end @implementation NSString (M ...

  2. mvc输出json时报HTTP Status 406错误

    1.mvc输出json时报HTTP Status 406错误 错误纠结了2天时间,今天总与整对了,少jackson-databind引用 对于Spring 4.1.x 和以上, jackson-dat ...

  3. thymeleaf学习笔记：总结

    Thymeleaf定义:Thymeleaf is a modern server-side Java template engine for both web and standalone envir ...

  4. 8. American Friendship 美国式的友谊

    8. American Friendship 美国式的友谊 (1) Americans usually consider themselves a friendly people.Their frie ...

  5. Unity、C#读取XML

    有如下XML文件: <?xml version="1.0" encoding="UTF-8"?> <DataNode> <prov ...

  6. JQuery续

    一.表单属性选择器 :enabled :disabled :checked :selected <body> <form> <input type="check ...

  7. 让用户输入一个日期字符串，将其转换成日期格式， 格式是（yyyy/MM/dd,yyyyMMdd,yyyy-MM-dd）中的一种， 任何一种转换成功都可以； 如果所有的都无法转换，输出日期格式非法。

    第三种方法 while(true) {             Date d;        System.out.println("正在进行第一次匹配,请稍后~—~");     ...

  8. java基础-三元运算符

    1.三元运算符的格式 /* 三元运算符 (条件表达式)?表达式1:表达式2; 如果条件为true,整个表达式结果是表达式1: 如果条件为false,整个表达式结果是表达式2: 注意:三元运算符不能单独 ...

  9. 完善版封装canvas分享组件

    import regeneratorRuntime from "../../../lib/regenerator-runtime/runtime"; let ctx = false ...

  10. 从零开始的程序逆向之路基础篇 第二章——用OllyDbg(OD)分析一个简单的软件

    作者:Crazyman_Army 原文来自:https://bbs.ichunqiu.com/thread-43469-1-1.html 0x00知识回顾 (由于笔者省事,没开XP虚拟机,而且没关闭A ...