打包 ：右击、export、Java 、jar File

把TestSpark.jar包上传到spark集群服务器的 spark_home下的myApp下：

提交spark任务：



  1. cd /usr/local/spark/spark-2.1.1-bin-hadoop2.7
    2. 

  2. bin/spark-submit --class "ClusterWordCount" --master local[4] myApp/TestSpark.jar​


												


											
本地开发spark代码上传spark集群服务并运行的更多相关文章
	

    
								
  1. IDEA里如何多种方式打jar包，然后上传到集群
		
    关于IDEA里如何多种方式打jar包,然后上传到集群的问题? 前期准备,就是在,IDEA里,maven来创建项目.这里不多赘述. 1)用maven项目来打包,我推荐这个. (强烈推荐,简单又快速) S ...
    
		
    2. 
						
  2. github将本地仓库的代码上传到Github
		
    本篇主要参考博文:https://blog.csdn.net/IT_faquir/article/details/52516214 你要先完成上一篇的操作,即将代码上传到本地仓库中,才能上传到gith ...
    
		
    3. 
						
  3. 将本地项目或代码上传到别人GitHub（码云）的远程分支上
		
    今天碰到了这样一个问题,折腾了半天,就是将自己本地代码上传到人家的远程分支上. 首先要做的就是先将人家的项目克隆到本地:git clone + 项目地址 然后进入项目目录:cd + 已克隆好的项目目录 ...
    
		
    4. 
						
  4. 【django】本地开发media用户上传文件访问路径找不到
		
    当我们在本地开发的时候,会碰到static可以访问,但是用户上传的文件设置在media下不可访问怎么办?settings配置: 接着在你的urls文件添加: from . import setting ...
    
		
    5. 
						
  5. 使用Git将本地项目或代码上传到GitHub上
		
    1.要托管到github,那你就应该要有一个属于你自己的github帐号,所以你应该先到github.com注册.打开浏览器在地址栏输入地址:github.com 填写用户名.邮箱.密码,点击Sign ...
    
		
    6. 
						
  6. OpenGL1-创建窗口（建立Win32的OpenGL开发环境 )(代码上传)
		
    视频教程请关注 http://edu.csdn.net/lecturer/lecturer_detail?lecturer_id=440 代码下载 #pragma once #include < ...
    
		
    7. 
						
  7. Devops 开发运维高级篇之微服务代码上传和代码检查
		
    Devops 开发运维高级篇之微服务代码上传和代码检查 微服务持续集成(1)-项目代码上传到Gitlab 微服务持续集成(2)-从Gitlab拉取项目源码 微服务持续集成(3)-提交到SonarQub ...
    
		
    8. 
						
  8. 实战CentOS系统部署Hadoop集群服务
		
    导读 Hadoop是一个由Apache基金会所开发的分布式系统基础架构,Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS.HDFS有高 ...
    
		
    9. 
						
  9. 将本地开发完的SDK代码上传到SVN上面：an error occurred while contacting the repository  The server may be unreachable or the URL may be incorrect
		
    将本地开发完的SDK代码上传到SVN上面:an error occurred while contacting the repository  The server may be unreachabl ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. __new__() 与__init__()的区别
			
    __new__作用于__init__之前.前者可以决定是否调用后者,或者说可以决定调用那个类的__init__方法. 首先要知道在面向对象编程中,实例化基本遵循创建实例对象,初始化实例对象,最后返回实 ...
    
			
    2. 
						
  2. Day14作业及默写
			
    1.整理今天所学内容,整理知识点,整理博客. pass 2.画好流程图. pass 3.都完成的做一下作业(下面题都是用内置函数或者和匿名函数结合做出): pass 4.用map来处理字符串列表,把列 ...
    
			
    3. 
						
  3. Python 带有参数的装饰器
			
    def wrapper_out(flag): # 装饰器本身的参数 def wrapper(fn): # 目标函数 def inner(*args, **kwargs): # 目标函数执行需要的参数  ...
    
			
    4. 
						
  4. Linux并发执行很简单，这么干就对了
			
    嗯,就像标题说的那么简单而已 &的并发功能 time for i in `grep server /etc/hosts | awk '{print $1}'`; do (ssh $i &quo ...
    
			
    5. 
						
  5. Ubuntu16.04 执行sudo apt-get update出现E: Sub-process returned an error code错误
			
    Reading package lists... Done E: Problem executing scripts APT::Update::Post-Invoke-Success 'if /usr ...
    
			
    6. 
						
  6. python的time模块
			
    #encoding=utf-8 import time # 返回时间戳 print time.time() # 延迟运行单位为s,如下为延迟3s time.sleep(3) # 转换时间戳为时间元组( ...
    
			
    7. 
						
  7. npm http-server ubuntu
			
    Node.js中http-server的使用 使用阿里的npm镜像 国外的npm太慢了.查看一下自己使用的源: npm config get registry 1 应该显示https://regist ...
    
			
    8. 
						
  8. Android驱动中的remap_pfn_range()校验漏洞（CVE-2013-2596）
			
    简单介绍 当然类似函数还有io_remap_pfn_range(). remap_pfn_range() 为用户态提供了一种手段访问内核地址空间.它通过新页表,将一块内核物理内存映射到用户态进程空间. ...
    
			
    9. 
						
  9. 【leetcode】58-LengthofLastWord
			
    problem Length of Last Word 只有一个字符的情况: 最后一个word至字符串末尾之间有多个空格的情况: code1 class Solution { public: int  ...
    
			
    10. 
						
  10. 特殊符号　sort_wc_uniq命令　tee_tr_split命令
			
     *     任意个 任意字符 ?    任意一个字符  #     注释字符   \     转意符   |     管道符  (之前有说过) cut  命令: cut  -d "&quo ...
    
			
    11.