为了方便使用Spark的同学提交任务以及加强任务管理等原因,经调研采用Livy比较靠谱,下图大致罗列一下几种提交平台的差别. 本文会以基于mac的单机环境搭建一套Spark+Livy+Hadoop来展示如何提交任务运行,本文只针对框架能够运行起来,至于各个组件参数怎么配置性能更好,各位兄弟就自行找度娘了. 一.搭建Spark 访问http://spark.apache.org/downloads.html下载安装包,然后按照以下步骤操作即可. 1.下载完成后解压到某个目录下,在该目录执行以下命令…

一,微信公众平台. 1,“再小的个体,也有自己的品牌”,这是微信公众平台的官方广告. 2,微信公众平台没有认证门槛,只需要一个邮箱和手持身份证照片.目前一个身份证号只可注册两个微信公众帐号. 二,LBS的开发. 1,LBS基于位置的服务(Location Based Service). 2,由于安卓系统微信默认调用的是Google地图,而iOS系统部分版本调用的是苹果公司自己的地图,而第三方程序如百度地图在经纬度方面会和Google地图稍有偏差. 另外GPS定位和GPRS,Wi-Fi定位也有一定…

Windows 7系统下搭建NodeJs开发环境(NodeJs+WebStrom)以及Hello World!展示,大体思路如下:第一步:安装NodeJs运行环境.第二步:安装WebStrom开发工具.第三步:创建并运行NodeJs项目展示Hello world! 1.下载nodejs 地址:http://nodejs.org/ 点击安装完成,然后安装“组件”,如图: 2.安装WebStrom,导入nodejs开发插件 下载地址:http://www.jetbrains.com/webstorm…

1.安装Docker Docker可简单理解为一个轻量级的虚拟机.Docker对进程进行封装隔离,隔离的进程独立于宿主和其它的隔离的进程,因此也称其为容器.Docker和传统虚拟化方式的不同.传统虚拟机技术是虚拟出一套硬件后,在其上运行一个完整操作系统,在该系统上再运行所需应用进程:而Docker内的应用进程直接运行于宿主的内核,容器内没有自己的内核,而且也没有进行硬件虚拟.因此容器要比传统虚拟机更为轻便:资源利用率高.启动迅速.迁移方便等. 1) 安装 官网有各种平台的安装指南,可参考: ht…

出处:http://www.ionic-china.com/doc/ionic-winmac.html#preface 前言 ionic中文网为大家准备了绿色版的nodejs和androidSDK以及ionic助手,让搭建和使用开发环境变的非常简单,下面来跟我一起快速搭建吧. 注意:绿色搭建环境为ionic1.x版本,需要2x版本请看:Ionic_2.x 手动搭建开发环境教程 工具下载 jdk (AndroidSDK依赖) 百度网盘 官网下载 绿色版AndroidSDK (ADK编译) 百度网盘…

一.概念 1.1 在Windows下搭建 wamp: apache(iis) + php + mysql +phpmyadmin 1.2 在Linux下搭建     lamp: linux + php + mysql +phpmyadmin 二.在Windows下搭建的2种方式: 2.1  套件软件(AppServe):该软件把我们需要环境软件打包安装. (apache + mysql(数据库) + php(开发) + phpmyadmin(这个管理mysql的一个界面操作软件)) 2.1.1…

一直用QT Creator(mingw)开发Qt应用程序,每次如果需要修改编译链接参数选项时,都要修改pro文件,而这个文件是基于文本的,每次都要记住这些选项参数名,如果在知道原理的情况下还记住这些字符串的话就没必要了,所以干脆将开发环境换到Visual Studio 2008环境下,个人也很喜欢Visual Studio 2008 IDE,因此特记录这次安装过程. 安装环境 操作系统:Windowx 7 Qt Library版本:4.8.5 安装软件 Visual Studio:Visual…

http://blog.csdn.net/lyq8479/article/details/6348330 1.安装JDK 2.安装SDK管理器,安装SDK(在线.离线) 3.下载安装Eclipse 4.安装ADT 5.在eclipse中将SDK和ADT关联 6.建立应用,测试环境搭建是否成功 7.安装完成…

cocos2d-x的大致开发流程是,首先使用win32版进行代码编写并完成游戏,然后将代码迁移到对应的开发环境上进行交叉编译完成游戏打包,如iphone上是mac+xcode,android是eclipse+ADK+NDK.实现一处编码,到处编译. 因为主要开发都是在win32环境下进行的,所以首先研究如何配置win32开发环境.只讨论在windows7下,用Visual Studio(以下简称:vs)开发的环境,其他交叉编译需要的环境,后面讲到. 第一部分:如何运行helloworld #1.…

   JDK下载路径:www.oracle.com/technetwork/java/javase/downloads/index.html 下载JDK(Java Develop Kit) (1)针对个人开发者,开发桌面和服务器端的java应用程序的需要下载“Java SE”SDK (2)针对企业级java EE 应用开发程序开发的开发者, 请下载“Java EE”SDK 配置Java环境变量 (1)打开系统环境变量设置窗口 操作:我的电脑右键“属性”->"高级系统设置"->…