http://blog.csdn.net/pelick/article/details/11964291 Shark简介 Shark即Hive on Spark,本质上是通过Hive的HQL解析,把HQL翻译成Spark上的RDD操作,然后通过Hive的metadata获取数据库里的表信息,实际HDFS上的数据和文件,会由Shark获取并放到Spark上运算.Shark的特点就是快,完全兼容Hive,且可以在shell模式下使用rdd2sql()这样的API,把HQL得到的结果集,继续在scal…

今天遇到在window上部署ant编译的包,能运行正常,但部署在linux中出现跳不进jsp中,出现404问题,后来经过排查在jsp中<%@taglib prefix="c" uri="http://java.sun.com/jsp/jstl/core"%>,删除就会正常,因此考虑到是不是缺少架包,导入之后,一起正常.…

原文:Linux内核分析(一)---linux体系简介|内核源码简介|内核配置编译安装 Linux内核分析(一) 从本篇博文开始我将对linux内核进行学习和分析,整个过程必将十分艰辛,但我会坚持到底,同时在博文中如果那些地方有问题还请各位大神为我讲解. 今天我们会分析到以下内容: 1.      Linux体系结构简介 2.      Linux内核源码简介 3.      Linux内核配置.编译.安装 l  Linux体系结构简介 1.       Linux体系结构(linux系统构成)…

Jenkins+Ant+Svn实现自动化部署,编译,运行,测试结果自动邮件通知…

weblogic自带的jdk是在工程的包部署后编译使用的.当用户把项目打包部署到weblogic上面,运行该项目的java环境jdk就是用的weblogic自带的jdk了,工程中的jdk和编译时的jdk是调试的时候用的,既然要部署到weblogic上面,就要用自带的jdk来编译,所以开发的时候就要选好环境,否则编译好的class无法在weblogic容器中运行.注意:weblogic在新建域的时候,可以选择开发还是生产模式,不管是开发还是生产模式都是可以选择自己的JDK的,不过weblogic1…

Beego简介 beego是一个使用Go语言来开发WEB引用的GoWeb框架,该框架起始于2012年,由一位中国的程序员编写并进行公开,其目的就是为大家提供一个高效率的web应用开发框架.该框架采用模块封装,使用简单,容易学习.方便技术开发者快速学习并进行实际开发.对程序员来说,beego掌握起来非常简单,只需要关注业务逻辑实现即可,框架自动为项目需求提供不同的模块功能. 在对beego框架有了一个简单基本的了解之后,我们给大家介绍一下beego的一些特性. Beego框架的主要特性 1)简单化…

简介 OpenResty 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库.第三方模块以及大多数的依赖项.用于方便地搭建能够处理超高并发.扩展性极高的动态 Web 应用.Web 服务和动态网关. OpenResty 通过汇聚各种设计精良的 Nginx 模块(主要由 OpenResty 团队自主开发),从而将 Nginx 有效地变成一个强大的通用 Web 应用平台.这样,Web 开发人员和系统工程师可以使用 Lua 脚本语言调动 Nginx 支持的各种…

在Linux系统下开发一个较大的项目,完全手动建立Makefile是一件费力而又容易出错的工作.autotools系列工具只需用户输入简单的目标文件.依赖文件.文件目录等就可以比较轻松地生成Makefile了. 这极大地简化了Makefile的编写和维护,作者也是刚体验到其威力,所以将其过程记录下来. 本文以一个简单的hello.c文件进行验证. 准备工作 首先需要安装autotools系列工具,包括aclocal.autoscan.automake.autoheader.autoconf等.…

近期改的Java应用即将部署,为了强强联合,需要把Java应用部署到linux,我们选择了debian系列.小结一下部署的大致过程,如下: Ubuntu已经默认安装了OpenJDK,但还是比较倾向官方正式的JDK版本,如何安装Oracle 的JDK,请参考这里. 由于我们使用的Oracle数据库,为了发挥更好的性能,我们需要配置客户端TNS,如何配置请参考这里. 使用Eclipse到处可执行的jar包,为了配置方便,我把应用的所有相关配置文件放在与该应用同级的config目录里,这些配置文件包括…

Tomcat 简介 Tomcat是Apache软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache.Sun和其他一些公司及个人共同开发而成. Tomcat服务器是一个免费的开放源代码的Web应用服务器,属于轻量级应用服务器,在中小型系统和并发访问用户不是很多的场合下被普遍使用,是开发和调试JSP程序的首选. Tomcat和Nginx.Apache(httpd).lighttpd等Web服务器一样,具有处理HTML页面的功能,另外…

之前在学习vtk过程中,感觉vtk的编译还是很简单的,基本上不会碰到什么棘手的错误.但是,当我在Win10+VS2015这个环境下配置时,却遇到了麻烦.经过一番折腾之后,终于将vtkbian编译成功了,这里做个小结,希望对大家有所帮助. Step 1: 使用cmake3.3.0对vtk-6.2.0源码进行configure操作 选择VS2015 Win64选项作为编译器设置 可能出现的错误:HDF5对64位位长数据支持检测失败 解决方案:这个是因为在HDF5配置源码文件中缺少I64这个选项,添加…

Jumpserver简介 Jumpserver 是一款使用 Python, Django 开发的开源跳板机系统, 为亏联网企业提供了认证,授权,审计,自动化运维等功能,基于ssh协议来管理,客户端无需安装agent. jumpserver功能特点 /* 1. 完全开源,GPL授权 2. Python编写,容易二开 3. 实现了跳板机基本功能,身份认证.访问控制.授权.审计.批量操作等. 4. 集成了Ansible,批量命令等 5. 支持WebTerminal 6. Bootstrap编写,界面美…

目录 1.游戏简介 1.如何做出一款麻将游戏? 2.麻将运行界面 3.麻将项目所用技术快速概览 4.web开发 / 游戏开发 / APP开发 比较 5.firefly游戏框架介绍 2.部署麻将项目到本地 1.项目整体目录结构 2.客户端本地安装部署 3.游戏服务端本地安装部署 4.web服务端本地安装部署+运行 5.游戏服务端运行 6.客户端运行 1.游戏简介 1.如何做出一款麻将游戏? ⾃2000年Python第⼀个稳定的2.7版本发布以来,Python"简单.明确.优雅"设计哲学的…

操作步骤: 1. 先add and remove 去除项目 2. clean 完成清除工程在tomcat的目录 3. project-->clean 4. add adn remove 重新添加工程 5. publish 发布到tomcat目录 6. 比较工程下的class编译文件和tomcat目录下的工程文件是否一致 ok…

       我前面说了很多如何用gcc或 Makefile怎么编译的东东,但在Linux下装过软件的都应当见过,很多源码安装的包是用Automake 来编译的.输入下"./configure","make","make install"就装上了.Automake就是有群人觉得写Makfile不方便,特别是工程文件多 目录复杂时.所以就搞了这么个自动生成Makefile的开源的东东.类似的工具还有cmake和qmake.      Automak…

1 下载源码,解压之当前用户的主目录(~/) 2 进入make目录,执行make命令 cd ~/gtest-/make make 3 在ubuntu里编译出错,提示找不到lthread库.修改Makefile,在文件结尾: sample1_unittest : sample1.o sample1_unittest.o gtest_main.a $(CXX) $(CPPFLAGS) $(CXXFLAGS) -lpthread $^ -o $@ 修改成(-lpthread 移到命令末尾): samp…

原文:https://www.cnblogs.com/TechSnail/p/7690829.html    &&   https://blog.csdn.net/qq_31293575/article/details/80654132 扩展: https://blog.csdn.net/diaomeng11/article/details/73826564 https://blog.csdn.net/z15732621582/article/details/79439359  : bea…

编译: javac 参数 -d 指定编译后文件的位置 java 执行java文件 java生成jar文件 java执行jar文件 java生成war文件 war包是一种将web程序捆绑到单个文件上的一种快捷方式,以.war结尾. 生成方式和生成jar文件方式基本一致 参考: java生成jar包:http://blog.csdn.net/yuxiaohui78/article/details/8241163 有兴趣可以看看java生成exe:http://blog.csdn.net/luowei…

虽然WebKit 已经越来越多的被广大程序员接受,但其编译过程却非常之痛苦.下面将我编译WebKit 代码的经验与大家分享. 1) 获取WebKit 源代码 WebKit 源代码是使用Subversion 工具做管理的.因此,只要具备Subversion 客户端就可以从http://svn.webkit.org/repository/webkit/trunk 获取源代码.但是,这并不是最好的方式.在实际编译过程中通过svn拿下来的代码有可能为你带来许多的烦恼.因此,我推荐从WebKit的Nigh…

https://www.cnblogs.com/1024zy/p/6344000.html 之前太傻瓜了,一直以为用了IDEA改了类或者js的时候全都要手动构建发布,其实不用,IDEA这么好的工具怎么可能不会自动编译啊,下面说一下实现IDEA自动编译的方法 一.首先是Tomcat,这样改就不用重启tomcat: 1 2 3 4  二.改了dubbo…

这是官方给出的编译指导,但是在实践过程中有几点仍然需要特别注意. Tip 1:不要使用默认的"VS开发人员命令提示"工具,使用该工具会遭遇如下的错误: 正在创建库 gdal_i.lib 和对象 gdal_i.expINK : error LNK2001: 无法解析的外部符号 OGRFeatureStylePullerINK : error LNK2001: 无法解析的外部符号 OSRValidateINK : error LNK2001: 无法解析的外部符号 OPTGetProject…

环境: 系统:centos7 x3 master:192.168.220.133 slave1:192.168.220.136 slave2:192.168.220.137 前期准备: slave1(192.168.220.136): [root@slave1~]# hostnamectl set-hostname slave1 [root@slave1~]# echo '192.168.220.136 slave1' >> /etc/hosts slave1(192.168.220.137)…

https://blog.csdn.net/z15732621582/article/details/79439359…

一:数据库配置问题   1:.net Framework3.5问题 window Server2012 安装数据库的时候可能会报缺少.net Framework3.5,需要去服务管理器添加.net FM3.5的功能,按照操作即可,如果是VM的话需要2012对应操作系统的iso安装文件哦 2:安装SQLserver 2008 R2 提示不支持语言错误,解决办法如下图 3:检查安装的时候报错 [Sqlserver 2008 R2性能计数器注册表单元配置一致性”检测失败解决办法 ] (1).WIN+R…

简介 主要介绍如何从基础系统debian部署docker关于docker基础知识在 相关资料 里有链接 安装docker 1.使用root用户身份添加apt源添加public key使docker的安装源授信 $ curl -s 'https://sks-keyservers.net/pks/lookup?op=get&search=0xee6d536cf7dc86e2d7d56f59a178ac6c6238f52e' | sudo apt-key add --import 安装apt的http…

1.部署环境 OS:Red Hat Enterprise Linux Server release 6.4 (Santiago) Hadoop:Hadoop 2.4.1 Hive:0.11.0 JDK:1.7.0_60 Python:2.6.6(spark集群需要python2.6以上,否则无法在spark集群上运行py) Spark:0.9.1(最新版是1.1.0) Shark:0.9.1(目前最新的版本,但是只能够兼容到spark-0.9.1,见shark 0.9.1 release) Zo…

问题导读:1.如何对Spark1.0.0源码编译?2.如何生成Spark1.0的部署包?3.如何获取包资源? Spark1.0.0的源码编译和部署包生成,其本质只有两种:Maven和SBT,只不过针对不同场景而已:Maven编译SBT编译IntelliJ IDEA编译(可以采用Maven或SBT插件编译),适用于开发人员部署包生成(内嵌Maven编译),适用于维护人员编译的目的是生成指定环境下运行Spark本身或开发Spark Application的JAR包,本次编译的目的生成运行在hadoo…

C语言编译过程简介 C语言编译过程简介 刚开始接触编程的时候,只知道照书敲敲代码,一直都不知道为什么在windows平台下代码经过鼠标那样点击几下,程序的结果就会在那个黑色的屏幕上.现在找了个机会将C语言的编译原理做一下小小的总结,这样也能为以后我们进军linux编程做一些准备工作,现在这里和大家一起分享分享.O(∩_∩)O~ 讲到编译原理,我觉得首先我们得明白一些基本概念. 1.                   编辑器:我们编写代码的一些窗口,如:记事本.word.notepad 等. 2…

Spark简介 [TOC] Spark是什么 Spark是基于内存计算的大数据并行计算框架 Spark是MapReduce的替代方案 Spark与Hadoop Spark是一个计算框架,而Hadoop中包含计算框架MapReduce和分布式文件系统HDFS,Hadoop更广泛地说还包括在其生态系统上的其他系统. Spark的优势 中间结果输出 基于MapReduce的计算引擎通常会将中间结果输出到磁盘上,进行储存和容错.当一些查询翻译到MapReduce任务是,往往会产生多个Stage,而这些串…

1 Maven的简介 1.1 什么是maven 是apache下的一个开源项目,是纯java开发,并且只是用来管理java项目的 Svn eclipse   maven量级 1.2 Maven好处 同一个项目,普通的传统项目(24M)而Maven项目只需要(724KB) 分析:maven项目为什么这么小?没有jar. 需要jar吗?肯定需要.没有存在于maven项目里面,jar存在于哪? 1.3 依赖管理 1.4 项目一键构建 编码  编译  测试(junit)  运行  打包  部署 一个 t…