第一种: # -*- mode: ruby -*- # vi: set ft=ruby : # All Vagrant configuration is done below. The "2" in Vagrant.configure # configures the configuration version (we support older styles for # backwards compatibility). Please don't change it unless y…

用了这么久的hadoop,只会使用streaming接口跑任务,各种调优还不熟练,自定义inputformat , outputformat, partitioner 还不会写,于是干脆从头开始,自己搭一个玩玩,也熟悉一下整体架构. 整体环境: 主机Win7 i5 4核 8G内存 笔记本: 虚拟机(客户机)采用Centos5.9 ( 用这个的原因是不想用图形界面,并且以后还想试着装一下ICE) 3台互联的虚拟机搭建Hadoop集群: 1. 选用virtualbox V4.2.18 + Cento…

在第3章<搭建独立的KVM虚拟化>中,你安装并启动了libvirtd服务.你还引入了帮助你管理虚拟机的libvirt管理工具virt-manager和virsh. 相较于命令行,新用户总是更喜欢GUI.因此我们从virt-manager开始讲解.我们也认为,了解virt-manager将快速推进使用libvirt和virsh管理虚拟机的学习过程.我们会尽可能提供等价的virsh命令,使你有机会同时学习virt-manager和virsh. 在本章中,我们将讨论以下主题: virt-manger…

首先你要有虚拟机,其次你要可以互相ping通(主机与虚拟机) 接着你要有xshell 软件  没有的话可以点击链接下载 Xshell  6  提取码:cj5t 打开Xshell软件  在工具栏中选择“新建用户密钥生成向导” 选择密钥类型为“RSA”,密钥长度“2048” 下一步 正在生成,等生成完毕点击下一步 名称就按照图片上默认(也可以改),密码不用填写,用的是密钥默认就可以,下一步 是 这就是我们的公钥,单击保存文件将公钥保存到桌面,保存完毕点击完成 单机“导出”按钮,把私钥导出(步骤可以跳…

1. 软件准备 下载.安装Virtual Box https://www.virtualbox.org/wiki/Downloads 下载.安装Vagrant https://www.vagrantup.com/downloads.html 注意:VirtualBox会与包括但不限于如下软件冲突,需要卸载这些软件,然后重启电脑: 冲突的软件:红蜘蛛.360.净网大师(有可能)等 2. vagrant:查看是否安装成功 3. vagrant init centos/7:初始化 这里有各种 Linu…

前言 好多人问我,这种基于大数据平台的xxxx的毕业设计要怎么做.这个可以参考之前写得关于我大数据毕业设计的文章.这篇文章是将对之前的毕设进行优化. 个人觉得可以分为两个部分.第一个部分就是基础的平台搭建.例如Hadoop集群.Kafka集群. 第二个部分就是上层应用的建设,例如基于大数据平台的数据分析,以及大屏展示之类的可视化应用.前者提供了基础平台能力,让整个设计加入大数据元素:后者提供了上层应用能力,主要是让别人明白你利用大数据平台做了什么. 前些日子闲得无聊,在一台虚拟机上基于docke…

hosts文件   简单说,就是本来访问某个机器是通过其ip,在hosts文件中给ip对应一个名字,那么就可以通过名字来替代ip去访问该机器了(名字显然比ip好记) 环境:宿主机win10系统,安装了vmware10.0.1,vmware中新建两个虚拟机,都安装了win2012,虚拟机中安装ArcGIS Server 10.4.1,测试集群. 问题:起初未测试集群环境,两台虚拟机各自创建Server站点,但是通过全域名形式(如:https://server132.esrichina.com:64…

问题描述: 在UNP一书中实例中,采用两台不同的虚拟机.即一台虚拟机作为服务端,另外一台虚拟机作为客户端. 现象: 两台电脑各自互ping可通 客户端访问local可行 客户机访问服务端报错:No route to host 解决办法: 1.vi /etc/selinux/config 将防火墙关闭: 2.清空iptables规则,终端输入: iptables –F iptables –X iptables –Z 即可…

要是两台虚拟机能够PING通下列要求缺一不可:1.你所设置的虚拟网络的网络号不能跟外面你正在使用的真实的网络号一样2.防火墙必须关闭3.你设置的那俩台虚拟机必须在同一网段内4.两台虚拟机的主机名不能相同,在局域网中会把相同的两台电脑视为同一台电脑,只能有一台使用5.在虚拟机中桥接的地方记住打勾…

KVM创建第一台虚拟机 1 创建一个镜像 [root@kvm ~]# qemu-img create -f raw /opt/CentOS6.-x86_64.raw 5G Formatting [root@kvm ~]# ll /opt/ total -rw-r--r-- root root Nov : CentOS6.-x86_64.raw 2 查看镜像信息 [root@kvm ~]# qemu-img info /opt/CentOS6.-x86_64.raw image: /opt/Cen…