有关hadoop及java安装配置请见:https://www.cnblogs.com/lxc1910/p/11734477.html 1.新建Java project: 选择合适的jdk,如图所示: 将工程命名为WordCount. 2.添加WordCount类文件: 在src中添加新的Java类文件,类名为WordCount,代码如下: import java.io.IOException; import java.util.StringTokenizer; import org.apach…
Linux虚拟机配置 从去年开始实习开始,公司电脑换了两个,自己的电脑也换了一个,每换一个新电脑,总免不了要去装一个Linux的虚拟机作为试验用.但是每次新装一个机器总是会遇到各种各样的问题让我用的不爽..终于趁这次把一些配置中的问题全部集中起来,下次碰到的时候也可以来查. 我用的虚拟机管理软件是VisualBox,相比于更加多人用的vmware,visualbox更加轻量一点. ■ 安装过程 安装过程就是把ISO镜像加载到光驱中,然后开启虚拟机按部就班地往下操作就行了.但是昨天遇到一个小坑,就…
想要达成的目的:从windows使用git访问CentOS7服务器上搭建的git仓库 用到的软件: (1)VMware-workstation-full-15.5.0-14665864.exe (2)CentOS7镜像:CentOS-7-x86_64-DVD-2009.iso (3)Git-2.35.1.2-64-bit.exe,windows下的git,可从这个网址下载:https://git-scm.com/download/win (4)TortoiseGit-2.13.0.1-64bit…
一.检查Macbook本身的配置 1.打开[系统偏好设置]-[网络]- 选中[Wi-Fi]项(如果您是WIFI上网请选择此项)- 点右侧[高级] 选择[TCP/IP]选项卡,记录好[子网掩码].[路由器]地址.DNS选项卡下的DNS服务器地址(如果DNS服务器地址没有配置,也可以给配置个8.8.8.8或者114.114.114.114) 比如: 路由器地址:192.168.0.1    子网掩码:255.255.255.0    DNS:114.114.114.114 (如果mac本上为空,也可…
安装虚拟机 最开始先安装虚拟机,我是12.5.7版本,如果要跟着我做的话,版本最好和我一致,不然后面可能会出一些莫名其妙的错误,下载链接如下(注册码也在里面了): 链接:https://pan.baidu.com/s/1qoqeKcgMsjFKPFQFBFP6lg  提取码:2aog 安装虚拟机直接下一步.下一步就好了,没什么可说的,安装好后,虚拟机询问是否更新,点不更新,更新了就改版本了. 配置虚拟机操作系统 接下来开始配置虚拟机系统. 首先下载CentOS7的镜像,下载链接如下: 链接:ht…
可以通过一个简单的例子来说明MapReduce到底是什么: 我们要统计一个大文件中的各个单词出现的次数.由于文件太大.我们把这个文件切分成如果小文件,然后安排多个人去统计.这个过程就是”Map”.然后把每个人统计的数字合并起来,这个就是“Reduce". 上面的例子如果在MapReduce去做呢,就需要创建一个任务job,由job把文件切分成若干独立的数据块,并分布在不同的机器节点中.然后通过分散在不同节点中的Map任务以完全并行的方式进行处理.MapReduce会对Map的输出地行收集,再将结…
本文地址 分享提纲: 1. java环境的搭建 2. java demo代码运行 3.参考文档 本人是PHP开发者,一直感觉Java才是程序的王道(应用广,科班出身),所以终于下决心跟一跟. 主要是给自己看和一些java小白参考,大神勿喷. 1. java环境的搭建 请参考 Java 开发环境配置(菜鸟教程) 1)[Windows环境]windows环境下 java环境的搭建(todo) 2)[Linux环境]Linux环境下 java环境搭建(todo) 3)[Mac环境]Mac环境下 jav…
一.前言 为了运行summingbird demo,笔者走了很多的弯路,并且在国内基本上是查阅不到任何的资料,耗时很久才搞定了demo的运行.真的是一把辛酸泪,有兴趣想要研究summingbird的园友且听笔者一一道来,大体可以将summingbird理解为Storm + Hadoop. 二.大数据处理快速预览 大数据时代的来临,将大数据处理分为了批量处理与实时处理两个方向,批量处理的优势在于容错性好,因为数据时先存在本地或者是分布式的进行存储,可以重复对数据进行处理,劣势在于速度慢,要等到数据…
React官网:https://reactjs.org/docs/create-a-new-react-app.html cnpm网址:http://npm.taobao.org/ 1.react介绍 React来自于Facebook公司的开源项目 React 可以开发单页面应用 spa(单页面应用) react 组件化模块化 开发模式 React通过对DOM的模拟(虚拟dom),最大限度地减少与DOM的交互 (数据绑定) react灵活 React可以与已知的库或框架很好地配合. react…
首先安装后的虚拟机选NAT模式配置vm的虚拟网络编辑器(vmware中的编辑),NAT模式中查看DHCP的范围,配置子网(写成和电脑一样),在linux中进入/etc/sysconfig/network-scripts,编译ifcfg-eno16777736(每个人的文件名字都不一样),#修改BOOTPROTO=static #这里讲dhcp换成ststicONBOOT=yes #将no换成yes#新增IPADDR=192.168.85.100 #静态IP (DHCP的范围中选择一个)GATEW…