Linux中的MyEclipse配置Hadoop】的更多相关文章

一.所需软件 注意:安装MyEclipse后,我再已安装软件里找不到MyEclipse,所以我在root权限下用命令行启动MyEclipse,貌似避免了很多权限问题. sudo su 输入密码 cd usr/myeclipse ./myeclipse 二.步骤 1.先把hadoop-eclipse-plugin-1.2.1.jar复制到ubuntu桌面(我的不能直接复制到MyEclipse的dropins目录下,我同学的能,真是奇怪啊),然后在进入桌面. 还是先进入root cd cd ..//…
配置VSFTP服务器: 1.安装VSFTP,可以参考Linux 中yum的配置来安装: yum installvsftpd.x86_64 -y 2.修改SELinux: setenforce 0 查看: 3.防火墙开放ftp服务 firewall-cmd --permanent --add-service=ftp 重启防火墙: firewall-cmd --reload 查看防火墙: firewall-cmd --list-all 4.新建一个将要分享的文件目录 mkdir /home/www/…
Linux中redis安装配置及使用详解 一. Redis基本知识 1.Redis 的数据类型 字符串 , 列表 (lists) , 集合 (sets) , 有序集合 (sorts sets) , 哈希表 (hashs) 2.Redis的特性 ()使用ANSI C编写 ()遵守BSD协议 ()支持网络 ()可基于内存亦可持久化 ()日志型.Key-Value数据库 通常被称为数据结构服务器,因为其value可以是String,Map,list,set,sorted set 3.特点 支持数据持久…
本文介绍了如何在基于RPM和DEB的系统中安装和配置OpenVPN服务器.我们在本文中将使用一个名为openvpn-install的脚本,它使整个OpenVPN服务器的安装和配置过程实现了自动化.该脚本可帮助你在几分钟内搭建好自己的VPN服务器,哪怕你之前没有用过OpenVPN. 作者:布加迪编译来源:51CTO|2017-04-24 10:46 移动端 收藏 分享 [51CTO.com快译]本文介绍了如何在基于RPM和DEB的系统中安装和配置OpenVPN服务器.我们在本文中将使用一个名为op…
关于Linux中的目录配置标准 在查看docker.k8的运行日志,修改相关的运行记录的时候,学长总是能很快地找到目录,这个多多少少和Linux的FHS(File Hierarchy Standard)有关,有必要把常见的集中再整理整理.具体的规范有很多,先整理一点出来,一点点再添加.具体可以参考鸟叔的p152页. 查询日志 /var 目录通常存放常态性变动的文件,包括缓存,登录文件以及某些软件运行的时候所产生的文件,或者Mysql的数据文件等等. 比如k8s的相关日志信息都存储在/var/lo…
一 linux中MySQL主从配置原理(主从分离,主从同步) mysql主从配置的流程大体如图: 1)master会将变动记录到二进制日志里面: 2)master有一个I/O线程将二进制日志发送到slave; 3)slave有一个I/O线程把master发送的二进制写入到relay日志里面: 4)slave有一个SQL线程,按照relay日志处理slave的数据: 二 操作步骤 2.1我们准备两台装好mysql的服务器(我在此用docker模拟了两台机器) 环境 mysql版本 ip地址:端口号…
最近在给学生讲解数据库的主从配置,由于学生电脑里面装的虚拟机是linux的,但是本机的系统是windows的,所以需要用windows中的mysql与linux中的mysql进行主从配置.下面说一下主要步骤: 如果将windows中的当主机,那么配置如下(如果linux中的当主机,那么反过来配置就行): Windows中的主机配置: 1. 首先,找到windows中mysql的配置文件路径. 使用主机的root用户登录mysql,然后在命令行输入:select @@basedir;显示的结果即为…
版权全部: zhe-jiang.he@hp.com  严禁转载! 1.安装插件 准备程序: eclipse-3.3.2(这个版本号的插件仅仅能用这个版本号的eclipse) hadoop-0.20.2-eclipse-plugin.jar (在hadoop-0.20.2/contrib/eclipse-plugin文件夹下) 将hadoop-0.20.2-eclipse-plugin.jar 拷贝到eclipse/plugins文件夹下,重新启动eclipse. 2.打开MapReduce视图…
一.权限对文件的重要性 1.r(read):可读取此文件的实际内容,读取文本文件的文字内容等. 2.w(write):可以编辑,新增或者是修改该文件的内容. 3.x(execute):该文件具有可以被系统执行的权限. **在linux中,一个文件是否能被执行是由是否具有“x”这个权限来决定的,与文件名没有绝对的关系. 二.权限对目录的重要性 *文件是存放实际数据的所在,目录主要的内容是记录文件名列表,文件名与目录有前列的关联. 1.r:表示具有读取目录结构列表的权限,当你具有读取(r)一个目录的…
Linux登录: 本地登录,直接在Linux主机上接上键盘显示器,然后输入用户名密码登录 远程登录,通过网络进行登录(需要IP 账户名 密码) windows中远程登录软件有 xshell.putty.securecrt Linux的IP地址配置: (1)临时生效(重启网口/重启os,原来配置的IP就会丢失): a.首先查看Linux主机有哪些网口: ifconfig -a b.给网口配置IP地址: ifconfig 网口名 IP地址 netmask 子网掩码 例如:ifconfig eth1…
目录 网卡的配置 NetworkManager的使用 Team网卡绑定 Centos6.5.Redhat7.Kali网卡配置的不同 Kali桥接模式配置静态ip 网卡的配置 网卡命名的不同: Rhel6 及其之前命名都是以 eth 开头,第一块网卡就叫 eth0 ,第二块网卡就叫 eth1 Rhel7 开始命名规则变了,eno1代表由主板BIOS内建的网卡 :ens1代表由主板BIOS内建的PCI-E界面的网卡:enp2s0 代表PCI-E界面的独立网卡,可能有多个网卡接口,因此会有s0,s1的…
每个版本的 hadoop 都有相应版本的 MyEclipse 插件,官网并没有提供插件的jar包下载.在hadoop/src/contrib 目录下有一个 eclipse-plugin 项目,此项目就是MyEclipse 的插件项目,需要自己手动用 ant 打包成jar包.打包方法略,网上有很多.也可以在网上找相应的已经打包好的插件包 1)插件安装:(MyEclipse 8.6) 将插件包 hadoop-eclipse-plugin-1.0.4.jar 放到 MyEclipse-8.6/drop…
1.安装Hadoop开发插件 hadoop安装包contrib/目录下有个插件hadoop-0.20.2-eclipse-plugin.jar,拷贝到myeclipse根目录下/dropins目录下. 2. 启动myeclipse,打开Perspective: [Window]->[Open Perspective]->[Other...]->[Map/Reduce]->[OK] 3. 打开一个View: [Window]->[Show View]->[Other...…
如果你使用Linux比较长时间了,那你就知道,在对待设备文件这块,Linux改变了几次策略.在Linux早期,设备文件仅仅是是一些带有适当的属性集的普通文件,它由mknod命令创建,文件存放在/dev目录下.后来,采用了devfs, 一个基于内核的动态设备文件系统,他首次出现在2.3.46内核中.Mandrake,Gentoo等Linux分发版本采用了这种方式.devfs创建 的设备文件是动态的.但是devfs有一些严重的限制,从2.6.13版本后移走了.目前取代他的便是文本要提到的udev--…
01.去官网下载指定的jdk 02.使用xftp把下载好的文件 传递到 linux指定文件夹中03.进入指定的文件夹输入tar -zxvf 文件名称04.发现文件 05.进入文件cd jdk1.8.0_121 06.进入bin目录cd bin保存当前的路径,以备等会配置环境变量时使用! /software/jdk1.8.0_121/bin 07.找到配置环境变量的文件  ~/.bash_profile 或者 /etc/profile   文件 08.vim 开始编辑文件 或者 /etc/prof…
一.开发计划(包括准备工作,网站大致需求等) 二.服务器(linux/centos)购买.相应环境配置(jdk),软件安装(mysql, nginx, redis).域名解析 三.原型图.代码开发(vue.js, springboot) 二: 1. 安装mysql(压缩包形式)记录(linux) 另一种快捷安装,参考:https://www.cnblogs.com/wishwzp/p/7113403.html a. 下载mysql安装包(链接: https://pan.baidu.com/s/1…
1.1    安装环境 1.jdk:要求jdk必须是1.7及以上版本 2.Mysql:推荐mysql是5.5以上版本 1.2  安装步骤 Mycat有windows.linux多种版本.本教程为linux安装步骤,windows基本相同. 第一步:下载Mycat-server-xxxx-linux.tar.gz 第二步:将压缩包解压缩.建议将mycat放到/usr/local/mycat目录下. 第三步:进入mycat目录,启动mycat ./mycat start 停止: ./mycat st…
1.首先要下载相应的hadoop版本的插件,我这里就给2个例子: hadoop-1.2.1插件:http://download.csdn.net/download/hanyongan300/6238153 hadoop2.2.0插件:http://blog.csdn.net/twlkyao/article/details/17334693 上一章我也讲了怎么制作相应版本的插件,这些插件可以在网上搜到 2.把插件拷贝到myeclipse根目录下/dropins目录下. 3. 启动myeclipse…
目标Linux系统为centOS 一.安装登陆mysql   1.直接以root用户运行:yum install mysql 和yum install mysql-server等带安装完成. 2.安装完成后在命令行输入service mysqld start启动mysql服务 3.然后在命令行直接敲mysql即可以默认用户root@mysql登陆,网上说的那些mysql -u root -p会提示ERROR 1045 (28000): Access denied for user 'root'@…
配置步骤如下: 1.登陆或切换到root用户下: 2.添加sudo文件的写权限,命令是:chmod u+w /etc/sudoers 3.编辑sudoers文件:vi /etc/sudoers 找到这行 root ALL=(ALL) ALL,在他下面添加xxx ALL=(ALL) ALL (注:这里的xxx是你的用户名) 你可以根据实际需要在sudoers文件中按照下面四行格式中任意一条进行添加:youuser            ALL=(ALL)                ALL%yo…
首先,了解一下RAID是什么?(百度所得) 独立磁盘冗余阵列(RAID,redundant array of independent disks)是把相同的数据存储在多个硬盘的不同的地方(因此,冗余地)的方法.通过把数据放在多个硬盘上,输入输出操作能以平衡的方式交叠,改良性能.因为多个硬盘增加了平均故障间隔时间(MTBF),储存冗余数据也增加了容错. RAID主流分类: 1.RAID0 RAID 0:RAID 0连续以位或字节为单位分割数据,并行读/写于多个磁盘上,因此具有很高的数据传输率,但它…
假设要在6380开启redis 1.添加配置文件:复制redis.conf为redis_6380.conf 2.修改配置文件:修改redis_6380.conf中port.pidfile 3.防火墙:开启6380端口 4.启动redis:redis-server redis_6380.conf 5.登陆redis:redis-cli -p 6380 6.redis主从配置:6379为主redis,6380为从redis,redis_6380.conf中配置slaveof 127.0.0.7 63…
为centos配置网络 (1)第一步 点开虚拟机的设置,如下图做相关的设置: 网络连接要选择桥接模式,其他的勾选就按照上图的即可,勾选完成点击确定. (2)第二步 点击VMware的编辑选项,找到“虚拟网络编辑器”,打开它.如下图更改. VMhet0勾选桥接模式.一定要注意,桥接到后面的下拉框可能有多个网卡,一定要选择你主机中能上网的那个.建议选择本地连接的那张物理网卡.如果你不知道,可以打开你的电脑的网络适配器,查看.例如我的电脑的本地连接的名字如下: 因此我选择桥接到“Realtek PCI…
一. 如上图 我当时的网卡配置文件里是静态模式,然后DNS1=114.114.114.114. 就是纳闷,这是为什么 随后,我又是将网卡配置文件,修改为DNS1=114.114.114.113. 重启服务之后再次查看 resolv.conf文件,随着我的配置而改变,那我就纳闷了,如果该文件只是映射了网卡中关于dns的配置的话,为什么要存在这个文件,它的存在意义是什么. 二. resolv.conf该配置文件,虽然自己可以进行修改添加或删除,但是一旦重启网络服务,那么你的修改将全部清空. 最终生效…
systemd相关配置 推荐使用systemd管理进程,相比使用supervisord systemd提供系统级别的支援. 一.系统管理 Systemd 并不是一个命令,而是一组命令,涉及到系统管理的方方面面. ​ /usr/lib/systemd/system/下的服务类型 ​ centos7 默认是 /usr/lib/systemd/system/ ​ ubuntu 18 默认是 /lib/systemd/system/ systemd启动的服务都是存放在这个目录下,不同的服务类型有各自不同…
配置apahce通过mod_wsgi访问django代码,最终通过版本说明: Apache/2.0.63 (Unix) DAV/2 mod_wsgi/3.5 Python/2.6.6 下面讲述一波三折的错误经历: 1.首先apache和python版本如上,安装过程比较简单,开始选择安装mod_wsgi 4.4,出现错误 查询得知得安装python开发包,python-devel,通过yum install python-devel后,还是有错误: 于是卸载之前的开发包,下载python-dev…
安装jdk 1)下载地址:https://www.oracle.com/technetwork/java/javase/downloads/index.html 我选择jdk1.8版本 2)上传至服务器安装 上传到/tmp目录 安装之前卸载服务器原本安装的jdk [root@VM_0_10_centos tmp]# rpm -qa | grep jdk [root@VM_0_10_centos tmp]# rpm -qa | grep java [root@VM_0_10_centos tmp]…
1,使用 /bin/vi  /etc/profile 可以打开环境变量 2,修改正确后,重启…
1.进入yum的路径 cd /etc/yum.repos.d 2.将原始的repo文件移入一个新建的backup文件下做备份 mv CentOS* backup 3.在/etc/yum.repos.d下新建一个自己的文件(这里的文件必须以repo结尾); vi zhi.repo 其中,第一行必须是[文件名]的格式 是一个标记 name=*** 这是一个文件的解释 baseurl=*** 这里可以是file,ftp,http,其中file,ftp为内网或本机上的文件路径,http为共网上的路径,必…
配置Apache服务器: 1.安装Apache,可以参考Linux 中yum的配置来安装: yum install http* -y 2.修改SELinux: setenforce 0 查看: 3.防火墙开放httpd服务 firewall-cmd --permanent --add-service=httpd 重启防火墙: firewall-cmd --reload 查看防火墙: firewall-cmd --list-all 4.修改Apache服务器的配置 新建测试文件: vim /etc…