HDFS之五：Hadoop 拒绝远程 9000 端口访问

最近学习Hadoop 时发现在本机访问 hadoop 9000 端口没有问题,但是远程机器访问 9000端口时不能访问,通过telnet 命令诊断发现发现无法访问端口,经过网上搜索解决方案结合自己实践,总结解决办法一般有以下几点. 首先,利用netstat -tpnl查看的端口开放情况下图中9000端口只能本机访问下图中的9000端口可以通过192.168.1.105访问 1.防火墙未关闭或防火墙打开但是为开放9000端口解决办法:通过 service iptables stop…

在运行hadoop是出现Master的9000端口拒绝访问的情况

出现9000端口拒绝访问的情况有可能是防火墙没有开放9000端口,可以选择关闭防火墙或者卸载防火墙,如果还是无法解决这种情况可能是因为hadoop的启动顺序不对. 应该按照如下得顺序启动 Step2: cd #your_hadoop_path Step3: ./bin/hadoop namenode -format Step4: ./sbin/start-all.sh…

Hadoop端口访问

Hadoop集群默认端口 Hadoop本地开发,9000端口拒绝访问…

【Hadoop】HA 场景下访问 HDFS JAVA API Client

客户端需要指定ns名称,节点配置,ConfiguredFailoverProxyProvider等信息. 代码示例: package cn.itacst.hadoop.hdfs; import java.io.FileInputStream; import java.io.InputStream; import java.io.OutputStream; import java.net.URI; import org.apache.hadoop.conf.Configuration; impor…

配置hdfs之后发现9000端口未被监听[玄学]

1. 按照apache的官网的文档配置hdfs 2. 在 core-site.xml 中配置了 fs.defaultFS 的值为 hdfs://0.0.0.0:9000 3. 执行 start-dfs.sh 4. 执行 netstat -nptl,发现9000端口没有被监听 5. 后来不知做了什么,发现端口又被监听了.…

Hadoop安装成功之后，访问不了web界面的50070端口怎么解决？

Hadoop安装成功之后,访问不了web界面的50070端口先查看端口是否启用 [hadoop@s128 sbin]$ netstat -ano |grep 50070 然后查看防火墙的状态,是否关闭,如果没有,强制性关闭查看防火墙状态: [hadoop@s128 sbin]$ service iptables status 关闭防火墙 chkconfig iptables off service iptables stop centos7的方式: systemctl stop firewa…

Hadoop日记Day9---HDFS的java访问接口

一.搭建Hadoop 开发环境我们在工作中写完的各种代码是在服务器中运行的,HDFS 的操作代码也不例外.在开发阶段,我们使用windows 下的eclipse 作为开发环境,访问运行在虚拟机中的HDFS.也就是通过在本地的eclipse 中的java 代码访问远程linux 中的hdfs.要使用宿主机中的java 代码访问客户机中的hdfs,需要保证以下几点:(1)确保宿主机与客户机的网络是互通的(2)确保宿主机和客户机的防火墙都关闭,因为很多端口需要通过,为了减少防火墙配置,直接关闭.(3…

非常不错 Hadoop 的HDFS （Hadoop集群（第8期）_HDFS初探之旅）

1.HDFS简介 HDFS(Hadoop Distributed File System)是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,是基于流数据模式访问和处理超大文件的需求而开发的,可以运行于廉价的商用服务器上.它所具有的高容错.高可靠性.高可扩展性.高获得性.高吞吐率等特征为海量数据提供了不怕故障的存储,为超大数据集(Large Data Set)的应用处理带来了很多便利. Hadoop整合了众多文件系统,在其中有一个综合性的文件系统抽象,它提供了文件系统实现的各类接口…

HDFS（Hadoop Distributed File System ）hadoop分布式文件系统。

HDFS(Hadoop Distributed File System )hadoop分布式文件系统.HDFS有如下特点:保存多个副本,且提供容错机制,副本丢失或宕机自动恢复.默认存3份.运行在廉价的机器上.适合大数据的处理.HDFS默认会将文件分割成block,64M为1个block.然后将block按键值对存储在HDFS上,并将键值对的映射存到内存中.如果小文件太多,那内存的负担会很重.硬件错误是常态,而非异常情况, HDFS可能是有成百上千的 server组成,任何一个组件都有可能一直失效…

tomcat开发远程调试端口以及利用eclipse进行远程调试

一.tomcat开发远程调试端口方法1 WIN系统在catalina.bat里: SET CATALINA_OPTS=-server -Xdebug -Xnoagent -Djava.compiler=NONE -Xrunjdwp:transport=dt_socket,server=y,suspend=n,address=8899 Linux系统在catalina.sh里: CATALINA_OPTS="-server -Xdebug -Xnoagent -Djava.compile…

CentOS 6.0修改ssh远程连接端口

转自:系统运维 » CentOS 6.0修改ssh远程连接端口实现目的:把ssh默认远程连接端口修改为2222 方法如下: 1.编辑防火墙配置:vi /etc/sysconfig/iptables 防火墙增加新端口2222 -A INPUT -m state --state NEW -m tcp -p tcp --dport 2222 -j ACCEPT ======================================================================…

修改Win7远程桌面端口

Win7与XP不同,在开启远程桌面修改端口后是无法直接访问的,原因是还未修改远程桌面在防火墙入站规则中的端口号. 修改远程桌面端口: [HKEY_LOCAL_MACHINE/SYSTEM/CurrentControlSet/Control/Terminal Server/Wds/rdpwd/Tds/tcp] PortNamber [HKEY_LOCAL_MACHINE/SYSTEM/CurrentControlSet/Control/Terminal Server/WinStations/R…

Linux服务器tomcat无法通过ip加端口访问

Linux服务器tomcat无法通过ip加端口访问防火墙开放端口 # Firewall configuration written by system-config-firewall# Manual customization of this file is not recommended.*filter:INPUT ACCEPT [0:0]:FORWARD ACCEPT [0:0]:OUTPUT ACCEPT [0:0]:RH-Firewall-1-INPUT - [0:0]-A INPUT…

ubuntu 16.04 mysql5.7.17 开放远程3306端口

ubuntu 16.04 mysql5.7.17 开放远程3306端口原创 2017年01月19日 20:33:27 标签: mysql / ubuntu 2644 开启mysql的远程访问权限默认mysql的用户是没有远程访问的权限的,因此当程序跟数据库不在同一台服务器上时,我们需要开启mysql的远程访问权限. 主流的有两种方法,改表法和授权法. 相对而言,改表法比较容易一点,个人也是比较倾向于使用这种方法,因此,这里只贴出改表法 1.登陆mysql mysql -u root -p 2…

如何用nginx在本地把9000端口转发到80端口上

起因看到一个用java写的轻博客,于是就兴致冲冲的试用一下.由于是lnmp的环境,Nginx占用了80端口,新博客只能用其他的端口,这里选择了9000端口,本地测试没问题.总不能访问了域名然后在加上端口号吧.于是就想着用Nginx来反向代理本地的9000端口配置新建一个配置文件 vim www.ti3.cc.conf 输入以下配置 listen 80; server_name localhost www.ti3.cc ti3.cc; location / { proxy_pass http:…

1.3.1、CDH 搭建Hadoop在安装之前(端口---Cloudera Manager和Cloudera Navigator使用的端口)

下图概述了Cloudera Manager,Cloudera Navigator和Cloudera Management Service角色使用的一些端口: Cloudera Manager和Cloudera Navigator使用的端口当对等网络分发为包裹启用,Cloudera的管理代理可以获取来自Cloudera的管理服务器或从其他代理包裹,如下所示: 用于对等包裹分发的端口有关更多详细信息,请参阅下表.列出的所有端口都是TCP. 在下表中,Internal表示该端口仅用于组件之间的通信…

使用 ssh -R 建立反向/远程TCP端口转发代理

转自:https://yq.aliyun.com/articles/8469 ssh是一个非常棒的工具, 不但能建立动态转发, 例如chrome的Switchy插件用到的就是这个技术.http://blog.163.com/digoal@126/blog/static/163877040201141821810103/还能建立TCP的转发隧道, 例如我以前写过的关于使用ssh 隧道加密和加速WAN传输的几个例子.http://blog.163.com/digoal@126/blog/static…

tomcat跑多个项目和不同端口访问项目

最近笔者在工作中需要同时运行多个项目,且有时需要不同端口访问项目:在此过程中,笔者觉得有必要将注意事项记录一下,以备后边查阅或广大读者借鉴. 工作环境是win7,64位,IDE为eclipse,浏览器用的是谷歌浏览器: 一,tomcat跑多个项目: 1.在eclipse窗口:打开Window>>Preferences>>Server>>Runtime Environments,可以看到之前设置过的Tomcat的安装路径: 2.选择所安装tomcat版本,next: 3.…

mysql 远程连接不上，bind-address参数配置要求，以及怎么去使得mysql能够允许远程的客户端访问

刚安装了MySQL服务器,使用远程管理工具总是连接不上,因为知道mysql的默认端口是3306,于是使用telnet连接这个端口,(从这里可以学到telnet是可以这样用的) telnet 192.168.1.10 3306 还是连接不上,于是怀疑是防火墙问题,便将防火墙关掉,service iptables stop 再次telnet,还是没办法连上这个端口,然后通过netstat查看3306的端口状态是怎么样的(从这里可以学到netstat是可以这样用的)netstat -apn | gre…

Tomcat配置内存和远程debug端口

一.配置内存在/tomcat/bin/catalina.sh 中添加: JAVA_OPTS='-server -Xms2048m -Xmx2048m -XX:NewSize=768m -XX:MaxPermSize=256m -XX:MaxDirectMemorySize=256m -XX:+UseConcMarkSweepGC -XX:+UseCMSCompactAtFullCollection -XX:CMSFullGCsBeforeCompaction=5 -Dglobal.config…

[原创]用windows7连接windows2003的终端服务器时,出现"由于这台计算机没有远程桌面客户端访问许可证，远程会话被中断"的问题

用windows7连接windows2003的终端服务器时,出现"由于这台计算机没有远程桌面客户端访问许可证,远程会话被中断"的问题,原因是终端服务器授权方式设置为了"每设备",在终端服务器配置中改为"每用户"就可解决.…

win2003远程桌面端口修改

win2003远程桌面端口修改 1.改端口:简单操作步骤:打开"开始→运行",输入"regedit",打开注册表,进入以下路径:[HKEY_LOCAL_MACHINE\SYSTEM\ CurrentControlSet\Control\Terminal Server\ Wds\rdpwd\Tds\tcp],看见PortNamber值了吗?其默认值是3389(改为十进制显示),修改成所希望的端口,例60000.2.再打开[HKEY_LOCAL_MACHINE\SY…

Windows Server 2012 R2下通过80端口访问Odoo ERP

背景 Odoo 9.0系统,安装于Windows Server 2012R2,同时与IIS并存.Odoo自带web服务器,使用端口8069.因客户需要用80端口访问,因此需要进一步设置,且8069端口通过公网访问,在某些客户环境下会被防火墙拦截. 要点网上有些文章提到可以通过修改Odoo配置文件重启服务使其服务端口从8069转移到80,(如这篇文章所提到的:http://rcadhikari.blogspot.com.au/2015/05/to-change-default-port-8069…

Windows 2003/2008更改远程桌面端口脚本

保存为bat文件,点击运行按提示输入新端口自动完成,直接下载更改远程桌面端口脚本 @echo off color 0a title @@ 修改Windows XP/2003/2008远程桌面服务端口号 @@ echo ******************************************************************* echo * 请输入您要更改的远程桌面端口号,范围:1-65535,不能与其他端口冲突 * echo ********************…

ubuntu14.10服务器版安装xampp，配置域名端口访问

1.从xampp下载下了xampp-linux-1.7.3a.tar这个包,然后ftp到我的linux虚拟机中, 2.复制到opt下,(可以直接解压的)到opt下面,tar xvfz xampp-linux-1.7.3a.tar 3.可以直接安装或者叫初始化lampp,:/opt/lampp/lampp start显示安装成功,启动成功. 为了方便以后调试,我把lampp的启动文件放到/bin下面,可以直接lampp start,restart,stop 4.下面直接在浏览器打开http://1…