场景 最近hadoop集群新加了一个节点N,通过Ambari管理 一切正常. 过了两天发现,虽然集群每天要进几个G的数据(共8个节点),但节点N占用空间丝毫没有变化,显然没有进数据啊 日志 查看该节点日志,没有任何异常. 缩小问题范围 为了验证节点N没有进数据,我登录到该节点,并执行hdfs的put操作上传一个本地文件,在web页面中查看该文件的数据块分布. 正常情况,hdfs上传文件的时候会先存入本地节点然后存入远程机架. 结果发现并没有任何块分布到该节点上,确认了现在数据无法存入该节点. 查…

前一天运行hadoop一切安好,今天重新运行出现BUG.下面对遇到的bug.产生原因以及解决方法进行一下简单总结记录. [bug1]用ssh localhost免密登录时提示要输入密码. 原因分析:之前配置好了ssh免密登录并且ssh localhost以及ssh Slave1.ssh Master.ssh Slave2等都可以成功实现免密登录,后来突然想起前一天晚上用scp在节点之间传输文件的时候提示没有相关权限从而对节点的/home目录做过权限更改,而.ssh文件夹就在/home/hadoo…

hdfs管理界面:Summary部分,Configured Capacity: 0 B.正常应该不是0,而是显示系统分配给hdfs的剩余容量. 原因:NameNode的clusterID和DataNode的不一致,所以未能启动.之所以会这样,是因为我们执行了多次bin/hdfs namenode -format命令,导致NameNode的clusterID改变而DataNode却没变.有时也可能是因为data和name文件夹的权限问题. 网上解决步骤: 1 停止所有进程:sbin/stop-al…

Can't connect to X11 window server using ':0.0' 解决方法 1. 以oracle 用户登陆X window 或者 2. root 身份执行 # xhost + ======================= [oracle@rusky-oracle11g database]$ ./runInstaller //安装报错 Starting Oracle Universal Installer... Checking Temp space: must b…

我在springboot 集成 elasticsearch,启动springboot测试创建索引,建立索引的时候报 : NoNodeAvailableException[None of the configured nodes are available: [{#transport#-1}{jzxmY2H9RVSWNO1-6y28sA}{127.0.0.1}{127.0.0.1:9300}]]...... 修改  D:\elasticsearch-6.2.2\config\elasticsear…

对于这个问题,大部分人出现在这个地方: Client client = new TransportClient(settings).addTransportAddress(new InetSocketTransportAddress("172.16.2.13", 9300));​ 问题在于前面初始化settings时给cluster设置了个新的名字,如:Settings settings = ImmutableSettings.settingsBuilder().put("c…

错误环境: 1,ajax 发送 post 请求调用 views 的视图 xfzajax.post({ 'url': '/xfzauth/signup/', 'data': { 'telephone': telephone, 'username': username, 'img_captcha': imgCaptcha, 'password1': password1, 'password2': password2 }, 'success': function(result) { ...... }…

Build 4.0.0.Alpha1 =============================   ** Known BREAKING CHANGES from NH3.3.3.GA to 4.0.0       NHibernate now targets .Net 4.0. Many uses of set types from Iesi.Collections have     now been changed to use corresponding types from the BC…

当你的数据库为SQLEXPRESS时,在程序的数据库连接字符串的服务Server使用127.0.0.1\SQLEXPRESS时,如下: 它会显示一异常: Server Error in '/' Application. A network-related or instance-specific error occurred while establishing a connection to SQL Server. The server was not found or was not acc…

什么时候使用127.0.0.1 在测试环境,如果想知道上线后服务发生异常中断的情况下界面会如何展示,这个时候有2种方式: 第1种是:由开发人员协助,比如后台开发人员在服务器上使这个服务停止,或者由前端开发人员把抓取到的文件设为空. 第2种是:在本地HOSTS文件添加127.0.0.1    www.什么什么什么.com. 但是由于系统的复杂性,有时候使用第2种方式是不起作用的.那么在这种情况下,可以由开发人员协助测试人员模拟”服务异常中断”的场景. 那么是由后端开发人员协助好一些,还是前端开发人…