反射记录点滴 1. 反射获取类的属性 Class.getDeclareFileld(String name) 返回一个Filed对象,该对象反映此Class对象所表示的类或接口的指定已声明字段. Class.getDeclaredFields() 返回Field对象的一个数据,这些对象反应此Class对象所表示的类或接口所声明的所有字段. Class.getField(String name) 返回一个Field对象,它反应此Class对象所表示的类或接口公共成员字段. Class.getFie…
[记录点滴]授人以渔,从Tensorflow找不到dll扩展到如何排查问题 目录 [记录点滴]授人以渔,从Tensorflow找不到dll扩展到如何排查问题 0x00 摘要 0x01 引言 0x02 如何找到缺失的dll 2.1 Process Monitor可以捕获哪些事件? 2.2 Process Monitor默认列 2.3 排查过程 2.3.1 实验代码 2.3.2 初步上手 2.3.3 筛选Process Monitor数据 2.3.4 Filter 2.3.5 查看单个事件 2.3.…
一个Mapreduce作业是通过JobClient向master的JobTasker提交的(JobTasker一直在等待JobClient通过RPC协议提交作业),JobTasker接到JobClient的请求后把其加入作业队列中.     DataNode节点的TaskTracker一直通过RPC(RPC--远程过程调用协议它是一种通过网络从远程计算机上请求服务,而不需要了解底层网络技术的协议)向JobTasker发送heartbeat询问有没有任务做,如果有则让其派发任务过来,TaskTra…
起因 因为工作需要用到,所以需要学习hadoop,所以记录这篇文章,主要分享自己快速搭建hadoop环境与运行一个demo 搭建环境 网上搭建hadoop环境的例子我看蛮多的.但是我看都比较复杂,要求安装java,hadoop,然后各种设置..很多参数变量都不明白是啥意思...我的目标很简单,首先应该是用最简单的方法搭建好一个环境.各种变量呀参数呀这些我觉得一开始对我都不太重要..我只要能跑起来1个自己的简单demo就行.而且现实中基本上环境也不会让我来维护..所以对我来说简单就行. 刚好最近我…
之前说wcf以tcp协议作为通信方式的话会出现很多奇怪的bug,今天我把自己遇到的比较特殊的一个exception和解决方案列出来.主要是自己记录一下,顺便方便遇到这个问题的有缘人吧!废话不多说直接上代码: 首先看看我遇到的exception截图: 出现这种异常属于你的服务端程序出错了,但是又看不见异常源在哪,所以你需要在你的配置文件中添加相应的配置,以便让服务的异常信息返回到客户端. 下面两种情况: 1.如果你的配置文件是以config文件存在的话,需要添加配置节点 <behaviors>…
ERROR: Can't get master address from ZooKeeper; znode data == null   一定注意这只是问题的第一层表象,真的问题是: File /hbase/.tmp/hbase.version could only be replicated to 0 nodes instead of minReplica 网上很多都是叫用两种方式解决 stop/start  重启hbase 格式化 hdfs namenode -format,不能随随便便就格…
过程如下: 配置hosts vim /etc/hosts 格式: ip hostname ip hostname 设置免密登陆 首先:每台主机使用ssh命令连接其余主机 ssh 用户名@主机名 提示是否连接:输入yes 提示输入密码:输入被请求连接主机的密码 成功过后 就会在本机的~目录下生成  .ssh文件夹 然后在master的主机上进入 ~/.ssh 目录 执行: ssh-keygen -t rsa 回车回车再回车 得到  id_rsa   id_rsa.pub  两个文件复制一份 id_…
前提是安装ansible 配置源 wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-6.repo yum install -y ansible 1. ssh首次链接出现yes/no提示 需要执行一遍ssh,破除 需要输入yes的问题 修改文件: /etc/ssh/ssh_config 在文件中添加如下信息:StrictHostKeyChecking no 2. 添加 hadoop用户 首先 test用户,…
1.把本机地址广播出去private void sendIP() { try { DatagramSocket dgSocket = new DatagramSocket(8989); byte[] by = _ipString.getBytes(); try { DatagramPacket packet = new DatagramPacket(by,by.length, InetAddress.getByName(_broadcastAddress),8989); try { dgSock…
服务器端:(根据Apache POI库函数其中SlideShow表示PPT文档,Slide表示某一张幻灯片) 1.先把电脑中的PPT文件读入到一个字节数组中.(输入流-->字节数组-->输出流-->字节数组) FileInputStream inputStream = new FileInputStream(Path); ByteArrayOutputStream byteArrayOutputStream = new ByteArrayOutputStream();    byte[]…