Hdfs读写数据出错

1、Hdfs读数据出错：若在读数据的过程中，客户端和DataNode的通信出现错误，则会尝试连接下一个 包含次文件块的DataNode。同时记录失败的DataNode，此后不再被连接。

2、Hdfs在写某一个副本数据的时候出错：

（1）首先会关闭dataNode联通的线管。

（2）将已发送至线管内，还没有收到确认消息的数据包重新写回到数据队列中，保证数据不丢失。

（3）将当前正常工作的dataNode赋予新的版本号，这样保证即使故障dataNode节点恢复了，由于版本号不对，故障dataNode也将会被剔除。这个新的版本号是利用nameNode的租约信息获取。

（4）在当前正常的dataNode中选择一个主dataNode，并与其他的dataNode进行通信，来获取每个dataNode的当前数据块的大小，然后选择出一个最小的值，将当前的所有dataNode都同步到该大小。再重新建立线管。

（5）在线管中删除故障节点，将数据写入线管中正常的dataNode，即新管道。

（6）当文件关闭后，若nameNode发现副本数不足，会在其他的dataNode上创建新的副本。