博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop的HA集群HDFS搭建-错误记录
阅读量:4126 次
发布时间:2019-05-25

本文共 737 字,大约阅读时间需要 2 分钟。

  1. Live Nodes显示为0

正常节点应该显示为3

* 第一步:查看datanode日志tail -100 /home/hadoop-2.5.1/logs/hadoop-root-datanode-node2.log
* 异常问题:namenode和datanode的ID不一致
* 原因:重复格式化。在第一次格式化dfs后,启动并使用了hadoop,后来又重新执行了格式化命令(hdfs namenode -format),这时namenode的clusterID会重新生成,而datanode的clusterID 保持不变。
* 解决办法:将name/current下的VERSION中的clusterID复制到data/current下的VERSION中,覆盖掉原来的clusterID,即保持一致。
* 重新启动

参考链接:[https://my.oschina.net/zhongwenhao/blog/603744][3]

2. eclipse上传文件到Hadoop失败的原因及解决方法

正确上传文件
原因:系统没有权限
解决办法:修改文件vim hadoop/etc/hadoop/hdfs-site.xml
添加配置:

dfs.permissions
false
  1. hadoop报错:could only be replicated to 0 nodes, instead of 1
    原因:多次格式化hadoop导致版本信息不一致
    解决办法:停掉所有服务,重新格式化
    • 先把服务都停掉 stop-all.sh
    • 格式化 hadoop namenode -foramt
    • 重新启动所有服务 start-all.sh
      注意,这里可能会导致问题1!!

转载地址:http://xhepi.baihongyu.com/

你可能感兴趣的文章
IPS开发手记【一】
查看>>
Java通用字符处理类
查看>>
文件上传时生成“日期+随机数”式文件名前缀的Java代码
查看>>
Java代码检查工具Checkstyle常见输出结果
查看>>
北京十大情人分手圣地
查看>>
Android自动关机代码
查看>>
Android中启动其他Activity并返回结果
查看>>
2009年33所高校被暂停或被限制招生
查看>>
GlassFish 部署及应用入门
查看>>
iWatch报错: Authorization request cancled
查看>>
iWatch报错: Authorizationsession time out
查看>>
如何运行从网上下载的iWatch项目详细步骤.
查看>>
X-code7 beta error: warning: Is a directory
查看>>
Error: An App ID with identifier "*****" is not avaliable. Please enter a different string.
查看>>
X-code beta 开发iWatch项目,运行没有错误,但是某些操作一点就崩,而且找不错误的原因场景一
查看>>
Xcode 报错: Extra argument in call
查看>>
iTunes Connect 上传APP报错: Communication error. please use diagnostic mode to check connectivity.
查看>>
#import <Cocoa/Cocoa.h> 报错 Lexical or Preprocessor Issue 'Cocoa/Cocoa.h' file not found
查看>>
`MQTTClient (~> 0.2.6)` required by `Podfile`
查看>>
X-Code 报错 ld: library not found for -lAFNetworking
查看>>