美文网首页阿里云大数据 爬虫Python AI Sql大数据
阿里云部署hadoop问题-hosts文件以及50070/dfs

阿里云部署hadoop问题-hosts文件以及50070/dfs

作者: VincentPeng | 来源:发表于2018-01-26 19:35 被阅读38次

1.在完成start-dfs.sh 后jps不显示nameNode问题

刚开始这个找这个问题,大多说namenode没有格式化成功,但是重新格式化依旧没有该node;然后就去看日志,日志打印了一个异常

org.apache.hadoop.hdfs.server.blockmanagement.CacheReplicationMonitor: Scanned 0 directive(s) and 0 block(s) in 0 millisecond(s).

显示的是没有获取到block,但是ssh免密是没问题的,然后就怀疑是连接的问题
之前设置的hosts映射是

外网ip hadoop001

改成了内网ip 映射

内网ip hadoop001

之后重启dfs,jps 节点都齐全了

2.关于访问ip:50070/dfshealth.html问题

用浏览器查看状态,一直显示无法访问,查看log,显示的是超时
登录阿里云后台管理,发现要设置安全组,

网络->安全组->添加新的规则 开放50070

之后再次登录,进入网页 ok

相关文章

网友评论

    本文标题:阿里云部署hadoop问题-hosts文件以及50070/dfs

    本文链接:https://www.haomeiwen.com/subject/thiwaxtx.html