→ 海阔天空
-
0 0
-
hadoop2.x集群部署一种一个datanode无法启动10
2015-01-16 09:08:54,145 fatal org.apache.hadoop.hdfs.server.datanode.datanode: exception in securemain
java.net.unknownhostexception: node1: node1
at java.net.inetaddress.getlocalhost(inetaddress.java:1473)
at org.apache.hadoop.security.securityutil.getlocalhostname(securityutil.java:187)
at org.apache.hadoop.security.securityutil.login(securityutil.java:207)
at org.apache.hadoop.hdfs.server.datanode.datanode.instantiatedatanode(datanode.java:2153)
at org.apache.hadoop.hdfs.server.datanode.datanode.createdatanode(datanode.java:2202)
at org.apache.hadoop.hdfs.server.datanode.datanode.securemain(datanode.java:2378)
at org.apache.hadoop.hdfs.server.datanode.datanode.main(datanode.java:2402)
caused by: java.net.unknownhostexception: node1
at java.net.inet4addressimpl.lookupallhostaddr(native method)
at java.net.inetaddress$1.lookupallhostaddr(inetaddress.java:901)
at java.net.inetaddress.getaddressesfromnameservice(inetaddress.java:1293)
at java.net.inetaddress.getlocalhost(inetaddress.java:1469)
... 6 more
2015-01-16 09:08:54,152 info org.apache.hadoop.util.exitutil: exiting with status 1
2015-01-16 09:08:54,164 info org.apache.hadoop.hdfs.server.datanode.datanode: shutdown_msg:
/************************************************************
shutdown_msg: shutting down datanode at java.net.unknownhostexception: node1: node1
************************************************************/
环境ubuntu,hadoop2.6,jdk7
部署三台虚拟机一台namenode,两台datanode;/etc/hostname 都已经配置分布为master,node1,node2
/etc/hosts配置为:
27.0.0.1 localhost
127.0.1.1 ubuntu.localdomain ubuntu
# the following lines are desirable for ipv6 capable hosts
::1 ip6-localhost ip6-loopback
fe00::0 ip6-localnet
ff00::0 ip6-mcastprefix
ff02::1 ip6-allnodes
ff02::2 ip6-allrouters
192.168.184.129 master
192.168.184.130 node1
192.168.184.131 node2
hadoop/etc/hadoo/slaves配置为:
node1
node2
core-site.xml配置为:fs.defaultfs
hdfs://master:9000/
hadoop.tmp.dir
/home/yangwq/hadoop-2.6.0/temp
a base for other temporary directories.
hdfs-site.xml配置为:
dfs.replication
2
dfs.namenode.name.dir
file:/home/yangwq/hadoop-2.6.0/dfs/name
true
dfs.datanode.data.dir
file:/home/yangwq/hadoop-2.6.0/dfs/data
mapred-site.xml配置为:
mapreduce.framework.name
yarn
true
yarn-site.xml配置为:
yarn.nodemanager.aux-services
mapreduce_shuffle
yarn.nodemanager.aux-services.mapreduce.shuffle.class
org.apache.hadoop.mapred.shufflehandler
yarn.resourcemanager.hostname
master
在启动的时候node1节点的datanode一直无法启动,同时通过ssh登录各节点都是正常。2015年1月16日 18:09
20
0 0 2
目前还没有答案
相关推荐
hadoop2.x新特性介绍
本片文档是整合的hadoop2.x 的安装与配置,包含三个节点,希望对有所帮助
《hadoop 2.x hdfs源码剖析》以hadoop 2.6.0源码为基础,深入剖析了hdfs 2.x中各个模块的实现细节,包括rpc框架实现、namenode实现、datanode实现以及hdfs客户端实现等。《hadoop 2.x hdfs源码剖析》一共有5章,其中...
虚拟机上安装hadoop1.x详解。以三台机器安装hadoop集群。
理清hadoop1.x与hadoop2.x区别,对比分析。 hadoop是大数据惊世之作,必学的东西,需要知道: 它由哪些部分组成? 各自的作用是什么? 如果工作的?
hadoop2.x ha环境搭建hadoop2.x ha环境搭建hadoop2.x ha环境搭建
hadoop2.x 介绍,及对比hadoop1.x的区别。hadoop2.x的新特性的详细介绍。
这是一份详细,具体的hadoop2.x的学习文档,包含了hadoop2.x中的hadfs文件系统,mr计算框架,yarn资源管理器,使用了图文的方式讲解
企业级hadoop 2.x项目实战
hadoop 2.x 安装文档 hadoop 2.5配置
hadoop 2.x administration cookbook 英文epub 本资源转载自网络,如有侵权,请联系上传者或csdn删除 本资源转载自网络,如有侵权,请联系上传者或csdn删除
hadoop2.x安装指南.
hadoop3.x系统文档hadoop3.x系统文档hadoop3.x系统文档
英文的,讲解hadoop1.x与hadoop2.x配置异同
hadoop是大数据技术中最重要的框架之一,是学习大数据必备的第一课,在hadoop平台之上,可以更容易地开发和运行其他处理大规模数据的框架。尚硅谷hadoop视频教程再次重磅升级!以企业实际生产环境为背景,增加了更...
centos7 hadoop 2.7.x 安装部署
hadoop 2.x administration cookbook 英文azw3 本资源转载自网络,如有侵权,请联系上传者或csdn删除 本资源转载自网络,如有侵权,请联系上传者或csdn删除
apache hadoop2.x 安装入门详解 pdf
解决hadoop运行报错:could not locate executable null\bin\winutils.exe in the hadoop binaries. 需要的winutils工具包,各个版本:2.6.x 2.7.x 2.8.x 3.0
haddop 2.x基础的ppt文档,入门学习资料。。。。。。。