hadoop2.x集群部署一种一个datanode无法启动 -凯发k8国际

0 0

hadoop2.x集群部署一种一个datanode无法启动10

2015-01-16 09:08:54,145 fatal org.apache.hadoop.hdfs.server.datanode.datanode: exception in securemain
java.net.unknownhostexception: node1: node1
at java.net.inetaddress.getlocalhost(inetaddress.java:1473)
at org.apache.hadoop.security.securityutil.getlocalhostname(securityutil.java:187)
at org.apache.hadoop.security.securityutil.login(securityutil.java:207)
at org.apache.hadoop.hdfs.server.datanode.datanode.instantiatedatanode(datanode.java:2153)
at org.apache.hadoop.hdfs.server.datanode.datanode.createdatanode(datanode.java:2202)
at org.apache.hadoop.hdfs.server.datanode.datanode.securemain(datanode.java:2378)
at org.apache.hadoop.hdfs.server.datanode.datanode.main(datanode.java:2402)
caused by: java.net.unknownhostexception: node1
at java.net.inet4addressimpl.lookupallhostaddr(native method)
at java.net.inetaddress$1.lookupallhostaddr(inetaddress.java:901)
at java.net.inetaddress.getaddressesfromnameservice(inetaddress.java:1293)
at java.net.inetaddress.getlocalhost(inetaddress.java:1469)
... 6 more
2015-01-16 09:08:54,152 info org.apache.hadoop.util.exitutil: exiting with status 1
2015-01-16 09:08:54,164 info org.apache.hadoop.hdfs.server.datanode.datanode: shutdown_msg:
/************************************************************
shutdown_msg: shutting down datanode at java.net.unknownhostexception: node1: node1
************************************************************/
环境ubuntu,hadoop2.6,jdk7
部署三台虚拟机一台namenode,两台datanode;/etc/hostname 都已经配置分布为master,node1,node2
/etc/hosts配置为:
27.0.0.1 localhost
127.0.1.1 ubuntu.localdomain ubuntu

# the following lines are desirable for ipv6 capable hosts
::1 ip6-localhost ip6-loopback
fe00::0 ip6-localnet
ff00::0 ip6-mcastprefix
ff02::1 ip6-allnodes
ff02::2 ip6-allrouters
192.168.184.129 master
192.168.184.130 node1
192.168.184.131 node2

hadoop/etc/hadoo/slaves配置为:
node1
node2
core-site.xml配置为:

fs.defaultfs
hdfs://master:9000/


  hadoop.tmp.dir
  /home/yangwq/hadoop-2.6.0/temp
  a base for other temporary directories.


hdfs-site.xml配置为:



    dfs.replication
    2
   


    dfs.namenode.name.dir
    file:/home/yangwq/hadoop-2.6.0/dfs/name
    true


    dfs.datanode.data.dir
    file:/home/yangwq/hadoop-2.6.0/dfs/data


mapred-site.xml配置为:


        mapreduce.framework.name
        yarn
        true


yarn-site.xml配置为:




    yarn.nodemanager.aux-services
    mapreduce_shuffle


    yarn.nodemanager.aux-services.mapreduce.shuffle.class
    org.apache.hadoop.mapred.shufflehandler



    yarn.resourcemanager.hostname
    master


在启动的时候node1节点的datanode一直无法启动,同时通过ssh登录各节点都是正常。
目前还没有答案

相关推荐

    hadoop2.x新特性介绍

    本片文档是整合的hadoop2.x 的安装与配置,包含三个节点,希望对有所帮助

    《hadoop 2.x hdfs源码剖析》以hadoop 2.6.0源码为基础,深入剖析了hdfs 2.x中各个模块的实现细节,包括rpc框架实现、namenode实现、datanode实现以及hdfs客户端实现等。《hadoop 2.x hdfs源码剖析》一共有5章,其中...

    虚拟机上安装hadoop1.x详解。以三台机器安装hadoop集群。

    理清hadoop1.x与hadoop2.x区别,对比分析。 hadoop是大数据惊世之作,必学的东西,需要知道: 它由哪些部分组成? 各自的作用是什么? 如果工作的?

    hadoop2.x ha环境搭建hadoop2.x ha环境搭建hadoop2.x ha环境搭建

    hadoop2.x 介绍,及对比hadoop1.x的区别。hadoop2.x的新特性的详细介绍。

    这是一份详细,具体的hadoop2.x的学习文档,包含了hadoop2.x中的hadfs文件系统,mr计算框架,yarn资源管理器,使用了图文的方式讲解

    企业级hadoop 2.x项目实战

    hadoop 2.x 安装文档 hadoop 2.5配置

    hadoop 2.x administration cookbook 英文epub 本资源转载自网络,如有侵权,请联系上传者或csdn删除 本资源转载自网络,如有侵权,请联系上传者或csdn删除

    hadoop2.x安装指南.

    hadoop3.x系统文档hadoop3.x系统文档hadoop3.x系统文档

    英文的,讲解hadoop1.x与hadoop2.x配置异同

    hadoop是大数据技术中最重要的框架之一,是学习大数据必备的第一课,在hadoop平台之上,可以更容易地开发和运行其他处理大规模数据的框架。尚硅谷hadoop视频教程再次重磅升级!以企业实际生产环境为背景,增加了更...

    centos7 hadoop 2.7.x 安装部署

    hadoop 2.x administration cookbook 英文azw3 本资源转载自网络,如有侵权,请联系上传者或csdn删除 本资源转载自网络,如有侵权,请联系上传者或csdn删除

    apache hadoop2.x 安装入门详解 pdf

    解决hadoop运行报错:could not locate executable null\bin\winutils.exe in the hadoop binaries. 需要的winutils工具包,各个版本:2.6.x 2.7.x 2.8.x 3.0

    haddop 2.x基础的ppt文档,入门学习资料。。。。。。。

global site tag (gtag.js) - google analytics
网站地图