zqrx.net
当前位置:首页 >> hADoop启动守护进程 >>

hADoop启动守护进程

操作系统centos5.5 一个namenode 两个datanode Hadoop版本:hadoop-0.20.203.0 Eclipse版本:eclipse-java-helios-SR2-linux-gtk.tar.gz(使用3.7的版本总是崩溃,让人郁闷) 第一步:先启动hadoop守护进程

先查看具体错误日志,然后看看NetUtils.createSocketAddr(NetUtils.java:134)这里NullPointerException是谁抛出的

单机(本地)模式:这种模式在一台单机上运行,没有分布式文件系统,而是直接读写本地操作系统的文件系统.在单机模式(standalone)中不会存在守护进程,所有东西都运行在一个JVM上.这里同样没有DFS,使用的是本地文件系统.单

首次启动hdfs,需先格式化,使用命令hadoop namenode -format即可

可以看localhost:50030,里面有每个任务的执行情况50070是HDFS的存储情况,看不了执行效率

如果hadoop集群是第一次启动,可以用start-all.sh.比较常用的启动方式是一个一个守护进程来启动,启动的步骤如下.1.启动hadoop的hdfs模块里的守护进程hdfs里面的守护进程启动也有顺序,即:1)启动namenode守护进程;2)启动datanode守护进程;3)启动secondarynamenode守护进程.2.启动mapreduce模块里面的守护进程mapreduce的守护进程启动也是有顺序的,即:1)启动 jobtracker守护进程;2)启动tasktracker守护进程.关闭的步骤正好相反,在这里就不描述了,读者可以自己试一下.

独立模式即本地运行模式(standalone或local mode)无需运行任何守护进程(daemon),所有程序都在单个JVM上执行.由于在本机模式下测试和调试MapReduce程序较为方便,因此,这种模式适宜用在开发阶段.

Hadoop集群启动之后,namenode是通过SSH来启动和停止各个节点上的各种守护进程的,所以在节点之间执行指令的时候不能有密码

在 /usr/local/hadoop/ 下面启动,找到是/opt/Hadoop/下面的hadoop安装包,是不是HADOOP_HOME环境变量配置的有问题.可以到海牛部落交流,那里有好多学习hadoop的朋友

请问你是配置的单节点伪分布式吗?如果不是的话,DataNode与NodeManager这两个守护进程应该在从节点上查看的

网站首页 | 网站地图
All rights reserved Powered by www.zqrx.net
copyright ©right 2010-2021。
内容来自网络,如有侵犯请联系客服。zhit325@qq.com