zqrx.net
当前位置:首页 >> hADoop目录 >>

hADoop目录

hadoop是apache软件基金会旗下的一个开源分布式计算平台.以hadoop分布式文件系统(hdfs,hadoop distributed filesystem)和mapreduce(google mapreduce的开源实现

默认位置是:${hadoop.log.dir}/logs/*-jobtracker-*.log,该文件每天生成一个,旧的日志后缀是日期,当天的日志文件后缀是“.log”,其中${hadoop.log.dir}默认值是hadoop安装目录,即${HADOOP_HOME}.

用ls命令, 如果返回一行说明是文件,如果多行则表示目录hadoop fs -ls $path | grep $path | wc -l

移动目录的命令很简单啊,跟Linux shell的命令差不多:hdfs dfs -mv 被移动的目录A 目标目录B直接移动就行,不知道能否解决你的问题.

你的配置文件mapred-site.xml有问题,估计是哪个配置项写错了,是否可以将此文件内容贴出来看看,最简单的情况下mapred-site.xml的配置如下,一个自定义选项即可,以下是伪分布式或者单机部署配置,分布式将修改为你的jobtracker节点即可.mapred.job.trackerlocalhost:9001

hadoop fs -mkdir 2013/07/10/15.在hdfs上创建目录的时候,默认保存到 /user/用户名 下.

可以fdisk -l 看到 但是它本身是自己的文件系统 就是hdfs 你从linux本地是看不到的 想看里面的文件可以使用如下命令 hadoop fs -ls

作为hadoop软件核心功能的本身是要求所有机器是一样的,hdfs上的目录是全局统一的.当然登录的用户也要求一样的.目录hadoop主要是运行在同构的集群中,对异构环境支持并不好,所以结论是所有环境尽可能一致.

能贴个图,说详细些么 乍看 /user/hadoop/ 像是你的hadoop安装目录,/tmp/hadoop-hadoop/dfs/name是hdfs的路径

cd /cygdrive/D 进入D逐级查找或者cd ~ ; cd SDF/hadoop

网站首页 | 网站地图
All rights reserved Powered by www.zqrx.net
copyright ©right 2010-2021。
内容来自网络,如有侵犯请联系客服。zhit325@qq.com