从客户端上传文件到HDFS集群

HDFS集群的任意一台的hadoop压缩包拷贝到客户端,通过ftp拷贝到客户端

需要本地新建一个文件,之后运用hadoop fs  -put 文件名 /要存储的位置    例:hadoop fs -put /srv/ftp/hadoop.tar /

查看HDFS的内容:

 

 客户端的ip地址与主机名的映射

 

三台datnode的数据块存放的位置:

 

在HDFS中创建hadoop目录命令:hadoop fs -mkdir /hadoop

上传文件到hadoop目录下:hadoop fs -put 文件名(可以同时上传多个文件) /hadoop

想要递归查看HDFS中的所有文件命令:hadoop fs -ls -R /

查看HDFS中的文件夹的大小:hadoop fs -dus / 或者 hadoop fs -du -s /

从HDFS复制到本地:hadoop fs -get HDFS的文件的位置 要复制到的位置

从HDFS下载多个文件到本地合并成一个文件:hadoop fs -getmerge 文件的位置及名字 文件的位置及名字 本地的文件名

全部评论

相关推荐

10-05 23:02
东北大学 Java
我说句实话啊:那时候看三个月培训班视频,随便做个项目背点八股,都能说3 40w是侮辱价
点赞 评论 收藏
分享
10-09 00:50
已编辑
长江大学 算法工程师
不期而遇的夏天:1.同学你面试评价不错,概率很大,请耐心等待;2.你的排名比较靠前,不要担心,耐心等待;3.问题不大,正在审批,不要着急签其他公司,等等我们!4.预计9月中下旬,安心过节;5.下周会有结果,请耐心等待下;6.可能国庆节前后,一有结果我马上通知你;7.预计10月中旬,再坚持一下;8.正在走流程,就这两天了;9.同学,结果我也不知道,你如果查到了也告诉我一声;10.同学你出线不明朗,建议签其他公司保底!11.同学你找了哪些公司,我也在找工作。
点赞 评论 收藏
分享
点赞 收藏 评论
分享
牛客网
牛客企业服务