博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop之HDFS上测试创建目录、上传、下载文件(这些基本操作记录下来,总有忘的时候)
阅读量:4300 次
发布时间:2019-05-27

本文共 730 字,大约阅读时间需要 2 分钟。

 

1、HDFS上创建目录

${HADOOP_HOME}/bin/hdfs dfs -mkdir /demo1
  • 1

2、上传本地文件到HDFS上

${HADOOP_HOME}/bin/hdfs dfs -put ${HADOOP_HOME}/etc/hadoop/core-site.xml /demo1
  •  

3、上传本地文件到HDFS上

${HADOOP_HOME}/bin/hdfs dfs -cat /demo1/core-site.xml
  • 1

4、从HDFS上下载文件到本地

${HADOOP_HOME}/bin/hdfs dfs -get /demo1/core-site.xml

 

其他:

hdfs dfs -cat   /demo2/1.txt |grep liugen     查看文件

hdfs dfs -mkdir -P  /demo2/haha/wa    创建多级目录(不存在的也给我创建出来)

hdfs dfs  -rm -R  删除多级目录

hdfs dfs  -ls  /demo 查看目录下内容

hdfs dfs -ls -R  /demo  把目录和子目录下的文件都列出来

hdfs dfs -chmod -R  777  /demo  对目录和子目录都修改权限

hdfs dfs  -get  /demo2/1.txt   liugen.txt       把hdfs文件拉到本地,并重命名。

hdfs dfs -put  -f   1.txt   /demo2     将hdfs中已有的文件强制覆盖(-f)

hdfs dfs -cp /demo2/1.txt  /user/          //复制文件

hdfs dfs -mv /-user/file.csv   /demo2/1.csv   //移动文件并重命名(原文件没了)

 

 

 

 

 

转载地址:http://dwvws.baihongyu.com/

你可能感兴趣的文章
设计模式05_单例
查看>>
设计模式06_原型
查看>>
设计模式07_建造者
查看>>
设计模式08_适配器
查看>>
设计模式09_代理模式
查看>>
设计模式10_桥接
查看>>
设计模式11_装饰器
查看>>
设计模式12_外观模式
查看>>
设计模式13_享元模式
查看>>
设计模式14_组合结构
查看>>
设计模式15_模板
查看>>
海龟交易法则01_玩风险的交易者
查看>>
CTA策略02_boll
查看>>
vnpy通过jqdatasdk初始化实时数据及历史数据下载
查看>>
设计模式19_状态
查看>>
设计模式20_观察者
查看>>
vnpy学习10_常见坑
查看>>
vnpy学习10_常见坑02
查看>>
用时三个月,终于把所有的Python库全部整理了!拿去别客气!
查看>>
pd.stats.ols.MovingOLS以及替代
查看>>