博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
hadoop 常用命令行操作小结
阅读量:7219 次
发布时间:2019-06-29

本文共 684 字,大约阅读时间需要 2 分钟。

 

 

1、检测hadoop运行状态信息

  hadoop dfsadmin -report  打印出hadoop中硬盘的使用信息

  

2、 hadoop中创建归档文件

  hadoop archive -archiveName example.har -p /tmp/input dir1 dir2 -r 2 /tmp/output/

  其中example.har为hadoop中归档文件的特殊格式,-p指定父目录,dir1和dir2为需要归档的文件夹,-r指定了复制的份数,最后为结果输出目录

 

3、 hadoop安全模式

  hadoop dfsadmin -safemode enter | leave | get | wait

  分别表示进入,离开,获取信息,等待

  分布式文件系统刚启动或者datanode汇报给namenode的块信息与namenode中的元数据不同比例超过阀值时,hadoop会进入安全模式。安全阀值由配置项dfs.safemode.threshold.pct来确定。

  默认为0.999。系统处于安全模式中时,不允许对文件进行修改或删除。

 

4、 hadoop 将文件内容追加到hdfs上

  hadoop dfs -appendToFile localfile1 /tmp/output/file2

  hadoop dfs -appendToFile localfile1 localfile2 /tmp/output/file3

 

转载于:https://www.cnblogs.com/ayy2014/p/4251229.html

你可能感兴趣的文章
数据结构之哈夫曼树
查看>>
hdu1038
查看>>
CentOS 6.4下Zabbix的安装配置
查看>>
前端开发注意的问题 ,浏览器兼容性
查看>>
centos和redhat下 uwsgi配置
查看>>
Markdown 学习笔记
查看>>
vue-element-admin 多层路由问题
查看>>
Css问题 margin float 文档流 背景图底部充满
查看>>
JS match() 方法 使用
查看>>
关于shopee平台接口(php)对接示例
查看>>
BNU OJ 51000 BQG's Random String
查看>>
PAT (Advanced Level) 1044. Shopping in Mars (25)
查看>>
hdu 1531 King
查看>>
***R
查看>>
Linux 源码编译安装mysql
查看>>
取消手机端页面长按图片出现保存或者图片被打开的方法
查看>>
关于图片居中问题
查看>>
并发下的死锁问题
查看>>
Winserver下的Hyper-v “未在远程桌面会话中捕获到鼠标”
查看>>
oracle体系结构基础
查看>>