巧用备份数节省hdfs空间
来源:互联网 发布:mac下载youtube视频 编辑:程序博客网 时间:2024/05/14 07:54
我们最近遇到一个问题,hdfs硬盘空间不足。各位有没有遇到类似的问题呢?
仔细分析了一下,发现hdfs下有这样一类文件,留之无大用,弃之可惜。
比如说最原始的日志文件........
本来留下他是用来做保险的,但是不一定能用的上,并且占据很大空间。
想想这样的文件该怎么处理好呢?
于是乎 诞生了一个想法,把这一类的数据备份数改小,由3改为2,这样能剩下1份的空间。
用到了这个命令:hadoop fs -setrep 2 XXXX(文件名)
神器啊!!!
元芳,你觉得呢?
- 巧用备份数节省hdfs空间
- cui-----巧用备份数节省hdfs空间
- 节省空间
- 用匿名联合来节省空间
- hadoop HDFS 设置文件复试数(备份数)
- Redis节省空间
- UIScrollView 节省空间
- 用带滚动条的div节省空间
- 优化 Ext4 分区格式化后占用空间(通过降低inode数来节省磁盘空间)
- 优化 Ext4 分区格式化后占用空间(通过降低inode数来节省磁盘空间)
- [数据结构]如何节省程序空间
- proto如何做到节省空间。
- 联合:节省空间的类
- 创建竖表节省空间
- javascript 对象中的函数 定义方式用prototype 动态增添 节省空间
- Ucenter Flickr相册插件 节省主机空间
- 求空间节省比例的方法
- 360 清理系统垃圾,节省负数空间
- Quartz调度
- 深入Flex4 -- 了解Element和Child的异同及Group的渲染优化
- Android一句话区分sendBroadcast与sendStickyBroadcast
- ffmpeg音频格式转换参数
- shell脚本知识点总结
- 巧用备份数节省hdfs空间
- 网络通信Socket编程基础
- java tree <转载>
- NSFileManager常用方法解释
- 什么是装箱和拆箱?怎样操作?
- Tiles傻瓜式入门
- 制作deb包的三种方法
- Hibernate嘻哈的经典总结(34)
- linux递归删除某个文件或目录