orcfile 与 parpuet 的压缩测试
来源：互联网 发布：网络英语考试时间 编辑：程序博客网 时间：2024/06/10 01:38
近期使用hive对orc 与 parpuet做了初步的压缩比分析, 通过压缩2.3表数据,得到的结论为:
![]()
1. 非压缩的orc/parpuet ,parpuer查询与文件大小,应较好一些.
2. 经过压缩算法: parpuet 的gzip压缩方式的压缩比最小, 达到15% - 25%
3. 写入速度最快的应是orc, 较parpuet快了将近1.5倍.
后续会对orc/parpuet进行深入的测试及性能分析
对比说明:
0 0
- orcfile 与 parpuet 的压缩测试
- ORCFile测试
- Mapreduce读取OrcFile格式的改造
- 测试表的压缩
- hive各种文件格式与压缩方式的结合测试
- hadoop mapreduce读取orcfile的java代码示例
- 谈一谈ORCFile
- Xtrabackup备份恢复常用命令与压缩测试
- 压缩与解压2---文件的压缩
- ffmpeg的yuv压缩h264测试代码
- Unity下资源的压缩测试
- 文件的压缩与解压缩
- 语音的播放与压缩
- 压缩与解压缩的实现
- 字符串的压缩与解压
- 文件的压缩与打包
- Linux的压缩与解压
- 图片的压缩与裁剪
- Makfile wildcard:扩展通配符, notdir:去除路径, patsubst:替换通配符
- pip安装使用官方的源无法安装问题解决
- Android studio使用百度SDK
- C++11网络编程
- Day02-转义、常变量、printf和scanf、命名、驼峰标志、注释
- orcfile 与 parpuet 的压缩测试
- Geometry Looping in geometry networks 在几何网络中的几何循环
- JavaScript中的对象及层级关系、常用函数
- Day3-进制转换、位运算、三目运算符、switch、if
- 记一次驴唇不对马嘴的DIY之旅（四）
- 【跟我学spring 4.0 】之第一节-springhello 的创建
- BestCoder Round #67 (div.2)总结
- codeforces 603 C. Load Balancing 贪心
- 【Android开发经验】来来来，同学，咱们讨论一下“只能在UI主线程更新View”这件小事
