Hadoop计算文件大小
来源:互联网 发布:崇州行知中学 编辑:程序博客网 时间:2024/06/10 12:25
//Hadoop计算文件大小:
public static void main(String[] args) throws IOException{
String tablePath= pathPrefix + args[0].toLowerCase().trim();
Path p = new Path(tablePath);
JobConf conf= new JobConf();
FileSystem fs = p.getFileSystem(conf);
for(FileStatus f : fs.listStatus(p)){
if(f.isDir()){
long len = 0L;
for(FileStatus file: fs.listStatus(f.getPath())){
len = len + file.getLen();
}
System.out.println(f.getPath().toString().replace(pathPrefix, "")
.replace(args[0].toLowerCase().trim(), "")+" size: "+ len/1024/1024+" MB");
}
}
}
private static final String pathPrefix = "hdfs://hdpnn:9000/group/alibaba-dw-icbu/hive/";
- Hadoop计算文件大小
- 计算文件大小
- 计算文件大小
- 计算文件大小
- 计算文件大小
- 计算文件大小
- hadoop查看文件大小
- hadoop 查看文件大小命令
- 计算windows一个文件大小
- 计算文件夹文件大小
- C++计算文件大小
- 语音文件大小计算
- 视频文件大小计算
- VC计算大文件大小
- 图片格式及文件大小计算
- iOS_计算文件大小
- 计算缓存文件大小
- C语言计算文件大小
- rabbitmq 安装配置
- hive中间接实现不等值连接
- 几种编码格式——————————————————————待整理
- Python如何获得本程序的执行时间
- 移植uboot2010.12到飞凌6410
- Hadoop计算文件大小
- 国家气象局免费天气预报接口,城市代码(JSON格式)
- 二分图的最大匹配—匈牙利算法
- 视频文件格式解析之 3GP/MP4 .
- 关于python文件操作
- CLASS-DATA 静态属性-理解
- linux内核input子系统解析
- hdu 1166 地兵布阵 ( 树状数组-初步) (以前 AC 的代码今天交超时!不知道何故!)
- 变送器和传感器有什么区别和联系