HDFS上传下载

来源:互联网 发布:手机游戏双开软件 编辑:程序博客网 时间:2024/06/01 07:58
package com.db.hadoop.hdfs;

import java.io.IOException;
import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class HdfsDemo05 {
public static void main(String []args) throws IOException, InterruptedException{

Configuration conf = new Configuration();

//HDFS文件系统地址

URI uri = URI.create("hdfs://master:9000/");
FileSystem fs = FileSystem.get(uri, conf, "hadoop");
//conf.set("dfs.replication", "2"); //设置副本数
Path file = new Path("/in/biao.txt");
FSDataInputStream in = fs.open(file,4096);
IOUtils.copyBytes(in, System.out, 4096, true);

//下载文件系统上的文件
Path src = new Path("/in/biao.txt");
Path dst = new Path("H:\\deng.txt");
fs.copyToLocalFile(src, dst);

//上传本地文件到文件系统
Path dst01 = new Path("/in");
Path src01 = new Path("H:\\dengbiao.txt");
fs.copyFromLocalFile(src01, dst01);
System.out.println("完成。。。。。。。。。。。。");

//删除文件系统上的文件
Path path01 = new Path("/in/dengbiao.txt");
if(fs.delete(path01, true)){
System.out.println("删除完成");
}
}
}









原创粉丝点击