HDFS的Java API操作本地环境搭建

 

HDFS的Java API操作本地环境搭建

 

 

1、创建一个Java project 项目：

 

2、导入jar包：

把Hadoop根目录下的 JAR包和lib下的JAR包导进去：

 

 

3、修改本地 hosts 文件：

 

在里面加入 虚拟机的IP地址和主机名：

 

 

不用FileSystem连接，用URL连接一下看看是否可以连通：

 

 

代码为查看HDFS 的一个文件：

 

 

代码为：

package hdfs; import java.io.InputStream;import java.net.URL; importorg.apache.hadoop.fs.FsUrlStreamHandlerFactory;import org.apache.hadoop.io.IOUtils; public class HDFS {       staticfinal StringPATH="hdfs://192.168.1.100:9000/user/hadoop/input/baozi.txt";       publicstatic void main(String args[]) throws Exception{                 URL.setURLStreamHandlerFactory(newFsUrlStreamHandlerFactory());              finalURL url=new URL(PATH);              finalInputStream in=url.openStream();              IOUtils.copyBytes(in,System.out, 1024, true);       }}