java远程连接hadoop
来源:互联网 发布:win10怎么打开ping网络 编辑:程序博客网 时间:2024/05/14 20:00
最近在学习hadoop,在linux上面启动hadoop后准备用java操作hadoop,看了中文的资料都是坑~ 查了英文资料一番折腾终于连上了
String HDFS_PATH = "hdfs://192.168.203.128:9000"; //要连接的hadoop Configuration configuration = new Configuration(); configuration.set("fs.defaultFS", HDFS_PATH); //连接文件系统,FileSystem用来查看文件信息和创建文件 FileSystem fileSystem = FileSystem.get(configuration); //操作文件io,用来读写 configuration.set("fs.hdfs.impl", DistributedFileSystem.class.getName()); //设置处理分布式文件系统 URL.setURLStreamHandlerFactory(new FsUrlStreamHandlerFactory(configuration)); //FsUrlStreamHandlerFactory() 不加参数连接会无法识别的hdfs协议,原因是hadoop在获取处理hdfs协议的控制器时获取了configuration的fs.hdfs.impl值 //获取Hadoop文件 InputStream inputStream = new URL(HDFS_PATH + "/hello.txt").openStream();
阅读全文
0 0
- java远程连接hadoop
- java 远程连接hadoop集群
- Intellij连接远程hadoop
- Eclipse远程连接Hadoop
- eclipse远程连接Hadoop
- 用eclipse远程连接hadoop
- Hadoop 远程连接伪分布式Hadoop异常
- java远程连接access
- java远程连接工具
- Java远程连接access
- java远程连接数据库
- java 连接远程 jedis
- windows eclipse 远程连接 hadoop(linux)
- win7下使用eclipse远程连接hadoop
- 用eclipse远程连接hadoop-2.6.0
- windows eclipse 远程连接 hadoop(linux)
- hdfs远程连接hadoop问题与解决
- eclipse远程连接hadoop hdfs 出错
- 【太虚AR_v0.1】使用教程 | AR录屏
- spring boot启动加载数据
- Java 9 的新特性发布
- Centos7 Docker基本特性入门实践-3
- Android Linker浅析
- java远程连接hadoop
- Android开发中常见的设计模式
- redis 服务器启动与关闭
- this关键字详解
- 如何在IDEA中创建maven项目,然后把项目所要的依赖整体打成一个jar包
- 进阶阿里巴巴之路——招聘要求汇总
- 极乐技术周报(第二十四期)
- StringUtils工具类用法
- KMP算法