为datanode配置多个数据存储地
来源:互联网 发布:windows下打tar包 编辑:程序博客网 时间:2024/05/08 21:56
datanode配置多个数据存储地址,涉及到以下两个配置项
dfs.name.dir
Determines where on the local filesystem the DFS name node should store the name table(fsimage). If this is a comma-delimited list of directories then the name table is replicated in all of the directories, for redundancy.
这个参数用于确定将HDFS文件系统的元信息保存在什么目录下。
如果这个参数设置为多个目录,那么这些目录下都保存着元信息的多个备份。
如:
<property>
<name>dfs.name.dir</name>
<value>/pvdata/hadoopdata/name/,/opt/hadoopdata/name/</value>
</property>
</property>
Determines where on the local filesystem an DFS data node should store its blocks. If this is a comma-delimited list of directories, then data will be stored in all named directories, typically on different devices. Directories that do not exist are ignored.
这个参数用于确定将HDFS文件系统的数据保存在什么目录下。
我们可以将这个参数设置为多个分区上目录,即可将HDFS建立在不同分区上。
如:
<property>
<name>dfs.data.dir</name>
<value>/dev/sda3/hadoopdata/,/dev/sda1/hadoopdata/</value>
</property>
</property>
0 0
- 为datanode配置多个数据存储地
- HDFS Datanode数据存储格式分析
- DataNode本地数据存储和管理
- HDFS Datanode数据存储格式分析
- HDFS Datanode数据存储格式分析
- hadoop 2.2.0的datanode中存储block的多个文件夹的负载均衡问题
- hadoop2.0的datanode多存储硬盘设置数据副本存放策略
- 使用存储过程将Oracle数据批量导出为多个csv文件
- 使用存储过程将数据批量导出为多个csv文件(ORACLE)
- 将Excel表格多个Sheet表的数据转换为SQL存储语句
- 使用存储过程将Oracle数据批量导出为多个csv文件
- 通过Cloudera Manager为datanode增加数据目录
- hadoop大集群优化配置,datanode节点数量为100
- 同时存储多个数据到数据库
- 24c02存储多个数据
- 为ESXi配置存储
- 轻松为Windows配置多个网关
- 为Windows配置多个网关
- 使用boost 的thread和asio库实现jpeg图片传输
- Android驱动开发全过程
- DedeCMS首页网址中去掉带index.html的解决方法
- 小小恶作剧
- linux设备驱动——一个驱动如何管理多个设备
- 为datanode配置多个数据存储地
- SP2-0640:未连接
- js中执行脚本字符串方法:window.eval()/eval()
- nodejs模块connect分析(一)
- 【央视曝光有毒指甲油 光鲜背后危害大揭底】
- 存储过程夸Sever访问
- 开放源码的微信应用系统 微微信.NET 研究 开始
- arm-none-linux-gnueabi-gcc 版本下载
- LaTeX新人教程,30分钟从完全陌生到基本入门