HDFS For hdfs-site.xml
来源:互联网 发布:数据双活 编辑:程序博客网 时间:2024/05/16 19:21
一、重要部分
1. dfs.name.dir /usr/hadoop/hdfs/name 存贮在本地的名字节点数据镜象的目录,作为名字节点的冗余备份 2. dfs.data.dir /usr/hadoop/hdfs/data 数据节点的块本地存放目录 3. dfs.replication 3 缺省的块复制数量 4. dfs.webhdfs.enabled true 使WebHDFS(REST API)在Namenodes和数据节点。 5. dfs.namenode.secondary.http-address centos201:9001 二Namenode HTTP服务器地址和端口。
二、其他部分
1. dfs.namenode.logging.level info 输出日志类型 2. dfs.secondary.http.address 0.0.0.0:50090 备份名称节点的http协议访问地址与端口 3. dfs.datanode.address 0.0.0.0:50010 数据节点的TCP管理服务地址和端口 4. dfs.datanode.http.address 0.0.0.0:50075 数据节点的HTTP协议访问地址和端口 5. dfs.datanode.ipc.address 0.0.0.0:50020 数据节点的IPC服务访问地址和端口 6. dfs.datanode.handler.count 3 数据节点的服务连接处理线程数 7. dfs.http.address 0.0.0.0:50070 名称节点的http协议访问地址与端口 8. dfs.https.enable false 支持https访问方式标识 9. dfs.https.need.client.auth false 客户端指定https访问标识 10. dfs.https.server.keystore.resource ssl-server.xml Ssl密钥服务端的配置文件 11. dfs.https.client.keystore.resource ssl-client.xml Ssl密钥客户端的配置文件 12. dfs.datanode.https.address 0.0.0.0:50475 数据节点的HTTPS协议访问地址和端口 13. dfs.https.address 0.0.0.0:50470 名称节点的HTTPS协议访问地址和端口 14. dfs.datanode.dns.interface default 数据节点采用IP地址标识 15. dfs.datanode.dns.nameserver default 指定DNS的IP地址 16. dfs.replication.considerLoad true 加载目标或不加载的标识 17. dfs.default.chunk.view.size 32768 浏览时的文件块大小设置为32K 18. dfs.datanode.du.reserved 0 每个卷预留的空闲空间数量 19. dfs.name.edits.dir ${dfs.name.dir} 存贮文件操作过程信息的存贮目录 20. dfs.web.ugi webuser,webgroup Web接口访问的用户名和组的帐户设定 21. dfs.permissions true 文件操作时的权限检查标识 22. dfs.permissions.supergroup supergroup 超级用户的组名定义 23. dfs.block.access.token.enable false 数据节点访问令牌标识 24. dfs.block.access.key.update.interval 600 升级访问钥时的间隔时间 25. dfs.block.access.token.lifetime 600 访问令牌的有效时间 26. dfs.datanode.data.dir.perm 755 27. dfs.replication.max 512 块复制的最大数量 28. dfs.replication.min 1 块复制的最小数量 29. dfs.block.size 67108864 缺省的文件块大小为64M 30. dfs.df.interval 60000 磁盘空间统计间隔为6秒 31. dfs.client.block.write.retries 3 块写入出错时的重试次数 32. dfs.blockreport.intervalMsec 3600000 块的报告间隔时为1小时 33. dfs.blockreport.initialDelay 0 块顺序报告的间隔时间 34. dfs.heartbeat.interval 3 数据节点的心跳检测间隔时间 35. dfs.namenode.handler.count 10 名称节点的连接处理的线程数量 36. dfs.safemode.threshold.pct 0.999f 启动安全模式的阀值设定 37. dfs.safemode.extension 30000 当阀值达到量值后扩展的时限 38. dfs.balance.bandwidthPerSec 1048576 启动负载均衡的数据节点可利用带宽最大值为1M 39. dfs.hosts 可与名称节点连接的主机地址文件指定 40. dfs.hosts.exclude 不充计与名称节点连接的主机地址文件设定 41. dfs.max.objects 0 文件数、目录数、块数的最大数量 42. dfs.namenode.decommission.interval 30 名称节点解除命令执行时的监测时间周期 43. dfs.namenode.decommission.nodes.per.interval 5 名称节点解除命令执行是否完检测次数 44. dfs.replication.interval 3 名称节点计算数据节点的复制工作的周期数 45. dfs.access.time.precision 3600000 充许访问文件的时间精确到1小时 46. dfs.support.append false 是否充许链接文件指定 47. dfs.namenode.delegation.key.update-interval 86400000 名称节点上的代理令牌的主key的更新间隔时间为24小时 48. dfs.namenode.delegation.token.max-lifetime 604800000 代理令牌的有效时间最大值为7天 49. dfs.namenode.delegation.token.renew-interval 86400000 代理令牌的更新时间为24小时 50. dfs.datanode.failed.volumes.tolerated 0 决定停止数据节点提供服务充许卷的出错次数。0次则任何卷出错都要停止数据节点
阅读全文
1 0
- HDFS For hdfs-site.xml
- HDFS For core-site.xml
- hdfs-site.xml
- hdfs-site.xml
- 配置hdfs-site.xml
- hdfs-site.xml
- hadoop2.2.0 hdfs-site.xml
- Hdfs-site.xml配置说明
- hadoop配置文件hdfs-site.xml
- Hadoop 參數設定 – hdfs-site.xml
- Hadoop 參數設定 – hdfs-site.xml
- hdfs-site.xml默认配置及意思
- Hadoop配置项(hdfs-site.xml)
- Hadoop配置项整理(hdfs-site.xml)
- Hadoop配置项整理(hdfs-site.xml)
- Hadoop配置项整理(hdfs-site.xml)
- Hadoop配置项整理(hdfs-site.xml)
- hadoop-2.2.* hdfs-site.xml 配置说明
- 视频学习笔记:Android OpenGL渲染YUV420P图像
- 最优化算法
- 面试题3—二维数组中的查找
- centos6/7 装 activemq
- Oracle自动生成数据字典的SQL语句
- HDFS For hdfs-site.xml
- FFmpeg源代码简单分析:avformat_open_input
- strtok()与strtok_r()
- 写作建议
- 贪心算法-活动安排问题
- Kafka单机模式搭建
- Codeforces Bus to Udayland
- 门面模式,产品经理
- 大学生活。