集群搭建实例总结
来源:互联网 发布:.win域名 编辑:程序博客网 时间:2024/06/05 18:55
一:搭建集群关键词:
服务器 :内存 硬盘 CPU
显示屏
网线(光纤)
机柜(机架)
外设(如键盘鼠标等)
交换机
预备电源(备用电源以防意外断电)
二 选择服务器考虑因素:
服务器的类型一般机架式,塔式,刀片式三种
一台服务器的内存至少32GB商业常用为64 128 256居多,硬盘最大容量,一般十几到二十几GB大小,CPU个数,2或者4颗居多,接口类型 一般为SAS,产品结构1U或者2U(U即是服务器的厚度单位)
如搭建200T容量的集群所需实际磁盘空间考虑的因素:
首先有三个副本即200T*3=600T
然后磁盘的利用率(实际存放的数据空间量)为85%即是600T/0.85=705T+45T(预算空间)=750T
以集群中配置服务器最大内存为24T为例所需datanode节点数
750T/24T=37个+NN +SNN+RM+RM备用+Zookeeper(Jounal Node)*3=44台
解释如下:
37为Datanode个数
NN即为NameNode
SNN=StandbyNameNode为NN的备用结点.
RM为RourseManager
ZK与JN在同一台节点上,因为一旦NN发生故障ZK会读取JN的信息,以便于将转移的SNN中
为了降低集群的耦合性.以防在集群发生故障时,避免造成无可挽回的损失从而将RM与NN剥离到两个节点上
三 下面两张图为别为集群的报表图,和集群的搭建图
更多服务器实时信息和更为详细参数参见 中关在线http://detail.zol.com.cn/389/388856/param.shtml
0 0
- 集群搭建实例总结
- ElasticSearch集群搭建实例
- MongoDB集群搭建实例
- ElasticSearch集群搭建实例
- 多实例redis集群搭建
- [001]kafka集群搭建总结
- 初始ZooKeeper与集群搭建实例
- Hadoop 2.7版本 集群环境搭建实例
- ElasticSearch学习四:集群搭建实例
- 初始ZooKeeper与集群搭建实例
- 初始ZooKeeper与集群搭建实例
- 初始ZooKeeper与集群搭建实例
- rabbitmq单机多实例集群搭建
- windows系统搭建redis集群实例
- 初始ZooKeeper与集群搭建实例
- redis集群搭建(6节点单实例)
- 学习总结三:搭建ZooKeeper服务器集群
- 学习总结十七:ZooKeeper集群搭建
- 【JNI】第一个JNI程序(免弯路总结)
- NDK导入Eclipse CDT出现jni.h找不到解决方法
- UIScrollView和UIPageControl配合使用完成引用介绍页面
- 第4周实践项目-- 单链表应用(2)
- PS, PES关系总结
- 集群搭建实例总结
- Android Service
- 在Cordova项目中创建简单的iOS插件
- 第10周—项目1 - 二叉树算法库
- Xcode7创建 .pch 文件
- linux find 命令忽略某个或多个子目录的方法
- 数据结构--图 的JAVA实现(上)
- git
- 495个C语言问题(摘录)