CentOS系统下的Hadoop集群(第2期)_机器信息分布表
来源:互联网 发布:富人国 知乎 编辑:程序博客网 时间:2024/05/22 13:48
Hadoop集群(第2期)_机器信息分布表
1、分布式环境搭建
采用4台安装Linux环境的机器来构建一个小规模的分布式集群。
图1 集群的架构
其中有一台机器是Master节点,即名称节点,另外三台是Slaver节点,即数据节点。这四台机器彼此间通过路由器相连,从而实验相互通信以及数据传输。它们都可以通过路由器访问Internet,实验网页文档的采集。
2、集群机器详细信息
2.1 Master服务器
名称
详细信息
机器名称
Master.Hadoop
机器IP地址
192.168.1.2
最高用户名称(Name)
root
最用用户密码(PWD)
hadoop(全小写)
一般用户名称(Name)
hadoop(全小写)
一般用户密码(PWD)
hadoop(全小写)
2.2 Slave1服务器
名称
详细信息
机器名称
Slave1.Hadoop
机器IP地址
192.168.1.3
最高用户名称(Name)
root
最用用户密码(PWD)
hadoop(全小写)
一般用户名称(Name)
hadoop(全小写)
一般用户密码(PWD)
hadoop(全小写)
2.3 Slave2服务器
名称
详细信息
机器名称
Slave2.Hadoop
机器IP地址
192.168.1.4
最高用户名称(Name)
root
最用用户密码(PWD)
hadoop(全小写)
一般用户名称(Name)
hadoop(全小写)
一般用户密码(PWD)
hadoop(全小写)
2.4 Slave3服务器
名称
详细信息
机器名称
Slave3.Hadoop
机器IP地址
192.168.1.5
最高用户名称(Name)
root
最用用户密码(PWD)
hadoop(全小写)
一般用户名称(Name)
hadoop(全小写)
一般用户密码(PWD)
hadoop(全小写)
备注:
添加新用户命令:useradd;修改新用户密码:passwd 用户名
退出当前用户:exit; 登录root用户:su –
3、集群机器实际布局
下面是几张Hadoop集群实际机器的部署情况,可以从图中看到那时的我们怎么实际配置Hadoop集群的。
3.1 Hadoop工作集群
该Hadoop集群机器是学习和研究之用,上面运行着已经搭建好的的Hadoop平台以及运行着一些实际程序。
图3.1-1 Hadoop工作集群部署图(1)
图3.1-2 Hadoop工作集群部署图(2)
上面从两个角度来分别观察Hadoop集群部署,作为Hadoop集群的Master节点,用的是机器较为不错的新Dell,而三台Slave机器则是实验室淘汰的旧Lenovo,用一个小路由器他们组成了一个局域网。
图3.1-3 路由器特写
3.2 Hadoop实验集群
为了方便新成员练习Hadoop技术,又防止在实际Hadoop集群上破坏已运行的程序,故另外弄了两台旧Lenovo电脑组成:一个"主——TMaster";一个"辅——TSlave"。
图3.2-1 Hadoop实验集群部署
上面就是实验室Hadoop集群的样子,虽然很简陋,但足够学习用了。
文章下载地址:http://files.cnblogs.com/xia520pi/HadoopCluster_Vol.2.rar
原文来自:http://www.cnblogs.com/xia520pi/archive/2012/05/16/2503837.html
- CentOS系统下的Hadoop集群(第2期)_机器信息分布表
- CentOS系统下的Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- Hadoop集群(第2期)_机器信息分布表
- CentOS系统下的Hadoop集群(第1期)_CentOS安装配置
- CentOS系统下的Hadoop集群(第7期)_Eclipse开发环境设置
- CentOS系统下的Hadoop集群(第5期)_Hadoop安装配置
- CentOS系统下的Hadoop集群(第3期)_VSFTP安装配置
- CentOS系统下的Hadoop集群(第4期)_SecureCRT使用
- CentOS系统下的Hadoop集群(第6期)_WordCount运行详解
- spring常见错误记录
- java环境变量配置详解(综合整理网络上的资源)
- 什么是架构师? 如何成为一个架构师?
- ACM训练周末总结—12月3日
- VS2015环境下,显示strcpy()函数出错的解决办法
- CentOS系统下的Hadoop集群(第2期)_机器信息分布表
- Reader-Aware Multi-Document Summarization: An Enhanced Model and The First Dataset
- kubernetes1.8原生dashboard部署
- 专为物联网而生的操作系统——TinyOS
- Leetcode 120.Triangle
- 文件夹下文件名正确排序问题
- Ubuntu 16.04 mount error
- 模拟游戏引擎中的灯光实现
- 消息队列系列之分布式消息队列Kafka