Hadoop的单机模式、伪分布式模式和完全分布式模式
来源:互联网 发布:ubuntu命令窗口 编辑:程序博客网 时间:2024/04/29 15:31
单机(非分布式)模式
这种模式在一台单机上运行,没有分布式文件系统,而是直接读写本地操作系统的文件系统。
伪分布式运行模式
这种模式也是在一台单机上运行,但用不同的Java进程模仿分布式运行中的各类结点(NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode),请注意分布式运行中的这几个结点的区别:从分布式存储的角度来说,集群中的结点由一个NameNode和若干个DataNode组成,另有一个SecondaryNameNode作为NameNode的备份。从分布式应用的角度来说,集群中的结点由一个JobTracker和若干个TaskTracker组成,JobTracker负责任务的调度,TaskTracker负责并行执行任务。TaskTracker必须运行在DataNode上,这样便于数据的本地计算。JobTracker和NameNode则无须在同一台机器上。
一个机器上,即当namenode,又当datanode,或者说即是jobtracker,又是tasktracker。没有所谓的在多台机器上进行真正的分布式计算,故称为"伪分布式"。
完全分布式模式
真正的分布式,由3个及以上的实体机或者虚拟机组件的机群。
摘自:http://blog.csdn.net/wds555/article/details/48492589
阅读全文
0 0
- Hadoop的单机模式、伪分布式模式和完全分布式模式
- Hadoop的单机模式、伪分布式模式和完全分布式模式
- Hadoop的单机模式、伪分布式模式和完全分布式模式
- Hadoop单机伪分布式模式
- Hadoop单机模式的伪分布式安装
- hadoop单机模式和伪分布式模式安装过程
- hadoop单机模式和伪分布式模式安装过程
- hadoop单机模式和伪分布式模式安装过程
- Hadoop的安装(伪分布式模式和分布式模式)
- Hadoop单机模式和伪分布式搭建教程CentOS
- Hadoop单机模式和伪分布式搭建教程CentOS
- Hadoop单机模式和伪分布式搭建教程CentOS
- Hadoop单机模式和伪分布式搭建教程CentOS
- Hadoop单机模式和伪分布式搭建教程CentOS
- [Nutch]Hadoop单机伪分布式模式的使用(deploy)
- centos下搭建单机和伪分布式hadoop环境-(3)配置hadoop的伪分布式模式
- hadoop之单机模式与伪分布式模式部署
- hadoop学习(二)-----配置hadoop单机伪分布式模式
- 中国银行的海外IT建设之路
- 在尝试分配 *字节 (kxs-heap-c,kghsstk) 时进程内存不足
- LeetCode-621:Task Scheduler (任务调度) -- medium
- 利用HttpUtils实现断点续传下载文件
- Linux 的字符串截取很有用。有八种方法。
- Hadoop的单机模式、伪分布式模式和完全分布式模式
- Linux基础(上)
- 《数据库原理》实验一
- 各种报表插件集合
- 0 导读
- 自己做的一个安卓小应用
- echo 版本查看
- Java算法实现之KMP算法
- python使用pandas处理大数据节省内存技巧