Hadoop学习之MapRduce笔记
来源：互联网 发布：网游数据提取 编辑：程序博客网 时间：2024/05/18 22:44
一、MapRedduce1和MapReduce2
1、功能
MapReduce分两个版本，MR1和MR2
MR1是Hadoop1.X中的，包括计算+资源调度两个功能
MR2是Hadoop2.X中的，只有计算功能，资源调度被剥离成单独的组件YARN了
2、进程
MR1有具体进程
JobTracker
TaskTracker
MR2没有具体进程，而且集群中不需要部署。只需将写好的代码jar 提交到YARN上运行就可以，具体流程如下图
阅读全文
0 0
- Hadoop学习之MapRduce笔记
- 大数据学习笔记之十七 Google技术之MapRduce和BigTable
- Hadoop实战之MapRduce如何在Job中全局共享数据
- Hadoop MapRduce 重写DBOutputFormat更新mysql数据库
- Hadoop学习笔记之---Hadoop I/O
- Hadoop学习笔记之安装Hadoop
- Hadoop学习笔记之Hadoop简介
- Hadoop学习笔记之--Hadoop的安装
- Hadoop学习笔记之---HDFS
- hadoop学习笔记之wordcount
- hadoop学习笔记之grep
- hadoop学习之--Hive笔记
- Hadoop学习笔记之HDFS
- Hadoop学习笔记之RPC
- Hadoop学习笔记之Hive
- hadoop学习笔记之HDFS
- Hadoop学习笔记之---HDFS
- Hadoop之block学习笔记
- Maven下安装oracle详细步骤
- Windows 2008 R2 DFS分布式文件系统配置
- 复习Java（五）猜测随机生成的数字Program
- Linux服务器上配置多个Tomcat
- ExtJS Grid Tooltip提示 鼠标悬停
- Hadoop学习之MapRduce笔记
- elasticsearch 5.4版本 启动前 linux系统调参
- Android 解决No resource found that matches android:TextAppearance.Material.Widget.Button.Inverse问题
- 修改Tomcat端口号
- AJAX简介
- [新手编程训练项目]003——C语言文本合并03：fread与fwrite函数对文本文件的读写
- 小知识点，小方法
- Markdown和扩展Markdown简洁的语法
- 使用compass编辑sass
