Hadoop能做什么
来源:互联网 发布:安卓上使用数据库 编辑:程序博客网 时间:2024/04/27 04:08
摘要:本文从Hadoop的初衷、大数据时代背景、Hadoop的使用者来探讨“Hadoop能做什么”这个问题。
关键词:Hadoop 大数据
Hadoop是Doug Cutting 基于Google公司的GFS和MapReduce思想不断完善项目Nutch中脱胎而出的。
Hadoop是适合于大数据的分布式存储和处理平台,是一种开源的框架。
大数据时代已经到来,给我们的生活、工作、思维方式都带来变革。如何寻求大数据后面的价值,既是机遇又是挑战。不管是金融数据、还是电商数据、又还是社交数据、游戏数据.......这些数据的规模、结构、增长的速度都给传统数据存储和处理技术带来巨大考验。幸运的是,Hadoop的诞生和所构建成的生态系统给大数据的存储、处理和分析带来了曙光。
不管是国外的著名公司Google、Yahoo!、微软、亚马逊、 EBay、FaceBook、Twitter、LinkedIn等和初创公司Cloudera、Hortonworks等,又还是国内的著名公司中国移动、阿里巴巴、华为、腾讯、百度、网易、京东商城等,都在使用Hadoop及相关技术解决大规模化数据问题,以满足公司需求和创造商业价值。
例如:Yahoo! 的垃圾邮件识别和过滤、用户特征建模;Amazon.com(亚马逊)的协同过滤推荐系统;Facebook的Web日志分析;Twitter、LinkedIn的人脉寻找系统;淘宝商品推荐系统、淘宝搜索中的自定义筛选功能......这些应用都使用到Hadoop及其相关技术。
“Hadoop能做什么?” ,概括如下:
1、搜索引擎(Doug Cutting 设计Hadoop的初衷,为了针对大规模的网页快速建立索引)。
2、大数据存储,利用Hadoop的分布式存储能力,例如数据备份、数据仓库等。
3、大数据处理,利用Hadoop的分布式处理能力,例如数据挖掘、数据分析等。
4、科学研究,Hadoop是一种分布式的开源框架,对于分布式计算有很大程度地参考价值。
Source:
1 http://www.wangluqing.com/2014/02/hadoop-doing/
2 Who uses Hadoop? http://wiki.apache.org/hadoop/PoweredBy
3 Who We Are? http://hadoop.apache.org/who.html
4 http://blog.sina.com.cn/s/blog_687194cd01017lgu.html
5 http://thinkinginhadoop.iteye.com/blog/709947
- hadoop能做什么?
- Hadoop能做什么
- 大数据中Hadoop能做什么
- 通俗解释Hadoop究竟能做什么?
- 什么是Hadoop 它能做什么
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- Hadoop到底能做什么?怎么用hadoop?
- hadoop的一系列子项目能为我们做什么?
- 用通俗易懂的话说下hadoop是什么,能做什么
- 用通俗易懂的话说下hadoop是什么,能做什么
- 用通俗易懂的话说下hadoop是什么,能做什么
- 用通俗易懂的话说下hadoop是什么,能做什么
- LeetCode 题解(21): Set Matrix Zeros
- 如果软件移到云端?
- Android SDK更新 Connection to http://dl-ssl.google.com refused 解决方法
- Vim 自动补全成对的括号和引号
- codeforces 397B
- Hadoop能做什么
- 数据简单处理
- Difference between fflush and fsync
- 算是继往开来
- linux查看硬件设备信息
- Valid Number
- 二叉排序树、平衡树、红黑树
- usaco training 4.2.3 Job Processing 题解
- EmEditor的两个妙用