研究spark的源起
来源:互联网 发布:通联数据校招 编辑:程序博客网 时间:2024/04/28 13:49
公司统计的数据越来越多,现在各个系统还是用mysql、oracle来存储分析据的。根据长远考虑,关系型数据的问题总是要来的,我们还得为未来做准备。于是,着手开始用hadoop了.一边开始招人,一边积攒服务器(等着到时候多些节点,哈哈,公司很穷呀!)终于来了个同事,他有两年hadoop的经历,听他说最后的项目没有真正上线,我不免有些纳闷:是啥问题呢,是hadoop不靠谱,还是技术不靠谱呀...。我想,我们只有要多实践才能出真知。
经过几个月体验后总结如下:
1.hadoop到底能做什么,一定要非常清楚,绝不可能代替关系型数据库。
2.离线计算和实时计算的目前的技术体系是不一样的
3.hbase也不能像玩关系型数据库那样玩,使用也是有有限制条件的
4.技术人要对统计的业务需求要非常清楚,钻研技术不能忽视业务
5失望和希望总会并存,要学会发现
0 0
- 研究spark的源起
- Spark核心RDD的研究
- 架构的源起
- 架构的源起
- 首款用Cubieboard搭建起的Spark/Hadoop ARM集群
- 道 德 的 起 源
- Hadoop的源起----lucene
- 学习Linux的源起
- Spark研究一 什么是Spark
- spark研究步骤
- Spark内核研究
- spark 各组件研究
- Spark FrameWork源码研究
- Spark日志研究
- Spark研究综述
- Spark-研究笔记1:重要的静态工厂类SparkManager
- Spark streaming 跟踪kafka offset的问题研究
- Hadoop的源起与体系介绍
- 最快最简单的排序——桶排序
- hdu——2586——How far away ?(lca)
- LeetCode(Palindrome Partitioning) 将字符串分割成回文字符串
- 第6周作业2-IF语句大显身手之成绩判断
- 智游推送小测试:你的APP是什么性格?
- 研究spark的源起
- 在服务中监听电话的通话状态
- 配置 Profile Manager(2)
- Access字符串处理函数整理
- 第6周作业1-闰年之循环判断
- C#软件开发实例.私人订制自己的屏幕截图工具(一)功能概览
- 用wifi调试android手机
- 使用QuickContactsBadge查询联系人时需要注意的事项
- 调试器检测技术 - 2、PEB.NtGlobalFlag , Heap.HeapFlags, Heap.ForceFlags