大数据的实时处理STORM简介

来源:互联网 发布:怎么查ftp的端口号 编辑:程序博客网 时间:2024/05/17 09:03

《大数据的实时处理STORM简介》

作者:chszs,转载需注明。博客主页:http://blog.csdn.net/chszs

新技术如社交媒体、电邮、博客、地理信息系统GIS、无线射频识别RFID和智能手机等为基于服务信息构建提供了新的机会。


处理大数据常见的方法和框架是Apache Hadoop,它以批处理的方式运行数据处理任务。现在,如果需要实时处理数据和实时显示数据,那这种基于批处理的方式并不是很适合。
STORM是一个开源框架,来自Twitter公司,其目标是大数据流的实时处理。STORM可以可靠地处理无限的数据流,实时处理Hadoop的批任务。STORM非常简单,支持所有的编程语言,使用它充满了乐趣。

STORM有很多适用场景:实时分析、在线机器学习、连续计算、分布式RPC、分布式ETL、易扩展、支持容错,可确保你的数据得到处理,易于构建和操控。

STORM的地址见:
http://storm-project.net/

随后将继续深入。

原创粉丝点击