博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop + storm = summingbird
阅读量:6205 次
发布时间:2019-06-21

本文共 400 字,大约阅读时间需要 1 分钟。

hot3.png

Twitter 推出一个开源系统,旨在减低批处理和流式处理之间的交换,做法是把二者组合在一起成为一个混合系统。

Twitter 用Hadoop做批处理,用Storm做流式处理,混合系统称为Summingbird。

此类混合系统实际上越来越常见,很多公司认识到他们没办法单靠Hadoop在实时世界生存。我们以前报道过不少公司——其中有Gravity,LinkedIn和Netflix——他们也做过类似的东西。Summingbird也许有点不太一样,原因是Summingbird要处理的数据同时来自Hadoop和Storm,和管道式地处理几个不同的系统不一样。

Yahoo的开源项目 Storm-YARN其实是在Hadoop群里面运行Storm,可以让Storm访问基于Hadoop的数据存储,也值得看看。

转载于:https://my.oschina.net/u/2326085/blog/391282

你可能感兴趣的文章
redis memcached MongoDB
查看>>
设计模式(单例)
查看>>
Mysql学习总结(12)——21分钟Mysql入门教程
查看>>
curl 学习
查看>>
.net Json JavaScriptSerializer JsonHelper类
查看>>
json使用
查看>>
python面向对象-1方法、构造函数
查看>>
Struts2入门---常用的OGNL标签的用法
查看>>
《未来世界的幸存者》笔记
查看>>
【java并发编程艺术学习】(一)初衷、感想与笔记目录
查看>>
实现自己的BeanFactory、AOP以及声明式事务
查看>>
大数据新手之路二:安装Flume
查看>>
amazeui学习笔记--css(基本样式3)--文字排版Typography
查看>>
SQLite 数据类型
查看>>
P1977 出租车拼车
查看>>
帝国CMS浅浅滴谈一下——博客园老牛大讲堂
查看>>
day1作业二:多级菜单操作
查看>>
Swing-BoxLayout用法-入门
查看>>
C++入门
查看>>
对于个人(注册表)与团队(团队表)(两张表没有关联)的展示与可空判断
查看>>