由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Programming版 - Flink vs Spark
相关主题
Spark会干掉Storm吗?Spark已经out了,能跳船的赶快
Flink可以contributespark contributors
Flink Sparks Next Wave of Distributed Data Processing看了flink,不能不说有点小期待
看了一点kafkaspark就是因为吃饱了要做rdd成immutable导致了无法实现真正意义上的stream processing吧?
这次python糗大了感觉flink出来之后,hadoop就显得不怎么再需要了
大家用spark streaming很爽吗?搞不懂为什么大牛说Hbase不如C*?
这里 大大牛多久学会spark?IBM is all into Spark
ES怎么玩?赵老师讲讲flink
相关话题的讨论汇总
话题: flink话题: microbatch话题: spark话题: vs话题: 阿里
进入Programming版参与讨论
1 (共1页)
s********k
发帖数: 6180
1
这两天阿里开源Blink热闹非凡,不知道业界除了阿里,美国这边哪家在大规模用Flink
?是twitter?另外这个stream理解成time interval足够小的microbatch对吗?如果这
样的话streaming和microbatch之间本质区别是什么?为什么会导致两种完全不同的架
构?
h**********c
发帖数: 4120
2
开源对普通马公中小企业创新已经没有什么推动力。
鱼龙混杂,最后就是谁也别干正经事。上线塌了,再换一个。不差钱。

Flink

【在 s********k 的大作中提到】
: 这两天阿里开源Blink热闹非凡,不知道业界除了阿里,美国这边哪家在大规模用Flink
: ?是twitter?另外这个stream理解成time interval足够小的microbatch对吗?如果这
: 样的话streaming和microbatch之间本质区别是什么?为什么会导致两种完全不同的架
: 构?

d****n
发帖数: 12461
3
streaming要解决asyncness和out of order的问题。microbatch通常视而不见。
这两个问题够你吃一壶了。

Flink

【在 s********k 的大作中提到】
: 这两天阿里开源Blink热闹非凡,不知道业界除了阿里,美国这边哪家在大规模用Flink
: ?是twitter?另外这个stream理解成time interval足够小的microbatch对吗?如果这
: 样的话streaming和microbatch之间本质区别是什么?为什么会导致两种完全不同的架
: 构?

s********k
发帖数: 6180
4
out of order, 是靠上层的应用来解决?还是框架本身来解决?如果开多个线程以及
executor,很难保证order?要保证也得在数据源 partition来保证吧

【在 d****n 的大作中提到】
: streaming要解决asyncness和out of order的问题。microbatch通常视而不见。
: 这两个问题够你吃一壶了。
:
: Flink

n***p
发帖数: 110
5
有什么flink能解决Kafka不能的吗?
s********k
发帖数: 6180
6
这两个都不是一个用处吧,一个是message queue,一个是stream计算平台

【在 n***p 的大作中提到】
: 有什么flink能解决Kafka不能的吗?
1 (共1页)
进入Programming版参与讨论
相关主题
MapReduce 的思想是怎么发明的?这次python糗大了
问卷,2016你最想学习的一门技术大家用spark streaming很爽吗?
有人看好flink和storm吗这里 大大牛多久学会spark?
如何提高Spark在Yarn上的内存使用率ES怎么玩?
Spark会干掉Storm吗?Spark已经out了,能跳船的赶快
Flink可以contributespark contributors
Flink Sparks Next Wave of Distributed Data Processing看了flink,不能不说有点小期待
看了一点kafkaspark就是因为吃饱了要做rdd成immutable导致了无法实现真正意义上的stream processing吧?
相关话题的讨论汇总
话题: flink话题: microbatch话题: spark话题: vs话题: 阿里