p*****2
发帖数: 21240 | |
z****e
发帖数: 54598 | 2 现在版本号还在0.8，等项目毕业了之后再说了
你们跟wwzz如果有什么心得，记得分享
我们对messaging的需求还是有的 |
w**z
发帖数: 8232 | 3 没有啦，就是过了下doc, 写了个Java consumer, 现在的项目离上线还有段时间。 感
觉不错，比rabbit mq 强， throughput 大。 和Cassandra有点象， sequential
writes to disk. 而且support multiple consumers on the same queue. zookeeper
store each consumer(group) offset. unlike rabbitmq which keeps state for
each msg.comes with storm consumer. 但 scala 不好懂。
【在 p*****2 的大作中提到】
: 感觉wwzz已经是expert了
|
p*****2
发帖数: 21240 | 4
zookeeper
多谢大牛共享。cassandra是zhaoce大牛的最爱。
kafka是用的akka吗？
感觉kafka和storme是绝配呀
【在 w**z 的大作中提到】
: 没有啦，就是过了下doc, 写了个Java consumer, 现在的项目离上线还有段时间。 感
: 觉不错，比rabbit mq 强， throughput 大。 和Cassandra有点象， sequential
: writes to disk. 而且support multiple consumers on the same queue. zookeeper
: store each consumer(group) offset. unlike rabbitmq which keeps state for
: each msg.comes with storm consumer. 但 scala 不好懂。
|
w**z
发帖数: 8232 | 5 not yet.
http://java.dzone.com/articles/kafka-possibly-moving-java-crc
Kafka + storm 犀利。I feel Cassandra is losing to HBase.
【在 p*****2 的大作中提到】
:
: zookeeper
: 多谢大牛共享。cassandra是zhaoce大牛的最爱。
: kafka是用的akka吗？
: 感觉kafka和storme是绝配呀
|
p*****2
发帖数: 21240 | 6
嗯。我们这里都是hbase。大牛你们公司也用storm吗？
现在好难找到用akka的范例呀。
【在 w**z 的大作中提到】
: not yet.
: http://java.dzone.com/articles/kafka-possibly-moving-java-crc
: Kafka + storm 犀利。I feel Cassandra is losing to HBase.
|
w**z
发帖数: 8232 | 7 就做了个prototype. scala 不懂。
【在 p*****2 的大作中提到】
:
: 嗯。我们这里都是hbase。大牛你们公司也用storm吗？
: 现在好难找到用akka的范例呀。
|
z****e
发帖数: 54598 | 8 说说打算用kafka来做啥
【在 w**z 的大作中提到】
: 就做了个prototype. scala 不懂。
|
w**z
发帖数: 8232 | 9 capture API log. we try yo log every API invocation. it can be consumed by
storm, hadoop or fraud detection module.
【在 z****e 的大作中提到】
: 说说打算用kafka来做啥
|
s********r
发帖数: 2308 | 10 大牛说说storm在实时处理log上的应用吧。
我们现在的系统是hadoop做long term storage and BI, 实时处理还是靠appliance里
的in-memory处理。Storm的话，怎么样来handle大概10TB/day or 150k EPS的吞吐。有
没有可能能不能把传统的realtime monitoring和后期的
BI一起扛起来？ |
s*****r
发帖数: 43070 | 11 感觉kafka就是个更灵活的logging system，可以随便定义appender，logging的entry
本身就是object，方便consumer使用。 |
z****e
发帖数: 54598 | 12 能aop不？
我现在用aop+cassandra用得蛮好的
就怕不能aop，那样代码混在一起，就很痛苦了
【在 w**z 的大作中提到】
: capture API log. we try yo log every API invocation. it can be consumed by
: storm, hadoop or fraud detection module.
|
