由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Programming版 - 魏老师拿不出10万次/秒写的数据库
相关主题
春运这个东西,用Storm就可以轻松搞定了cassandra的eventual consistency怎么破?
真心请教,究竟怎么设计才能处理每秒100万次的写操作搞不懂为什么大牛说Hbase不如C*?
goodbug,厂家的benchmark你说是宣传,又说不是我的不算魏老师的方案
如果自己写linux程序,network down了如何很快通知user app? (转载)废话少说,单机500万次每秒
some thoughts after Cassandra Summit阿里云计算有多强大
好虫,看看你的东东有没有问题?1-2ms内反馈
魏老师在挑战CAP theorum.为了不至于谬种流传我还是回应一下吧
Cassandra 看测试read也不算慢呢Goodbug,是不是单机大于1 million/s的I/O你就输了?
相关话题的讨论汇总
话题: 万次话题: 10话题: benchmark话题: ssd话题: 数据库
进入Programming版参与讨论
1 (共1页)
g*****g
发帖数: 34805
1
扯东扯西有意思吗?放票头天是亿万人想订票,很多人还不只一张。
我提10万次/秒的峰值订单很夸张吗?
你提得方案不行,我提的方案行。还有啥好争的。先练两年内功再来。
什么内存数据库,你们金融的哪个地方用了?丢了人也没这么忽悠的。
T********i
发帖数: 2416
2
写什么?写磁盘才叫写?写SSD算不算?给你加10倍,100万次行不行?我加一行代码就
好了。
fusion io SSD IOPS是900万。
有意思么?
你这个人能不能要点脸?

【在 g*****g 的大作中提到】
: 扯东扯西有意思吗?放票头天是亿万人想订票,很多人还不只一张。
: 我提10万次/秒的峰值订单很夸张吗?
: 你提得方案不行,我提的方案行。还有啥好争的。先练两年内功再来。
: 什么内存数据库,你们金融的哪个地方用了?丢了人也没这么忽悠的。

z****e
发帖数: 54598
3
小菊花不是当时就推翻了你的说法?
一碗泡面下去,你的内存就废了
后面其它人给扩展成地震火灾
不过本质是一样的

【在 T********i 的大作中提到】
: 写什么?写磁盘才叫写?写SSD算不算?给你加10倍,100万次行不行?我加一行代码就
: 好了。
: fusion io SSD IOPS是900万。
: 有意思么?
: 你这个人能不能要点脸?

T********i
发帖数: 2416
4
他那个每秒10万次难道能瞬时同步全银河系?能抗地震火灾?你反正已经不要脸破罐子
破摔了。

【在 z****e 的大作中提到】
: 小菊花不是当时就推翻了你的说法?
: 一碗泡面下去,你的内存就废了
: 后面其它人给扩展成地震火灾
: 不过本质是一样的

z****e
发帖数: 54598
5
老师,我这么说
对于一个国家的系统来说
防地震和火灾是最基本的考虑
有些地方还考虑核弹袭击
不要多远,类似的民航售票系统所在的数据中心
就有防核弹袭击的功能
满意了没?

【在 T********i 的大作中提到】
: 他那个每秒10万次难道能瞬时同步全银河系?能抗地震火灾?你反正已经不要脸破罐子
: 破摔了。

z****e
发帖数: 54598
6
类似的民航售票
美帝有一个数据中心在科罗拉多的丹佛
还不是丹佛市中心,在丹佛旁边一个小镇里面
你想想这是为什么
为什么不放在加州?
当别人给你擦屁股时候,要知道感恩,不要乱骂
要不然下次人家不给你擦了
实际上已经有人不愿意给你擦屁股了,你没发现?

【在 T********i 的大作中提到】
: 他那个每秒10万次难道能瞬时同步全银河系?能抗地震火灾?你反正已经不要脸破罐子
: 破摔了。

g*****g
发帖数: 34805
7
写SSD 10万次/秒,就算有,1万刀能拿下来吗?你丫丢人就丢人在话说得太满。
有种把configuration拿出来大家看看,别光说不练。

【在 T********i 的大作中提到】
: 写什么?写磁盘才叫写?写SSD算不算?给你加10倍,100万次行不行?我加一行代码就
: 好了。
: fusion io SSD IOPS是900万。
: 有意思么?
: 你这个人能不能要点脸?

T********i
发帖数: 2416
8
400gb的都是2000刀左右。我可是说1-2万刀。这个价钱的配置秒杀你足够了。

【在 g*****g 的大作中提到】
: 写SSD 10万次/秒,就算有,1万刀能拿下来吗?你丫丢人就丢人在话说得太满。
: 有种把configuration拿出来大家看看,别光说不练。

g*****g
发帖数: 34805
9
我不需要瞬间同步银河系,本身就是replica 3, quorum write,写两个相连的数据中
心才返回的。一个数据中心着火不丢数据,异地sync 几十到几百毫秒级,量大也不过
几秒。也就是地震只丢几秒数据罢了。
你那内存数据库,停电就丢百万订单。着火就全玩玩。地震不用考虑了。

【在 T********i 的大作中提到】
: 他那个每秒10万次难道能瞬时同步全银河系?能抗地震火灾?你反正已经不要脸破罐子
: 破摔了。

g*****g
发帖数: 34805
10
给个link看看先。

【在 T********i 的大作中提到】
: 400gb的都是2000刀左右。我可是说1-2万刀。这个价钱的配置秒杀你足够了。
相关主题
好虫,看看你的东东有没有问题?cassandra的eventual consistency怎么破?
魏老师在挑战CAP theorum.搞不懂为什么大牛说Hbase不如C*?
Cassandra 看测试read也不算慢呢魏老师的方案
进入Programming版参与讨论
b*******s
发帖数: 5216
11
没人想到硬盘阵列吗
T********i
发帖数: 2416
12
http://www.anandtech.com/show/6671/fusionio-launches-ioscale-fo
其实同步写盘没那么重要。我都说无穷次理由了。你实在要自取其辱,我只能告诉你是
一行代码。

【在 g*****g 的大作中提到】
: 给个link看看先。
g*****g
发帖数: 34805
13
想堆硬件了?厂商列的数值也就是理论上限,东西先放到内存里,再写到硬盘上。
从网络来的IO到不了这个数值,不信欢迎benchmark大家看。

【在 b*******s 的大作中提到】
: 没人想到硬盘阵列吗
b*******s
发帖数: 5216
14
我木有什么预设立场 就是讨论下打打酱油

【在 g*****g 的大作中提到】
: 想堆硬件了?厂商列的数值也就是理论上限,东西先放到内存里,再写到硬盘上。
: 从网络来的IO到不了这个数值,不信欢迎benchmark大家看。

g*****g
发帖数: 34805
15
这个是怎么体现10万次/秒 IO的?别忘了你不只是要写,还要从网络上读,往网络上
ack。
厂商那种固定512byte顺序写的benchmark就不要拿出来了。你丫就这么个简单问题,
已经躲了无数次了。
不要多,你就网络上传个随机数过来,写,ack。能10万次/秒我就服。

【在 T********i 的大作中提到】
: http://www.anandtech.com/show/6671/fusionio-launches-ioscale-fo
: 其实同步写盘没那么重要。我都说无穷次理由了。你实在要自取其辱,我只能告诉你是
: 一行代码。

T********i
发帖数: 2416
16
你就别露怯了。厂商提供sdk的。号称iops 9 million。
人家有benchmark全部资料。你不服自己举证他造假。

【在 g*****g 的大作中提到】
: 这个是怎么体现10万次/秒 IO的?别忘了你不只是要写,还要从网络上读,往网络上
: ack。
: 厂商那种固定512byte顺序写的benchmark就不要拿出来了。你丫就这么个简单问题,
: 已经躲了无数次了。
: 不要多,你就网络上传个随机数过来,写,ack。能10万次/秒我就服。

g*****g
发帖数: 34805
17
你丫别吹了。write IOPS 是535,000。这可是完整的一个一个sector的写dumb data。
你那个网络来会的读写,中间还要CPU处理,打死都到不了10万,不服你实测一个大家
看看。能达到这5000
刀我出。
http://www.neqx.com/product.asp?pf_id=HD405&gclid=CNeH8tyI_7oCF
就这SSD都要5000刀,

【在 T********i 的大作中提到】
: 你就别露怯了。厂商提供sdk的。号称iops 9 million。
: 人家有benchmark全部资料。你不服自己举证他造假。

T********i
发帖数: 2416
18
http://www.fusionio.com/press-releases/fusion-io-achieves-more-
这种东西commodities很快的。
而且我说过了,我对同步写盘没兴趣。异步写盘也保证可靠性,在高层协议的参与下。

5000

【在 g*****g 的大作中提到】
: 你丫别吹了。write IOPS 是535,000。这可是完整的一个一个sector的写dumb data。
: 你那个网络来会的读写,中间还要CPU处理,打死都到不了10万,不服你实测一个大家
: 看看。能达到这5000
: 刀我出。
: http://www.neqx.com/product.asp?pf_id=HD405&gclid=CNeH8tyI_7oCF
: 就这SSD都要5000刀,

g*****g
发帖数: 34805
19
尼玛不要成天弄些理论值好不好,你那东西64 byte就放不放得下就是个问题。还有你
的CPU一点开销都没有?10万/秒个请求,你的CPU能一点延迟没有处理得了?还是那句
话,你benchmark一个给大家看看,能达到那2万刀的机器我出了。你前面还怯生生得谈
1000 tps,现在就拿这数据死撑,真不要脸呀。
. The performance numbers were achieved utilizing single threaded, single
queue depth 64 byte writes to the Auto-Commit Memory log.

【在 T********i 的大作中提到】
: http://www.fusionio.com/press-releases/fusion-io-achieves-more-
: 这种东西commodities很快的。
: 而且我说过了,我对同步写盘没兴趣。异步写盘也保证可靠性,在高层协议的参与下。
:
: 5000

T********i
发帖数: 2416
20
说实话,10万/s对我来讲真是屁都不算。加10倍都不算啥。俺就是靠这个养家糊口的。

【在 g*****g 的大作中提到】
: 尼玛不要成天弄些理论值好不好,你那东西64 byte就放不放得下就是个问题。还有你
: 的CPU一点开销都没有?10万/秒个请求,你的CPU能一点延迟没有处理得了?还是那句
: 话,你benchmark一个给大家看看,能达到那2万刀的机器我出了。你前面还怯生生得谈
: 1000 tps,现在就拿这数据死撑,真不要脸呀。
: . The performance numbers were achieved utilizing single threaded, single
: queue depth 64 byte writes to the Auto-Commit Memory log.

相关主题
废话少说,单机500万次每秒为了不至于谬种流传我还是回应一下吧
阿里云计算有多强大Goodbug,是不是单机大于1 million/s的I/O你就输了?
1-2ms内反馈干货,goodbug关于cassandra durability的论断你敢信么?
进入Programming版参与讨论
g*****g
发帖数: 34805
21
吹牛皮当然没啥。你工作用的那些服务器可不是1万刀的。

【在 T********i 的大作中提到】
: 说实话,10万/s对我来讲真是屁都不算。加10倍都不算啥。俺就是靠这个养家糊口的。
T********i
发帖数: 2416
22
1万左右。2 socket sandy bridge server + 2 solarflare cards。

【在 g*****g 的大作中提到】
: 吹牛皮当然没啥。你工作用的那些服务器可不是1万刀的。
d********u
发帖数: 5383
23
数据中心要用电,CA自己电量都不够,放那儿不是摆明了把SB2个字往脸上贴吗?

【在 z****e 的大作中提到】
: 类似的民航售票
: 美帝有一个数据中心在科罗拉多的丹佛
: 还不是丹佛市中心,在丹佛旁边一个小镇里面
: 你想想这是为什么
: 为什么不放在加州?
: 当别人给你擦屁股时候,要知道感恩,不要乱骂
: 要不然下次人家不给你擦了
: 实际上已经有人不愿意给你擦屁股了,你没发现?

z****e
发帖数: 54598
24
靠,数据中心穷到连电都省?
你这个行为艺术

【在 d********u 的大作中提到】
: 数据中心要用电,CA自己电量都不够,放那儿不是摆明了把SB2个字往脸上贴吗?
g*****g
发帖数: 34805
25
吹牛逼是没用的,拿benchmark出来大家瞧瞧。我老说我的系统能支持10万次每秒的写,
拿了100万次/s的来证明。你就反反复复停留在口头上。既然你工作的机器大约一万,
弄个
10万次/s的benchmark大家看看相比不难?

【在 T********i 的大作中提到】
: 1万左右。2 socket sandy bridge server + 2 solarflare cards。
T********i
发帖数: 2416
26
讨论到这个程度你已经输了。
可以很负责地告诉你10万次/s对我的系统来说是小儿科。无论网络I/O还是SSD I/O。
你别不服气。我的benchmark是用Corvil测的。就是在网卡光纤上加一个监听器。记录
所有通信同时加上timestamp。
http://www.corvil.com/Products/Latency-Management-Center.aspx
你的所谓10万次/s对我的1万刀左右的服务器来讲是个笑话。

写,

【在 g*****g 的大作中提到】
: 吹牛逼是没用的,拿benchmark出来大家瞧瞧。我老说我的系统能支持10万次每秒的写,
: 拿了100万次/s的来证明。你就反反复复停留在口头上。既然你工作的机器大约一万,
: 弄个
: 10万次/s的benchmark大家看看相比不难?

g*****g
发帖数: 34805
27
只看到corvil网站,没看到你的benchmark。再说一遍,10万次网络ping pong是可以做
到的,
10万次写订单还要更新有锁的counter是做不到的。
你不服气,就打开一个文件,从10万倒数到1循环,做 "写+flush",20行程序撑死了吧。
你的春运系统比这个复杂太多了吧。有种就把这个benchmark拿出来大家瞅瞅。光打嘴
炮谁不会?
尼玛你也有脸说我输了,100万次/秒的读写我都没压力的拿出来给大家看了。10万/次
算个屁呀。
你丫昨天还自己说最多1000次tps,躲了一天拿了个SSD的厂商benchmark,突然10万/次
没压力了。

【在 T********i 的大作中提到】
: 讨论到这个程度你已经输了。
: 可以很负责地告诉你10万次/s对我的系统来说是小儿科。无论网络I/O还是SSD I/O。
: 你别不服气。我的benchmark是用Corvil测的。就是在网卡光纤上加一个监听器。记录
: 所有通信同时加上timestamp。
: http://www.corvil.com/Products/Latency-Management-Center.aspx
: 你的所谓10万次/s对我的1万刀左右的服务器来讲是个笑话。
:
: 写,

1 (共1页)
进入Programming版参与讨论
相关主题
Goodbug,是不是单机大于1 million/s的I/O你就输了?some thoughts after Cassandra Summit
干货,goodbug关于cassandra durability的论断你敢信么?好虫,看看你的东东有没有问题?
清净版:写一个Complete Failover Handbook吧魏老师在挑战CAP theorum.
魏老师这次给一群失意者们带来了希望Cassandra 看测试read也不算慢呢
春运这个东西,用Storm就可以轻松搞定了cassandra的eventual consistency怎么破?
真心请教,究竟怎么设计才能处理每秒100万次的写操作搞不懂为什么大牛说Hbase不如C*?
goodbug,厂家的benchmark你说是宣传,又说不是我的不算魏老师的方案
如果自己写linux程序,network down了如何很快通知user app? (转载)废话少说,单机500万次每秒
相关话题的讨论汇总
话题: 万次话题: 10话题: benchmark话题: ssd话题: 数据库