|
n******7
发帖数: 12463 | 2 有几个问题请教：
1. 如何效率地评估java程序的内存消耗和运行时间?
前几天问了java code在不同机器上内存消耗不同的问题。现在测试了不同的Xms Xmx参
数，同样的机器使用16core，16个进程时大致如下.基本上Xms=1/2g,Xmx=6g时内存消耗
最少，也显著比其他参数要快。没有再往下测了。但是这样测试觉得好没效率，有没有
什么自动半自动的方法可以做这个评估的？特别是很多语言benchmark的测试，他们是
怎么评估像java这样语言的速度和内存使用的？
Xms Xmx
16g 112g: cput=11:50:14,mem=30666936kb,vmem=125003524kb,walltime=00:48
:24
16g 48g: cput=11:50:32,mem=28415984kb,vmem=55443888kb,walltime=00:48:
22
16g 40g: cput=11:47:43,mem=25669572kb,vmem=46747780kb,walltime=00:48:
13
16g 32g: cput=11:49:53,mem=... 阅读全帖 |
|
h**********c
发帖数: 4120 | 3 suggest you read Java Performance, written by Oracle engineers.
My thinking is GC should be handled out of the vm box. Single VM should be
stress-tested and the program/task should be able to throttle itself for
memory utilization and persist over usage to database. Use cluster/load
balancer to comprehensively conduct the VMs' symphony by major process
tables' reading or VM status readings -- process threshhold trigger balancer
audit and administration.
Unfortunately, in real life, we rather hav... 阅读全帖 |
|
c**h
发帖数: 34 | 4 "比VMEM差远了"?
我们先不说 PureStorage 好在哪里，Violin Memory不好的太明显了。
从技术角度看，VMEM其实是一个纯粹的硬件公司。它主要的产品线,6000 Series Flash
Memory Arrays,是一款企业级存储阵列，却恰恰需要大量的软件features。一款企业
级存储阵列和一个简单磁盘阵列从硬件的角度来看可能区别不大。定义企业级存储阵列
的关键就在于一整套软件功能(enterprise feature set), 包括 complete LUN
management, thin provision, snapshot, replication, high availability, high
reliability etc.， 以及对存储protocols支持和对不同平台的集成，象Vmware VAAI
etc. 所有这一些都是VMEM十分欠缺的。它去年才引进CTO of Software,试图弥补其缺
陷。从这个角度来说，他的技术还很不成熟。
VMEM也十分清楚这个弱点，它试图通过OEM其他存储软件公司的产品去实现其所缺的功
能。最近... 阅读全帖 |
|
c**h
发帖数: 34 | 5 "比VMEM差远了"?
我们先不说 PureStorage 好在哪里，Violin Memory不好的太明显了。
从技术角度看，VMEM其实是一个纯粹的硬件公司。它主要的产品线,6000 Series Flash
Memory Arrays,是一款企业级存储阵列，却恰恰需要大量的软件features。一款企业
级存储阵列和一个简单磁盘阵列从硬件的角度来看可能区别不大。定义企业级存储阵列
的关键就在于一整套软件功能(enterprise feature set), 包括 complete LUN
management, thin provision, snapshot, replication, high availability, high
reliability etc.， 以及对存储protocols支持和对不同平台的集成，象Vmware VAAI
etc. 所有这一些都是VMEM十分欠缺的。它去年才引进CTO of Software,试图弥补其缺
陷。从这个角度来说，他的技术还很不成熟。
VMEM也十分清楚这个弱点，它试图通过OEM其他存储软件公司的产品去实现其所缺的功
能。最近... 阅读全帖 |
|
n******7
发帖数: 12463 | 6
这个我现在明白了 GC pause对我无所谓
这个我有疑问。就我的结果，同样Xmx的情况下，Xms越小反而越快
6g 6g: cput=11:55:44,mem=6518500kb,vmem=9793676kb,walltime=00:48:59
2g 6g: cput=11:26:22,mem=3628316kb,vmem=9793676kb,walltime=00:47:49
1g 6g: cput=11:25:40,mem=3005524kb,vmem=9793676kb,walltime=00:47:48
虽然只测了一次，这个1分钟的差异还是挺大的
而同样Xms的情况下，Xmx几乎没影响
16g 112g:cput=11:50:14,mem=30666936kb,vmem=125003524kb,walltime=00:48:24
16g 48g: cput=11:50:32,mem=28415984kb,vmem=55443888kb,walltime=00:48:22
16g 40g: cput=11:47:43,mem=25669572kb,vmem=4... 阅读全帖 |
|
c****e
发帖数: 33 | 7 这个我也留意了，vmem报表那么难看还要强行上市，不狠跌才怪。
pure storage想走当年data domain的路线，能不能成不好讲，但跟vmem不算是一个路
线，也不直接竞争，不适合拿来对比。 |
|
n******7
发帖数: 12463 | 8 一样的java code，用java.util.concurrent做的multi-threading
在cluster上的不同node上跑
在16个E5-2665 core上跑的结果:
cput=58:16:02,mem=11399236kb,vmem=35791888kb,walltime=03:46:17
在24个Opteron 6176 core上:
cput=173:12:55,mem=5841312kb,vmem=16428220kb,walltime=11:09:09
Opteron 慢些我理解，可是为啥用的内存要少一半？ |
|
cj
发帖数: 54 | 9 【 以下文字转载自 SanFrancisco 讨论区 】
发信人: cj (cj), 信区: SanFrancisco
标 题: Violin Memory is hiring for SCSI/FC/Kernel and System/Platform/Networking management position!
发信站: BBS 未名空间站 (Wed Jul 31 02:09:30 2013, 美东)
We are hiring Sr. engineer for the above position and if interested, please
drop a line to j****[email protected]. Thanks!
Jin |
|
|
K******g
发帖数: 1870 | 11 这种公司风险极高
Storage行业竞争太大，小公司的生存环境非常艰难，特别像pure做的这种传统storage
，客户不大可能轻易更新这种昂贵的infrastructure, 市场基本被EMC和NetApp把持.
如果不是有技术上的基本变革，这种小公司即使IPO了，也不会有太大的惊奇。fio，
vmem等近几年上市的小storage就是明显的例子。更何况，在emc和netapp推出自己的
all flash之前，这个市场基本是群魔乱舞。一旦俩巨头稳住了自己产品，去他的估计
都是打酱油的。
工作累，base低，即使IPO也没有什么赚头，要选个好行业，要趁早。
★ 发自iPhone App: ChineseWeb 7.8
★ 发自iPhone App: ChineseWeb 7.8 |
|
R**k
发帖数: 13 | 12 Flash就是一次基本变革，正所谓量变引起质变，两个数量级以上的性能差别，整个系
统设计都跟以前不一样。
Storage市场将重新洗牌，而且大公司因为执行力低而失去先机。
EMC是出了名的官僚，Netapp闲人也很多，他们唯一可以做的就是收购。
fio和vmem是做device起家的，不象PS专心做appliance，没有可比性。
哪怕被收购了也不差，Data domain和Isilon都是两个billion被收购的。
而且这两家都是先IPO再被收购的，所以说Storage公司要IPO也不难，只是Hype没有Web
公司那么高。
storage |
|
z***e
发帖数: 5600 | 13 多谢，信息量很大，看来市场已经把VMEM看透了 |
|
b******t
发帖数: 965 | 14 也有一些坚挺的
PANW ZEN WDAY 之类目前都维持住价格
当然最高点腰斩的是多数
比如 FIT YELP HDP 之类
FB当年也可是腰斩到19块的 上市不是终点 还是要看后面的发展
不然就变成FUEL和VMEM之类了 |
|
|
l****i
发帖数: 4609 | 16 我不是大夫，我能告诉你什么可以抄，什么不能抄吗？ |
|
|
l****i
发帖数: 4609 | 18 1）刚刚暴跌10% 以上的， 当天都不能去抄底
2) ER miss 的，属于硬伤，盘后暴跌，巨量的，更不应该去抄底
什么情况下，可以抄底， ER surprise, 股票暴涨，之后暴跌回调，这种才能抄进去
，稳赚不赔。 |
|
t*******k
发帖数: 173 | 19 ER surprise跟ER miss可以解釋一下嗎? |
|
b********i
发帖数: 2645 | 20 赞
1）刚刚暴跌10% 以上的， 当天都不能去抄底2) ER miss 的，属于硬伤，盘后暴跌，
巨量的，更不应该去抄底什么情况下，可以抄底， ER |
|
R******o
发帖数: 1572 | 21 luowei 大牛
股版我最佩服的就是你，眼光独到，思想深邃，带我们青蛙发了大财 |
|
R******o
发帖数: 1572 | 22 ER miss, ER 低于预期
ER Surprise, 高于预期 |
|
o********7
发帖数: 617 | 23 luowei厉害。
我接着请教一个问题： 我观察一个股票半个月，ER长了10%+， 后来一直等回调，但是
这半个月都没有怎么大的回调，猪了。
今天大家都长，它反而贴了2%+，我在低点买入。 但心想，为什么其他都长了，它反而
跌了呢。一查，他家的director （on the board)卖了1M shares, 然后又用以2011 9
块多的价格买入1M (Option? ) . 这样的话，是好还是不好呢，该怎么处理呢？ |
|
t*******k
发帖数: 173 | 24 ER Surprise, 高于预期
那照理來說股票不就會大漲嗎?
怎麼抄底? |
|
|
j****9
发帖数: 2295 | 26 从2.5到4.25，为了不wash sale。没有买回。结果大涨 |
|
|
|
x*******1
发帖数: 28835 | 29 50已经成为历史。很难再回来了。 vmem 就是他的将来。 等受限股以出来，他就要哗
哗的往下了。 40，30都不识底部。500人的公司，能值2B就很看的起他了。 不是华尔
街护犊子，一个季度亏损13M，早被干成渣滓了。 这个公司唯一的希望就是等收购，不
过EMC买了extrem IO, netapp all flash 下个季度就上来了。 小公司很难有所作为的
。 |
|
h***a
发帖数: 290 | 30 Flash Memory Arrays 现在是不是比较火？ |
|
cj
发帖数: 54 | 31 【 以下文字转载自 SanFrancisco 讨论区 】
发信人: cj (cj), 信区: SanFrancisco
标 题: Violin Memory is hiring for SCSI/FC/Kernel and System/Platform/Networking management position!
发信站: BBS 未名空间站 (Wed Jul 31 02:09:30 2013, 美东)
We are hiring Sr. engineer for the above position and if interested, please
drop a line to j****[email protected]. Thanks!
Jin |
|
N****s
发帖数: 267 | 32 riverbed 做啥storage?
vmem IPO plunges 22% on debut, storage 还有什么future? |
|
h*********d
发帖数: 1054 | 33 刚看到vmem都上市了。
感觉server side storage 是将来的方向，是不是将来的信息都放到cloud storage？
感觉现在的storage start-up如雨后春笋。投资人大把撒钱。
不是很懂。 |
|
p***e
发帖数: 1318 | 34 these are different "storage". vmem is in flash memory business.
It is a dead market.
riverbed is in cloud storage. even that is not new. already very
clouded by start ups years ago. i think the money is not there
any more. |
|
p***e
发帖数: 1318 | 35 It is in relative terms le. enterprise flash may look good to
people inside the field but it is a pretty narrow field when
compared to what is going on in the bay area. People already
went through such "booms" in hardware industry plenty of
times. Now to the general public of stock market, it may as
well be treated as dead, unless you really ran out of ideas
of what to invest in.
Just look at FIO, VMEM, I don't think the flash folks are
exactly getting royal treatment.
Even cloud storage is some... 阅读全帖 |
|
l******l
发帖数: 2651 | 36 没搞懂VMEM居然还有胆量上市。东西做的比别人烂，价钱居然比还Fusion IO高，居然
敢开叫$9/GB？
Public cloud很难赚钱。那些光烧钱的，钱烧完了，就该歇菜。
连EMC, NetApp都在搞converged Infrastrucure。以后就不是Enterprise storage，而
是storage server。Hybrid or full SSD在企业应用有前途。 |
|
h*********d
发帖数: 1054 | 37 purestorage is better than vmem? |
|
K******g
发帖数: 1870 | 38 好在哪？市场占有率？IOPS？都比VMEM差远了
就是表面的噱头做得好而已，hiring bar很高，舍得给点钱而已
★ 发自iPhone App: ChineseWeb 7.8 |
|
o*******e
发帖数: 149 | 39 There is high demand for fast array that's why vmem can still survive. I
agree their management is a mass, and maybe lack of core features, but they
are a startup they can do it gradually if they can survive long enough. Plus
, not many high end production array uses ddup...
Flash
VAAI |
|
c****e
发帖数: 33 | 40 看ID就知道是行内人，说得非常有道理，看来VMEM的股票还是暂时不能碰了。
大牛能否再说说PureStorage好在哪里呢？如果跟EMC和NTAP比呢？
Flash
VAAI |
|
N****s
发帖数: 267 | 41 riverbed 做啥storage?
vmem IPO plunges 22% on debut, storage 还有什么future? |
|
h*********d
发帖数: 1054 | 42 刚看到vmem都上市了。
感觉server side storage 是将来的方向，是不是将来的信息都放到cloud storage？
感觉现在的storage start-up如雨后春笋。投资人大把撒钱。
不是很懂。 |
|
p***e
发帖数: 1318 | 43 these are different "storage". vmem is in flash memory business.
It is a dead market.
riverbed is in cloud storage. even that is not new. already very
clouded by start ups years ago. i think the money is not there
any more. |
|
p***e
发帖数: 1318 | 44 It is in relative terms le. enterprise flash may look good to
people inside the field but it is a pretty narrow field when
compared to what is going on in the bay area. People already
went through such "booms" in hardware industry plenty of
times. Now to the general public of stock market, it may as
well be treated as dead, unless you really ran out of ideas
of what to invest in.
Just look at FIO, VMEM, I don't think the flash folks are
exactly getting royal treatment.
Even cloud storage is some... 阅读全帖 |
|
l******l
发帖数: 2651 | 45 没搞懂VMEM居然还有胆量上市。东西做的比别人烂，价钱居然比还Fusion IO高，居然
敢开叫$9/GB？
Public cloud很难赚钱。那些光烧钱的，钱烧完了，就该歇菜。
连EMC, NetApp都在搞converged Infrastrucure。以后就不是Enterprise storage，而
是storage server。Hybrid or full SSD在企业应用有前途。 |
|
h*********d
发帖数: 1054 | 46 purestorage is better than vmem? |
|
K******g
发帖数: 1870 | 47 好在哪？市场占有率？IOPS？都比VMEM差远了
就是表面的噱头做得好而已，hiring bar很高，舍得给点钱而已
★ 发自iPhone App: ChineseWeb 7.8 |
|
o*******e
发帖数: 149 | 48 There is high demand for fast array that's why vmem can still survive. I
agree their management is a mass, and maybe lack of core features, but they
are a startup they can do it gradually if they can survive long enough. Plus
, not many high end production array uses ddup...
Flash
VAAI |
|
c****e
发帖数: 33 | 49 看ID就知道是行内人，说得非常有道理，看来VMEM的股票还是暂时不能碰了。
大牛能否再说说PureStorage好在哪里呢？如果跟EMC和NTAP比呢？
Flash
VAAI |
|
w*******e
发帖数: 395 | 50 应该不是，vmem的FAL都在硬件里，除非楼主做硬件FPGA的 |
|
