l*l
发帖数: 20 | |
d****n
发帖数: 12461 | 2 data能存在单机上的都不能叫big data。
"Big data lives in the cloud. It knows what we have done and what we will do
." |
d******e
发帖数: 7844 | 3 你太孤陋寡闻了吧。
Matlab的Distributed Computing的能力已经挺不错了。
http://www.mathworks.com/products/distriben/index.html
Cloud不过是个壳子罢了，很情况下还只是distributed computing的延伸，比如Amazon
的AWS。
而且是不是big data跟能不能存在单机上根本没直接关系。大数据是根据处理问题方法
的难度直接相关的。很多复杂方法可能也就能处理个几百上千个variable，存到单机上
data可能就是十几二十M。这类问题你要能处理个几百M的数据，就NB坏了，没人会说你
做的不是大数据。
do
【在 d****n 的大作中提到】
: data能存在单机上的都不能叫big data。
: "Big data lives in the cloud. It knows what we have done and what we will do
: ."
|
d****n
发帖数: 12461 | 4 不如R distributed。这几年R的社区比matlab好很多。
cloud computing不等于distributed computing。
distributed computing，you are CPU hungry, so you distribute your data to
different servers
cloud computing, you are IO bounded, so you distributed your program to
different data servers.
Amazon
【在 d******e 的大作中提到】
: 你太孤陋寡闻了吧。
: Matlab的Distributed Computing的能力已经挺不错了。
: http://www.mathworks.com/products/distriben/index.html
: Cloud不过是个壳子罢了，很情况下还只是distributed computing的延伸，比如Amazon
: 的AWS。
: 而且是不是big data跟能不能存在单机上根本没直接关系。大数据是根据处理问题方法
: 的难度直接相关的。很多复杂方法可能也就能处理个几百上千个variable，存到单机上
: data可能就是十几二十M。这类问题你要能处理个几百M的数据，就NB坏了，没人会说你
: 做的不是大数据。
:
|
d******e
发帖数: 7844 | 5 使用cluster一样是IO Bounded，没有人在上面搞大量的IO交互的。
【在 d****n 的大作中提到】
: 不如R distributed。这几年R的社区比matlab好很多。
: cloud computing不等于distributed computing。
: distributed computing，you are CPU hungry, so you distribute your data to
: different servers
: cloud computing, you are IO bounded, so you distributed your program to
: different data servers.
:
: Amazon
|
s********n
发帖数: 41 | 6 我一直在用matlab跑distributed program。在面试的时候，人家问我用什么语言，我
说matlab，气氛瞬间凝固。。。唉，我是温水煮青蛙太久了。 |
l******n
发帖数: 9344 | 7 这么好的topic，正是shining的时候，居然搞冷场了...
matlab上边可以run的东西这么多，可移植性这么好，什么都能run，那时别人不知道，
你难道也不知道？特别是收购maple之后这么牛的符号运算能力，基本没有其他软件能
做到
【在 s********n 的大作中提到】
: 我一直在用matlab跑distributed program。在面试的时候，人家问我用什么语言，我
: 说matlab，气氛瞬间凝固。。。唉，我是温水煮青蛙太久了。
|
T*****u
发帖数: 7103 | 8 很多时候matlab这个标签贴上你就完蛋啦
【在 l******n 的大作中提到】
: 这么好的topic，正是shining的时候，居然搞冷场了...
: matlab上边可以run的东西这么多，可移植性这么好，什么都能run，那时别人不知道，
: 你难道也不知道？特别是收购maple之后这么牛的符号运算能力，基本没有其他软件能
: 做到
|
h********3
发帖数: 2075 | 9 没错。
【在 T*****u 的大作中提到】
: 很多时候matlab这个标签贴上你就完蛋啦
|
l******n
发帖数: 9344 | 10 俺一般还说自己fortran很牛，人家都wow
【在 T*****u 的大作中提到】
: 很多时候matlab这个标签贴上你就完蛋啦
|
|
|
g*****o
发帖数: 812 | 11 很明显数据还不够大啊...
【在 s********n 的大作中提到】
: 我一直在用matlab跑distributed program。在面试的时候，人家问我用什么语言，我
: 说matlab，气氛瞬间凝固。。。唉，我是温水煮青蛙太久了。
|
s********n
发帖数: 41 | 12 确实啊，发现matlab科学计算还是不错的，但是上工程的就需要java之类的了。
【在 g*****o 的大作中提到】
: 很明显数据还不够大啊...
|
T*****u
发帖数: 7103 | 13 我们这里有个delphi很牛的，大家都wow,hahaha。后来一个老程序用delphi写的，需要
更新一下，1一下成了香馍馍。后来1辞工了，还100几一个钟头求爷爷一样请回来维持
这个程序，时间随便charge。
【在 l******n 的大作中提到】
: 俺一般还说自己fortran很牛，人家都wow
|
d****i
发帖数: 4809 | 14 工程上科学计算哪里有用Java的，全部都是C, C++，Fortran的天下。
【在 s********n 的大作中提到】
: 确实啊，发现matlab科学计算还是不错的，但是上工程的就需要java之类的了。
|
m****s
发帖数: 1481 | 15 的确，很多时候都是c/c++写计算模块，然后用java，或者python这些粘起来，其实用
matlab来call c/c++也是个很好的搭配，调试也方便，速度也上去了
【在 d****i 的大作中提到】
: 工程上科学计算哪里有用Java的，全部都是C, C++，Fortran的天下。
|
d****i
发帖数: 4809 | 16 其实说到底，Java, Python, Matlab, R，SAS这些上层的东西底层的实现都是C/C++写
的，只不过外面包了层皮而已。
【在 m****s 的大作中提到】
: 的确，很多时候都是c/c++写计算模块，然后用java，或者python这些粘起来，其实用
: matlab来call c/c++也是个很好的搭配，调试也方便，速度也上去了
|
p*******g
发帖数: 809 | 17 请问，我现在开发算法，用在100万到千万以上个住户的数据，但是不是分布式计算，
这个算是big data吗？开发的算法是用的matlab，但是实现的时候用c。
如果是，我就好在简历上说提一下了。 |
