C********g 发帖数: 1548 | 1 比如,一个大学,40,000 enrollment.200 servers (99% are Solaris).可不可以建自
己内部的HDFS,运行所有的软件系统包括Oracle DB,ERP system, student system呢
?技术上可行吗?经济上可行吗? |
p*****2 发帖数: 21240 | 2 为什么要hdfs?
【在 C********g 的大作中提到】 : 比如,一个大学,40,000 enrollment.200 servers (99% are Solaris).可不可以建自 : 己内部的HDFS,运行所有的软件系统包括Oracle DB,ERP system, student system呢 : ?技术上可行吗?经济上可行吗?
|
C********g 发帖数: 1548 | 3 我直觉它对硬件要求低,应该可以降低cost,并且可扩展性很强。
【在 p*****2 的大作中提到】 : 为什么要hdfs?
|
n******t 发帖数: 4406 | 4 错了,hdfs是烧钱的。
你要搞什么big data之类的应用么?
【在 C********g 的大作中提到】 : 我直觉它对硬件要求低,应该可以降低cost,并且可扩展性很强。
|
c****e 发帖数: 1453 | 5 Reports said Hadoop can reduce 30% cost on data warehouse. But don't
underestimate the operation barrier. |
C********g 发帖数: 1548 | 6 no.Is HDFS specifically for big data?
【在 n******t 的大作中提到】 : 错了,hdfs是烧钱的。 : 你要搞什么big data之类的应用么?
|
p*****2 发帖数: 21240 | 7 不如上cassandra
【在 C********g 的大作中提到】 : no.Is HDFS specifically for big data?
|
D*******a 发帖数: 3688 | 8 do you know what HDFS is for?
can you really run these stuff "Oracle DB,ERP system, student system" on
HDFS?
【在 C********g 的大作中提到】 : 比如,一个大学,40,000 enrollment.200 servers (99% are Solaris).可不可以建自 : 己内部的HDFS,运行所有的软件系统包括Oracle DB,ERP system, student system呢 : ?技术上可行吗?经济上可行吗?
|
h*d 发帖数: 214 | 9 我的理解是HDFS是应用层API,就像java IO一样,只能供特定系统使用(我就知道
hadoop)。LZ估计把HDFS误解成了OS level API可以让任何依赖文件系统的应用可以平
滑使用。如果不稍微看看paper,绝大部分人估计都会有同样的误解。 |
C********g 发帖数: 1548 | 10 谢谢指正。我确实是那么理解的。
【在 h*d 的大作中提到】 : 我的理解是HDFS是应用层API,就像java IO一样,只能供特定系统使用(我就知道 : hadoop)。LZ估计把HDFS误解成了OS level API可以让任何依赖文件系统的应用可以平 : 滑使用。如果不稍微看看paper,绝大部分人估计都会有同样的误解。
|
|
|
g*********e 发帖数: 14401 | 11 还可以被spark用
但都是很intuitive的计算 |
z****e 发帖数: 54598 | 12 技术上没有问题
因为都在jvm上
所以不兼容的话,你自己可以动手实现,把它变兼容
当然这样要求你比较懂java才行
但是这种enrollment system非常不合适用file system啊
这个属于不能错的东西,大量需要transaction这些
学生选课冲突了,你得回滚才对
这个属于db的领域,不推荐用file system
用postgresql倒是可以
然后弄点j2ee啊,很容易搞
估计erp里面就有大量的j2ee components
当然你要用上hdfs也可以,放一些不重要的数据在file system里面
比如学生的爱好,log,甚至照片
【在 C********g 的大作中提到】 : 比如,一个大学,40,000 enrollment.200 servers (99% are Solaris).可不可以建自 : 己内部的HDFS,运行所有的软件系统包括Oracle DB,ERP system, student system呢 : ?技术上可行吗?经济上可行吗?
|
z****e 发帖数: 54598 | 13 不过你们才40k个enrollments
这点数量,根本不需要什么erp
直接自己从php建起都能搞定 |
z****e 发帖数: 54598 | 14 hdfs跟cloud结合起来就不烧钱了
天作之合
主要是cloud上爆nodes太容易
如果自己维护服务器,反而不太合适
【在 n******t 的大作中提到】 : 错了,hdfs是烧钱的。 : 你要搞什么big data之类的应用么?
|
z****e 发帖数: 54598 | 15 你们学校有research cloud吗?
有的话,你直接在research cloud上爆nodes
然后就可以搞hdfs了,爆三个
一个做namenode,剩下两个做datanodes
然后就可以搞了
其实hdfs就是一个persistence的file system
没啥大不了的,把idea弄明白了,剩下细节其实不怎么重要
太多细节面试的人自己也记不住 |