哪位童鞋试过 submit hadoop job to remote cluster from java code? - Programming版

本页内容为未名空间相应帖子的节选和存档，一周内的贴子最多显示50字，超过一周显示500字访问原贴

Programming版 - 哪位童鞋试过 submit hadoop job to remote cluster from java code?

相关主题
● 一个Hadoop Cluster升级的问题	● 这个cassandra paging的解决方案怎么样？ (转载)
● 请问这些和编程有啥关系？	● 用hadoop spark写一些任务在大公司是不是都是低端的民工活
● 关于big data	● 几个问题
● 怎么自学cloud/big data programming	● 大家对 exception 都是怎么处理的？
● Hadoop cluster的问题	● 问一个constructor的问题 (转载)
● spark 到底牛在什么地方？	● 一道编程题 - throw Exceptions
● Hadoop CLUSTER部署thrid party libraries一般是怎么操作?	● 有无这种聚类的算法？ (转载)
● 诡异的异常处理	● static initialization dependency c++

相关话题的讨论汇总
话题: cluster话题: hadoop话题: remote话题: submit话题: 童鞋

进入Programming版参与讨论

(共1页)

J****R
发帖数: 373

我google了一下,大体都是说要设几个config:
mapreduce.framework.name
yarn.resourcemanager.address
fs.defaultFS
但实际情况光设这些并不work,总是出现
Exception in thread "main" java.io.IOException: Cannot initialize Cluster.
Please check your configuration for mapreduce.framework.name and the
correspond server addresses.
不知道这里有没有大牛做过这个事情?

(共1页)

进入Programming版参与讨论

相关主题
● static initialization dependency c++	● Hadoop cluster的问题
● Play2 vs Vert.x 是什么情况？	● spark 到底牛在什么地方？
● Is Redis scalable?	● Hadoop CLUSTER部署thrid party libraries一般是怎么操作?
● 折腾一个问题	● 诡异的异常处理
● 一个Hadoop Cluster升级的问题	● 这个cassandra paging的解决方案怎么样？ (转载)
● 请问这些和编程有啥关系？	● 用hadoop spark写一些任务在大公司是不是都是低端的民工活
● 关于big data	● 几个问题
● 怎么自学cloud/big data programming	● 大家对 exception 都是怎么处理的？

相关话题的讨论汇总
话题: cluster话题: hadoop话题: remote话题: submit话题: 童鞋

#	版面	帖数(主题数)
-	全站	4871 (796)
1	Military	3777 (569)
2	Stock	341 (51)
3	Joke	117 (17)
4	History	116 (3)
5	Automobile	100 (9)
6	USANews	55 (9)
7	Midlife	45 (1)
8	Headline	41 (41)
9	Dreamer	33 (13)
10	FleaMarket	32 (20)
11	Living	30 (7)

boards

未名新帖统计// 7月16日

历史上的今天