新手求问spark - DataSciences版

本页内容为未名空间相应帖子的节选和存档，一周内的贴子最多显示50字，超过一周显示500字访问原贴

相关主题
● Spark group问题	● 都用了spark了吗？
● 求问Facebook的data scientist ETL interview (转载)	● Hadoop Spark 学习小结[2014版] (转载)
● 想咨询一下洛杉矶这边data scientist起薪大概多少	● Hadoop Spark 学习小结[2014版] (转载)
● 请问一个概率的问题	● 大家觉得Weka和Python比较如何?
● 怎么建一个AWS的real time scoring engine？	● 悬赏 DS USE CASE
● Big data是下一个大坑吗	● 招数据科学家
● pig能做iterative的问题吗?	● spark到底能干什么？
● data scientist job openings at Workday	● 学习使用 spark需要会machine learning理论么

相关话题的讨论汇总
话题: lambda话题: accum话题: spark

进入DataSciences版参与讨论

(共1页)

s*********h
发帖数: 6288

最近在看spark的programming guide, https://spark.apache.org/docs/latest/
programming-guide.html#transformations
下面这段不是很明白啊。
accum = sc.accumulator(0)
data.map(lambda x => acc.add(x); f(x))
这里acc大概是typo,应该是accum吧。
但是为什么map后面有lambda和f(x)两个函数？
我简单查了一些例子，map后面似乎都只使用了一个函数。
那这个例子里面除了lambda的累加x的结果之外还有什么？
多谢

(共1页)

进入DataSciences版参与讨论

相关主题
● 学习使用 spark需要会machine learning理论么	● 怎么建一个AWS的real time scoring engine？
● 哪里可以免费的练习一下pig/hive/spark的?	● Big data是下一个大坑吗
● 跳过hadoop直接学spark可行么？	● pig能做iterative的问题吗?
● questions about SVD and ALSWR for collaborative filtering	● data scientist job openings at Workday
● Spark group问题	● 都用了spark了吗？
● 求问Facebook的data scientist ETL interview (转载)	● Hadoop Spark 学习小结[2014版] (转载)
● 想咨询一下洛杉矶这边data scientist起薪大概多少	● Hadoop Spark 学习小结[2014版] (转载)
● 请问一个概率的问题	● 大家觉得Weka和Python比较如何?

相关话题的讨论汇总
话题: lambda话题: accum话题: spark

#	版面	帖数(主题数)
-	全站	4871 (796)
1	Military	3777 (569)
2	Stock	341 (51)
3	Joke	117 (17)
4	History	116 (3)
5	Automobile	100 (9)
6	USANews	55 (9)
7	Midlife	45 (1)
8	Headline	41 (41)
9	Dreamer	33 (13)
10	FleaMarket	32 (20)
11	Living	30 (7)

boards

未名新帖统计// 7月16日

历史上的今天