由买买提看人间百态

topics

全部话题 - 话题: kafka
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)
p*****2
发帖数: 21240
1
来自主题: JobHunting版 - airbnb有啥核心技术吗
kafka做rpc很牛呀
g*****g
发帖数: 34805
2
来自主题: JobHunting版 - 讨论一下12306的架构?
rate limit服务器能撑住但不公平。最简单的就是订单写入Kafka立刻返回,另一边
RDBMS慢慢出票就行了。但凡异步出票所有问题迎刃而解。
c*********e
发帖数: 16335
3
来自主题: JobHunting版 - 讨论一下12306的架构?
en, kafka是必需的。
B***S
发帖数: 73
4
来自主题: JobHunting版 - java position in Columbus Ohio
Contractor
Critical Functions:
• Experience developing highly scalable and composable RESTful APIs
(JSON, API design, HATEOAS, Swagger, Hypermedia, JSON-LD, HAL)
• Experience with REST frameworks solutions such as: SpringBoot or
Dropwizard, Apache CXF/Axis
• Authentication and authorization standards such as SAML, JWT,
OAuth, OpenID, WS-Federation, OKTA
• Experience with Oracle (relational concepts, SQL, JDBC,
connection pooling)
• Experience in SDL... 阅读全帖
p*****2
发帖数: 21240
5
kafka spark都火的要死吧
a*****s
发帖数: 1121
6
牛肉姐也是做体系结构的?牛肉姐以直白著称,能聊聊你怎么准备的么?很少见你上面
经,回馈本版啊。
有些知识你做深了,必然就面窄了。
本来就没准备。存HDFS也不是不可以,而且也不是没有大公司用。
前段手机的数据需要个kafka的东西来aggregate,然后写给HDFS,之后给MR或是SPARK
去处理,结果存HDFS,他又没给我latency的SLA requirement,哥也是知道redis啥的
,很了不起么?
说白了就是大家投缘不投缘,你没说的我心坎上,对不起,不要你。门槛而已啦。
a*******u
发帖数: 23
7
大家好,我目前在藤校之一读计算机硕士(学校名字就不说了,太容易定位)。去年12
月初通过G家Intern面试进入pool,等了一个月拿到一个Google Ads组的面试,当时由
于在等朋友的项目审批下来(朋友是full-time,夏天会带intern),所以面试没有很
积极,意料之中的挂了。今天突然得知朋友的老板不希望他带intern分神,suspend了
他的项目,所以现在要重新找项目。
我对web和android的经验比较多,写过社交网站和手机app(android, IOS都有)。对
distributed system比较感兴趣,最近在学习Kafka。对实习项目没有特别要求,除了
硬件(因为没学过)都愿意做。编程语言的话主要是Java, C, Python, JSP。
眼看二月份了,又没有面其他家,所以心里还挺慌张的。
希望版上的前辈可以帮帮我,无论是直接host还是把简历推荐给同事,都感激不尽。麻
烦了!^_^
(如果有前辈知道如何增加Match到的机率,愿意包子相送求Tip,40个包子,发完为止)
j*******l
发帖数: 1066
8
来自主题: JobHunting版 - 刚进去Tableau LinkedIn的人
就凭LinkedIn 开源了Kafka 他们家的技术也配得上尊重
n*******3
发帖数: 105
9
L家这类网站,坦率讲在数据量,流量,和技术上没法和GOOGLE, AMAZON和FACEBOOK比
。只从生意的角度讲,几十个一流工程师,再加上一两百号普通水平的工程师,足够了。
但L家装逼得厉害,雇了一大堆顶级的工程师,工资开得爆高。这些好工程师作了些什
么呢?HELIX, KAFKA, GOBBLIN,DATABUS这些都是好项目,对业界贡献不小,对提高工
程师个人的BRAND AWARENESS很有用,但对公司生意的贡献,这些项目有多大?我的估
计是边际效应几乎为0.
g*********e
发帖数: 14401
10

了。
among these, only kafka deserves credits. others are not so good.
b**********5
发帖数: 7881
11
来自主题: JobHunting版 - 唉, 这里得人都是太浮躁
老兄。。。 用和吗, 是不一样的。。。
用过kafka, cassandra, Hbase, storm ,hadoop, pig, 学spark的飘过。。。
这都老技术了。。。
j*******l
发帖数: 1066
12
来自主题: JobHunting版 - 对L股价大跌的一点看法
"L主管技术的一个VP给工程师群发了一个邮件,表示以后不再继续用Scala开发了,重
新转回使用Java"
那当年决定用Scala的是同一位哥们吗
https://www.linkedin.com/in/jkevinscott
话说Kafka能开源还是很牛的 至少是同一个功能的标杆
f*********i
发帖数: 197
13
来自主题: JobHunting版 - Uber offer,留在FG还是去呢
多谢你分析得这么全面。
当前情况是现在呆的组每天做的事情差不多,感觉技术含量不高,担心这些internal东
西用多了以后没有竞争力。
换组不容易,要折腾很久而且不一定成功。
U家工作累其实还不怕,主要担心的是3小时的commute,现在每天坐班车好舒服,到时
候挤bart熬一个小时感觉在浪费生命。
从FG的非核心组到U的核心组,感觉技术上还是能学点,他们用的Kafka很惭愧我一直没
有接触过,polygon algorithm听起来也蛮有意思。
个人其实是想去的,但是为了家庭是不应该去的。所以才纠结。现在还是处于想拼一下
的时候,但是有孩子以后家庭比例越来越重,想当个好父亲也想任性的赌一次,矛盾。
f*********l
发帖数: 46
14
来自主题: JobHunting版 - yelp vs 微软
最近拿到这两个offer,比较纠结...
* yelp 技术时髦,做广告基础架构,具体做实时分析,用kafka, spark什么的,微软
做cloud
* 包裹和微软差不多,考虑税的因素
* 加州气候好,西雅图房价低
* yelp不如微软稳定,我没h1b怕被雷
请教选哪个?
更新一下yelp包裹:240K, 包括签字费和搬家费

发帖数: 1
15
来自主题: JobHunting版 - yelp vs 微软
我会继续面
[在 frederickyl (frederickyl) 的大作中提到:]
:最近拿到这两个offer,比较纠结...
:* yelp 技术时髦,做广告基础架构,具体做实时分析,用kafka, spark什么的,微软
:...........

发帖数: 1
16
来自主题: JobHunting版 - yelp vs 微软
作为正准备跳出微软的完全不同意,你说的学习的东西在业内一点用没有。微软的测试
模式和思维更是陈腐不堪。无脑选Yelp。学Kafka, spark不说对跳槽帮助大,关键是体
会那些elegant design principles.

如果你是刚毕业,去微软还不错。学学C#,C ,WPF什么的,学学软件开发的流程,设
计模式,各种测试的技术,打个好基础。拿个十几万的年薪不少了,业余学点儿东西,
周末游山玩水,生........
r****7
发帖数: 2282
17
L家有啥牛逼的技术。。。不就是一个kafka写了些博客么。。。
如果狗家愿意开源,秒杀几条街。。。
t**r
发帖数: 3428
18
先在毕业进flg的小孩眼戒太窄了,还谁都看不起。劝你们一句话:世界是多维的,人
也是多样话的。答案也是丰富多彩的。不是说谁code写的好 谁就是好人?谁代码行数
多谁就是傻逼。去看看kafka的代码,虽然很烂,但是人家就解决問題 就是最火的项目。
刚毕业 有个好起点,叔表扬你们,但是太嚣张 就有点让人觉得半瓶子匡当了。
t**r
发帖数: 3428
19
hbase
w**z
发帖数: 8232
20
spark

spark
s*****r
发帖数: 43070
21
显然卡夫卡啊,hbase是什么东东

spark
f*******t
发帖数: 7549
22
来自主题: JobHunting版 - 有没有人发现pinterest有个bug啊
不太了解具体什么情况,类比一下不知道对不对:一个人subscribe了很多channel,点
follow后你会subscribe他所有的channel。这一般是异步操作,点follow会产生一堆
subscribe某个具体channel的event,丢给kafka之类的stream pipe然后希望
downstream system来处理这些event。本身stream pipe就可能丢event,再加上中间不
同系统用的cache很可能不是consistent的,最后漏掉几个channel情有可原。
f*******1
发帖数: 59
23
来自主题: JobHunting版 - 上海民营银行海外招聘
做一下广告:一家以省政府牵头,有30亿启动资金的民营银行要在上海建立科技和业务
中心。银行以互联网为主,做支付,借贷,理财,境内外转账,etc。
诚征拥有海外多年互联网金融工作及学习的背景,熟悉海内外互联网金融发展趋势,具
有创新理念,致力于归国投生于科技金融事业的人士
公司氛围将秉承创业精神,股权激励,以技术团队为主,占到60%或以上。公司主管将
于四月中旬来美现场招聘。
有意者或者有认识的朋友感兴趣 请与[email protected]/* */联系, 谢谢
招聘岗位:
业务类
资产管理产品设计
工作职责:
1、负责资产项目的引入、流程设计、机构、产品及项目准入、协议签署、除外部渠道
产品引入以外的商务谈判等工作;
2、协助配合持续期管理室和综合财务室与业务的相关工作;
3、牵头完善资管产品部资产引入的有关制度、办法、流程;
工作要求:
1、国外重点院校本科及以上金融相关学历;
2、有资产管理产品设计相关经验5年以上,了解市场客户需求和市场产品动态,具有产
品创新精神;
3、有较强的沟通能力和执行力,有高度的责任心和团队协作精神,能承受较强的工作
压力;
4、热爱移动... 阅读全帖
p*****2
发帖数: 21240
24
来自主题: JobHunting版 - Uber都有啥有意思的组?

kafka?
t******4
发帖数: 134
25
来自主题: JobHunting版 - Uber都有啥有意思的组?
这货难道不是L家的?

:kafka?
m******y
发帖数: 114
26
来自主题: JobHunting版 - 一点骑驴找马经验
各个公司很多设计或多或少公开。
可以找找facebook news feed, messenger, chat, spotify, ..
另外可以看看一些library,比如redis, kafka, zookeeper之类
j*****y
发帖数: 2042
27
做Mobile相关的infra team,做的东西跟build/ci/test/release都有关系,mobile和
全栈都需要。
因为属于新开的team,从junior到senior都招,有兴趣的pm我,可以帮忙内推,谢谢大
家支持!
==4/2 更新==
mobile infra的主要职责是负责主流平台(安卓苹果)上的各个App的infrastructure
,比如代码编译(类似于jack'n'jill, buck, etc.),静态分析(类似infer, lint),
代码评审和代码签入相关的各种预处理后处理,各种打包优化,各种测试框架(类似
mokito, roboletric, espresso, ui-testing),分发(中美应用商店以及内部版本)
以及发布后的与版本相关的数据采集和分析(类似kafka,guage,hive)。
JD:
https://goo.gl/XYmBWQ
M***r
发帖数: 79
28
来自主题: JobHunting版 - 内部推荐BigData工作机会
公司中等规模位于南湾Santa Clara. 主要有Analytics和Recommendation两个teams.
平台主要有Hadoop, Spark, Kafka. 编程语言主要是Scala, 不过不是必须的. 会Java
或Ruby都可以. 是个学习大收据的好机会. 如有兴趣,请把Resume发给我.
补充一下:这是个Engineer职位,不是Data Scientist。最好有公司经验(junior or
senior)。有经验会优先考虑。谢谢大家的简历。我就不逐个回复了。
Email: [email protected]/* */
q********c
发帖数: 1774
29
来自主题: JobHunting版 - onsite提前结束
可能去开Kafka summit, 问问recruiter不就行了

发帖数: 1
30
https://www.smartrecruiters.com/Ancestry/88345635-senior-data-s
Company Description
Ancestry is the world's largest online resource for family history. We have
helped pioneer the market for online family history research, taking a
pursuit that was expensive and time-consuming and making it easy, affordable
and accessible to anyone with an interest in their family history. The
foundation of our service is an extensive collection of billions of
historical records that we have digitized, indexed an... 阅读全帖
h*********d
发帖数: 1054
31
来自主题: JobHunting版 - linkedin infrastructure 是干啥的?
是负责开发 Espresso,voldemort, kafka?
谢谢
p****6
发帖数: 724
32
来自主题: JobHunting版 - linkedin infrastructure 是干啥的?
除了kafka,其他俩有人用吗
T*******e
发帖数: 4928
33
来自主题: JobHunting版 - Too tired, thank goodness my job
这不正是最佳刷题长技术的时间吗。每天跑一小时步,洗个澡。 刷刷题
以前想玩又没时间玩的技术spark, kafka神马的,都可以看看或练练。
B*Q
发帖数: 25729
34
来自主题: JobHunting版 - 对于微软收购某家的看法
可惜生态环境不行
得有大牛雷锋把 Hadoop, Spark, Storm, Kafka, Cassandra, HBase, ... ...
都重新用C#写一遍才行
w**********0
发帖数: 192
35
1. 微软方面的原因: 之前对诺基亚已经这么干过。 新买了一个公司, 让它的报表
和股价迅速变得好看的办法就是裁员。 既然以前早就砍掉1.25万人了, 这次再动手早
就轻车熟路, 对于类似于什么ceo自己名声,公司名声什么的事情不会有任何犹豫。
一万多人都砍过, 再多砍个几千, 名声也坏不到哪里去。
2. L方面的原因: L是一间在人力资源管理上严重经营不善+overstuffed的公司。
这几年拼命扩张,员工从两三千人, 增长到现在的七八千人, 员工人数翻了三
倍多, 产品却基本没多大变化, 营收渠道还是万年不变的talent solution, market
solution, sales solution, 即team money, 但事实上所谓team money占的总人数
是很少的, 只有区区几百人。 而其他一些部门却因为各种不知所云的原因搞得无比臃
肿。 比如mobile, 居然200多人, 在talent solution这种占公司营收50%-60%
的重要产品才只有不到一百人这种程度的规模下, 写一个手机客户端居然需要200... 阅读全帖
w**********0
发帖数: 192
36
1. 微软方面的原因: 之前对诺基亚已经这么干过。 新买了一个公司, 让它的报表
和股价迅速变得好看的办法就是裁员。 既然以前早就砍掉1.25万人了, 这次再动手早
就轻车熟路, 对于类似于什么ceo自己名声,公司名声什么的事情不会有任何犹豫。
一万多人都砍过, 再多砍个几千, 名声也坏不到哪里去。
2. L方面的原因: L是一间在人力资源管理上严重经营不善+overstuffed的公司。
这几年拼命扩张,员工从两三千人, 增长到现在的七八千人, 员工人数翻了三
倍多, 产品却基本没多大变化, 营收渠道还是万年不变的talent solution, market
solution, sales solution, 即team money, 但事实上所谓team money占的总人数
是很少的, 只有区区几百人。 而其他一些部门却因为各种不知所云的原因搞得无比臃
肿。 比如mobile, 居然200多人, 在talent solution这种占公司营收50%-60%
的重要产品才只有不到一百人这种程度的规模下, 写一个手机客户端居然需要200... 阅读全帖
s*****r
发帖数: 43070
37
来自主题: JobHunting版 - LinkedIn 求team match
肯定是数据往Azure上面搬,和Office360整合
领英那些开源项目估计都药丸,看过两家的整合计划,里面根本没提到那些项目,企业
环境里面,kafka还会有多大用处
c*****n
发帖数: 233
38
来自主题: JobHunting版 - 投行数据组内推python developer
数据相关的组,主要用的技术有hadoop, spark, kafka...
只要可以写python code, 别的没经验没关系,应该都可以很快上手。最好有2-3年工作
经验, 因为title不是entry level的。
感兴趣的请站内我。谢谢!

发帖数: 1
39
Title:Lead Software Engineer--Big data server
Work type: full time
Location: San Mateo, CA
Base salary: 150K+stock option (近两年将可能上市)
Job Description
Build smart, scalable systems, high throughput, low latency systems like
Adservers. Work with top notch engineers and contribute to design,
implementation and code reviews. Write APIs for Campaign Management and
Reporting in Java. Write SQL queries and optimization. Follow REST standards
for building new APIs using open source frameworks like Spring... 阅读全帖
E****h
发帖数: 41
40
来自主题: JobHunting版 - 湾区xad招大数据工程师 sr/jr职位
目前有三个职位,招sr(5+ years)和 jr(0-3 years)工程师。
java
hadoop, mapreduce, yarn, hive, pig, airflow
spark, spark streaming
kafka
presto
mysql, postgresql
aws, s3, redshift, ec2, dynamodb
webservice
jr职位要求coding,算法过关,有大数据经验更好
sr职位要求有系统设计经验,和hadoop/spark经验
有兴趣请发简历至 james dot yu at xad dot com

发帖数: 1
41
来自主题: JobHunting版 - 湾区招聘full-stack engineer
Title: Senior Software Engineer - Full Stack
Work type: full time
Location: Palo Alto
base Salary : 160k-180k + bonus + stock option
Senior Software Engineer - Full Stack
What You'll Do:
• Meteor: We can iterate quickly using Meteor. We can get a highly
responsive and production ready application within days rather than weeks
using Meteor stack.
• Kubernetes and docker: We are in charge of our infrastructure.
What is able to run on our laptops can also run in production
̶... 阅读全帖
r****7
发帖数: 2282
42
来自主题: JobHunting版 - Snapchat还是Uber?
估计lz是L家做kafka的高手?
S家应该套现快一些,不过文化很亚麻,想发这笔财要做好郁闷4年的准备


: 答复

: 如果不是在L,可以考虑让公司给个counteroffer。

: S很快要上市了吧?

: U进来Sr II说明LZ牛人,但是压力也会比较大

M******7
发帖数: 30
43
来自主题: JobHunting版 - Google team match求助
小弟master+3年工作经验,熟悉hadoop/hbase, kafka/samza,spark,其他offers快要
deadline了,跪求贵人相助,如果组里有headcount能帮忙推荐,请站内联系,谢谢!
y*********0
发帖数: 406
44
最好能有一点相关的或者分布式系统的经验。
包裹应该在22-26W之间,根据经验.
站内联系

发帖数: 1
45
new grad招不招

发帖数: 1
46
来自主题: JobHunting版 - Hiring Sr. Data Engineer
Title: Sr. Data Engineer
Location: South San Francisco, CA
work type: Full time - Direct to hire
Salary: 150-170K
PRO Unlimited http://prounlimited.com/pro
Leading with innovation and placing customers at the forefront are crucial
cornerstones that the company laid when it was first founded. And they
remain today. Indeed, PRO’s offerings have evolved over the years because
we have listened to our customers while keeping a close eye on the
marketplace.
In doing so, PRO can tout a proven trac... 阅读全帖

发帖数: 1
47
来自主题: JobHunting版 - Hiring Lead Big Data Engineer, Graph Team
Title: Lead Big Data Server Engineer, Graph Team
Work type: FULL-TIME
Location: San Mateo, CA
Salary: 160k+ Stock option+ bonus
Build smart, scalable systems, high throughput, low latency systems like
Adservers. Work with top notch engineers and contribute to design,
implementation and code reviews. Write APIs for Campaign Management and
Reporting in Java. Write SQL queries and optimization. Follow REST standards
for building new APIs using open source frameworks like Spring and
Hibernate. Have ... 阅读全帖

发帖数: 1
48
整天PIP/烙印啥的大家可能有点腻歪了,不如谈谈技术吧,大家看看意下如何?
一开始是发在startup版,转贴到找工版还有点犹豫,本版和菌斑是买买提著名的两个
大landfill之一。军版主要是文史哲政屁老将发帖。本版则充斥着各种各样的高手(自
命的高手和非自命的高手),而且闲人众多,一言不合就引经据典地论战,一不小心很
有可能被口水淹没了,心理有很大的障碍。
我听说一个人一生中最博学的两个时候,一个是高考前,一个是找工作的时候。想了想
还是下定决心趟这浑水,泥沙俱下之中如果能淘到一两颗珍珠,也算是赚了。
发信人: linuxhacker (linuxhacker), 信区: StartUp
标 题: 试着做了一个image sharing的网站
发信站: BBS 未名空间站 (Sun Oct 2 17:10:58 2016, 美东)
这个idea其实已经酝酿了一段时间,一开始纯粹是geek的通病,手痒做了个非常简单的
原型出来,真正开始放手大干是从今年一月初开始。真正体会到了一个人身兼dev+
product manager+project manager+QA到底有多累。唯一的... 阅读全帖
m********u
发帖数: 3942
49
公司为全球领先的信息与通信技术(ICT)解决方案供应商,薪资丰厚,工作地点Santa
Clara,CA
有兴趣的同学可以站内信或者发邮件:[email protected]/* */
Responsibilities:
• Design a comprehensive metadata support for the platform that
supports various data governance and security capabilities.
• Enhance the distributed query engine for various use cases,
especially in the area of heterogeneous data sources and cross-data-centers
query optimization.
• Develop algorithms that analyze query workload, derive common
workload ch... 阅读全帖
m********u
发帖数: 3942
50
公司为全球领先的信息与通信技术(ICT)解决方案供应商,薪资丰厚,工作地点
bellevue,WA
有兴趣的同学可以站内信或者发邮件:[email protected]/* */
Responsibilities:
• Design and implement components of our next generation platform-as-a
-service, such as resource manager, scheduling system, micro-service
framework and security.
• Research and prototype using open source technologies.
Basic requirement:
• 3+ years of development experience.
• Solid coding skill.
• Experience with distributed backend system.
• Se... 阅读全帖
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)