c***z
发帖数: 6348 | 1 【 以下文字转载自 PoliticalScience 讨论区 】
发信人: chaoz (面朝大海，吃碗凉皮), 信区: PoliticalScience
标 题: survey bias correction问题 (转载)
发信站: BBS 未名空间站 (Sat Jan 18 13:46:16 2014, 美东)
请教一下达人们，你们做survey的时候，怎么adjust for selection bias啊？
能给个paper的link么 |
|
c***z
发帖数: 6348 | 2 Hi all,
Does anyone have experience in bias correction? I am working on a project
and the initial result was bad. I would really really appreciate any help!
Here is the details:
Business objective: Correct for panel bias in terms of demographic breakdown
, to obtain an accurate multiplier, in order to calculate site traffic,
sales, etc
Input data:
1. Site visits by people (own data, company Q);
2. Third party (C) 2000 site gender decomposition;
3. Third party personal gender labels (two... 阅读全帖 |
|
a*******g
发帖数: 80 | 3 三组病人 follow up长短严重不同 最长一组比最短一组平均值多三倍 而outcome是某
种并发症 出现时间在几周到几年不等 因此 这个随访时间的不同会严重影响结论 这是
retrospective study，三组病人还很不balance 第二 三组病人分别只有 20几个。
我考虑以下几种办法：1 propensity score matching，然后用matched data 做
analysis。问题是matching后一大半病人去掉了，对于我们综述这个病不利。
2做 time to event analysis 这样可以部分修正因为follow up 不同造成的bias 问题
是对于太短的那组病人 也无法有准确的estimate 几乎都censor 了
3 设一个cutoff 比如一年 把这个时间点后面的event都当作censored 其实这个和
time to event那个有点像 纠正bias 还不如2 好处是可以用全部病人 并且比较直观好
理解
还有没有别的好办法 这三个方法那个稍微好点，或者是有什么问题 请大家指教 |
|
c***z
发帖数: 6348 | 4 This is the main project I am working on. I would greatly appreciate if you
can share some insight. :)_
Say you have huge data set about online activities, you know that the data
set is biased, i.e. most of the information are collected from young males
making less than 50K. However you don't know how much is the bias.
To sell data products to online marketing companies, you need to correct for
the bias, so that your products work for the whole online population, or a
different population, such ... 阅读全帖 |
|
c*****o
发帖数: 1702 | 5 If you get data from other segment but just male making less than 50k is
dominant, you can use census data to do the bias correction. I mean in the
case you get other demographic segment but just with fewer data, bias
correction is possible. |
|
l******0
发帖数: 244 | 6 However you don't know how much is the bias.
--- Wouldn't it be easy to get to know the actual bias rate by random
sampling and annotating a manageable subset? However, there may not be a
magic way to make it work for all populations if the data is inherently too
biased.
you
for
a |
|
c***z
发帖数: 6348 | 7 我们的panel是US population的10%，然后我们只知道panel中10%的人的性别，所以“
有性别信息”这一点可能也带来了新的bias。
（而且这10%的性别信息来自3个来源，这些来源相互矛盾而且自相矛盾。）
就是说要用1%的sample去correct 10%的sample的bias。
目前的想法是从这10%人群中bootstrap一个性别1：1的子集作为基准。。。
感觉不管怎样都是shoot in the air，头疼。
too |
|
E*****P
发帖数: 591 | 8 要是受害人不是 白人，嫌犯有黑人，不知道还会不会考虑 Bias Crime |
|
d******g
发帖数: 6966 | 9 不是站在白猪立场讲话哦...但是这个bias是指gay吧... |
|
E*****P
发帖数: 591 | 10 是 性取向 的 bias。不过我觉得如果受害人如果不是白人 gay，这个案子不会这么轰
动。 |
|
r*****t
发帖数: 7278 | 11 不要太针对什么ABC和jimi
别老是让人觉得中国人很多苦大仇深似的
多happy，少仇恨。
另外，多准备些熊猫玩具，遇到了过路的小朋友，送上熊猫并附上“help say no to
chinese bias” |
|
|
|
|
p**********d
发帖数: 7918 | 15 June 3, 2010
Lawyers Warned Wal-Mart of Risks Before Bias Suit
By STEVEN GREENHOUSE
More than six years before the biggest sex discrimination lawsuit in history
was filed against Wal-Mart Stores, the company hired a prominent law firm
to examine its vulnerability to just such a suit.
The law firm, Akin Gump Strauss Hauer & Feld, found widespread gender
disparities in pay and promotion at Wal-Mart and Sam’s Club stores and
urged the company to take basic steps — like posting every job opening and |
|
l****z
发帖数: 29846 | 16 All across the country, students are studying for Advanced Placement exams
coming in the middle of May. Students in AP Economics are taught with
Krugman’s Economics for AP by Margaret Ray and David A. Anderson, adapted
from Paul Krugman and Robin Wells’ Economics (Second Edition). Our public
education system is supposedly one without bias, a place where any student
can come and learn without any form of partisanship. Instead, our classrooms
are slowly becoming political lecture halls with teache... 阅读全帖 |
|
C********r
发帖数: 114 | 17 我认识一个从Mass shooting幸存的人。
他告诉我当那件事刚发生时，他接受了新闻的采访。
当他被问及当时脑子里想什么时，
他说他想要是手里有支枪就好了。
他告诉记者枪手很紧张，处于精神崩溃边缘，枪械也几次Jam。
他确定他如果有枪应可以阻止枪手，最少可以减低伤亡。
记者喊停了摄像，立刻结束了采访。
他质问记者为什么。
记者说在这个时候没人想听这个。
但这是事实啊，他反问。
记者回答说, 别傻了，当涉及到枪的问题上没人想听事实，
人们只想马上报复些什么，
至少我们媒体是这么认为的。
所以媒体对枪的态度是有严重Bias的。
对媒体奉若神明的，
好好想想吧。 |
|
r******g
发帖数: 4002 | 18 媒体只有对枪的态度是有严重Bias的？美国的媒体与全世界的媒体没有两样，对内是党
派打手，对外是政府打手。如果还有人骂中共的媒体如何如何，那说明这人太幼稚了。
现代媒体，就没有真正的记者，所谓的‘公平正义普世价值’，都只是虚情假义的说辞
罢了。 |
|
m***n
发帖数: 581 | 19 这个Bias的确不好。他只要再多采访几人，问问有多少人是更希望自己手上有枪，还更
是希望凶手手上没枪，就好了。 |
|
m*h
发帖数: 2750 | 20 人可以有bias, 但是做法官就要克服一己的偏见以坚持司法公正，否则就别吃这碗饭 |
|
g********2
发帖数: 6571 | 21 这说明奥巴马的所谓“data”有问题，他公开宣称很多studies证明警察对黑人有bias
，黑人比白人多几倍的可能被警察盘问和打死。
但他并没拿出所谓data的来源，也没有给出任何一个study的出处。
如果不是他这样煽动，根本不会有BLM，更不会有今天这样激烈的反警现象。 |
|
f**********n
发帖数: 29853 | 22 他的数据就是简单地说，为啥黑人坐牢的比例比总人口里的黑人比例高那么多？
他们支持AA的逻辑也是一样，为啥上大学的黑人比例比总人口里黑人比例低那么多？
这俩问题本身都是好问题，只是解决方法不是简单地让差生上好大学，不抓黑人坐牢。
这些解决方法就如同
提着汽油救火
请发春上课
信日日发誓。
bias |
|
|
N*******M
发帖数: 3963 | 24 BIAS? 那为什么华裔进藤校分数要比别人高？ |
|
g***c
发帖数: 11523 | 25 几个教授，没一个说这个判决公平的
都说不知道这三个judge在干吗，判决opinion非常bias，基本一边倒支持左逼。 |
|
c*******e
发帖数: 5818 | 26 Michael Horowitz says Christopher Steele had a bias that should have been
reported to the FISA court and DOJ lawyers
Comey/FBI： 我 不，说了，咋误导！ |
|
c*****n
发帖数: 83 | 27 前段时间开车在 local 被撞 totaled 了. 今天收到警察的 report. 发现非常 bias.
对我很不利。
具体体现在
“Nature of Offense”: the defendant was the driver of a vehicle approaching
a stop sign and did not stop at the point near the intersection road way..
“Remarks”: Has a clear view of a approaching traffic on the intersecting
roadway before entering.
这与我跟他说的版本很不一样。
车祸发生在周末我们全家(包括老人小孩)在回家的local 路上 (离家也就两三 miles).
我主观上没有急事不赶时间，没有理由不停 stop sign。而且车祸前几天还跟家人讨
论过几个月前由于没有停 stop sign 酿成的惨剧。
那个 stop sign 在下坡的转弯口，不是垂直与大路相交。右方有树木挡住视野。当时
我先看右... 阅读全帖 |
|
x******g
发帖数: 3952 | 28 就是楼主从stop sign窜出去撞了正常行驶的车。还能怎么bias啊。 |
|
b*******c
发帖数: 20683 | 29 对方没有stop sign，楼主有stop sign的话，冲出去撞了，就是没停啊。不理解啥叫左
右看了没车，忽然又被冒出来的车撞了......
bias.
approaching
). |
|
a9
发帖数: 21638 | 30 像这种贴子我都ctrl a一下楼主
bias.
approaching
). |
|
n**x
发帖数: 1898 | 31 你在stop sign前一脚油门撞了大路的车子还有啥好说的？警察写的都是事实。
bias.
approaching
). |
|
发帖数: 1 | 32 说得很中肯很在理，一针见血
bias.
approaching
). |
|
H***3
发帖数: 821 | 33 有很多traffic ticket attorney，可以打电话问问，但是我怀疑你这种情况没有律师
愿意接。
Stop sign的意义不在于你是不是exactly停在了那块牌子那儿，而是像ticket上说的那
样，是不是停在了“the point near the intersection road way”
很多地方，只有在那个点而不是stop sign的牌子，你才能看清楚后方有没有来车。
bias.
approaching
). |
|
a****g
发帖数: 3027 | 34 扯啥理由动机都是为自己辩解安慰而已。你应该庆幸你的车大，自己家人没有受伤。
对方没有stop牌，你没有看清，自然是“突然冲出来”。问题的关键是对方“突然冲出
来”合理合法没有任何错，而且是应该的行为。
你的开车习惯要彻底改。stop牌是让你先在值钱停稳（理论上还要等三秒，加州，停了
时间不够警察也会给你罚单），然后（右拐为例：）左－右－左 看三次，之后右拐。
你现在的开车习惯，基本上造就你是马路杀手。
bias.
approaching
). |
|
|
Z*****l
发帖数: 14069 | 36 主观动机和思维过程无法证明，只能根据客观行为进行描述定性。
不然杀人犯都可以宣称是为了拯救不堪重负的地球了。
bias. |
|
F*********u
发帖数: 12190 | 37 特地赶来围观
楼主生活中就是个没理搅三分的大妈
警察report写成啥样你这都是全责，跪安吧
bias.
approaching
). |
|
h*****k
发帖数: 1274 | 38 你怎么解释都没用的，错误操作一脚油门冲出来，即使你停了但是没有路权，所谓的马
路杀手就是你了
bias.
approaching
). |
|
n****g
发帖数: 14743 | 39 真危险
得回家好好反省一下啊
bias.
approaching
). |
|
g***j
发帖数: 40861 | 40 你全责 没啥好说的 警察才不管你是不是误操作呢 误操作也是你全责 你误操作或者不
操作对被撞的那个车是一样的 有一点也许当时你提供证据对你有点帮助 那就是对方超
速 我一个月前停稳以后看左右没车启动 结果撞上一直行的 两车全报废 估计是我走神
了 看到了车但传递给大脑的信息是没车 我全责 没啥好说的
bias.
approaching
). |
|
G**********2
发帖数: 4138 | 41 好在对方人没事，否则你这是涉嫌谋杀啊！ 像你这种one way stop sign不是停一下，
也不只是停三秒，是停到没有车了才可以走。你停10分钟被人撞了，你还是全责。吸取
教训吧。。。
bias.
approaching
). |
|
d*s
发帖数: 3016 | 42 客观事实是，你在Stop那里不但没有停还加速冲出去了。
油门刹车弄混是最要命的问题，驾照是怎么考的？说话没有什么逻辑又特别主观，楼主
文科女生吧？
bias.
approaching
). |
|
a*********n
发帖数: 1331 | 43 sampling不可能，因为data是secondary data，不是自己收集的。
记得有统计方法解决selection bias，叫heckman two steps，但是有人提出这方法有
问题 （具体不记得了，哪位能给个reference吗？）
好像记得有人提出用simultaneous equation modeling。但这方法没什么人用啊。难道
也是问题一大堆？（reference? )
现在大家都用什么方法？ |
|
h****a
发帖数: 8 | 44 Smash the ‘Bamboo Ceiling’ of Racial Quotas
One Indian American says he overcame anti-Asian bias and got into med
school by claiming he was black.
By John Fund — April 5, 2015
A group of Asian-American students has filed suit against Harvard’s
admissions policy, charging that it seeks to limit the number of Asian
students much like quotas held down the number of Jewish students
until the 1920s. For example, one of the students Harvard rejected, an
unnamed child of Chinese immigrants, had perf... 阅读全帖 |
|
g*********9
发帖数: 1285 | 45 天天股市关了以后，有人就开始解释，为什么今天股市这个走法。这个就是一种bias,
总以为什么都可以解释掉，可以“预见”到。为什么没人能前一天预见到呢？ |
|
M****z
发帖数: 1058 | 46 有同感，乔丹大学时的投篮姿势和后来变化很大
bias爆发力惊人啊 |
|
t******o
发帖数: 5314 | 47 从片子里看，bias没有任何吸毒历史，很可能就是太高兴了，尝试一下，没想到那天的
可卡因纯度高，自己体质很敏感，又喝酒，几个加起来就挂了。
这件事和政府严打毒品联系起来还是很有意思。 |
|
|
P*******e
发帖数: 39399 | 49 ☆─────────────────────────────────────☆
xiaok1981 (xiaokzhu) 于 (Sun Sep 22 00:35:06 2013, 美东) 提到:
bia理论水平至少高毛龟5个档次，能排出qb 2013 rating,我服。关键是烂瓜为人正直
，永远不会往修正主义道路上。要警惕革命队伍中的刘少奇邓小平之流，插管吸血，重
阳外发！
☆─────────────────────────────────────☆
wxx07 (干嘛注册) 于 (Sun Sep 22 00:36:17 2013, 美东) 提到:
oh, yeah, 革命咯！
☆─────────────────────────────────────☆
iguanaheter (100 yards to the dog pound) 于 (Sun Sep 22 00:40:11 2013, 美东) 提到:
两个都行啊。宠物龟制版还是挺公平的。按说宠物龟应该也是你们标题党的一员小将啊
，你该支持他。
☆───────────────────────... 阅读全帖 |
|
|
