Why do we misjudge groups by only looking at specific group members?
生存偏差
,解释道。
生存偏差是什么?
生存偏差是一种认知捷径,由于失败亚组的不可见性,当成功亚组被误认为整个组时就会发生。偏差的名称来源于当数据集只考虑“幸存”的观察值,排除没有幸存的点时个人犯的错误。1
出现这种偏差的地方
生存偏见的例子在很多领域都很明显,尤其是在企业界。商学院的学生可以回忆起“独角兽初创企业”在课堂上是如何受到欢迎的,作为学生应该努力追求的榜样——成功的典型象征。尽管《福布斯》报道称90%的初创企业都失败了,但整个学位都致力于创业,许多学生声称他们有一天会找到一家初创企业并取得成功。2
通过观察成功的初创企业创始人,如史蒂夫·乔布斯、比尔·盖茨和马克·扎克伯格,个人可以得出结论,要达到他们的成功水平,他们必须有一个想法,辍学,并为他们的伟大想法奉献时间。
在《科学美国人》中,滑铁卢大学的迈克尔·舍默和拉里·史密斯教授描述了关于商业成功的建议是如何扭曲个人认知的,因为我们往往会忽略那些没有成为成功企业家的大学辍学生或已经失败的企业。3
简而言之,许多人忘记了这些独角兽初创企业仅仅是:独角兽。成千上万的人试图走上与这些商业大亨相同的道路,但大多数人都失败了。尽管如此,他们的失败故事并没有像成功故事那样被广泛分享,这让其他人对我们的能力和潜在成就有了夸大的想法。这并不是说努力工作和天赋不会带来成功,而是说,作为一个社会,我们倾向于忽视常见的失败,并抓住成功的故事作为可能性的证明。相反,在这个假设中,我们还必须考虑到运气、时机、关系和社会经济背景等因素在知名创始人的成就中发挥了作用。
相关偏见
个体效应
生存偏见是有害的,因为它发生的如此普遍,以及这种偏见如何深刻地影响我们的选择。通常,这种偏见与金融决策、企业家精神、赌博和医学研究有关。在这些领域做出决策时,我们必须确保既考虑成功也考虑失败。否则,生存偏差会深刻影响我们的认知和判断。没有做出理性决策所需的所有数据,个人将无法为自己做出最佳选择。
系统性影响
生存偏见无处不在,因为这是一种常见的偏见,影响着我们在决策时对数据和信息的解读。生存偏差也会影响高层决策,从而导致跨多个学科的系统性挑战。
历史叙事
重要的是要考虑生存偏见如何影响我们看待历史的方式,从而影响我们如何理解我们的世界。根据学校的不同,信息呈现的方式和使用的材料会产生偏见。关注某些群体和他们在历史上的成功会贬低其他人的故事和奋斗。回避剥削的讨论会让我们对几个国家是如何形成的,以及为什么某些群体在现代似乎有不公平的优势有一个不准确的了解。从更大的角度来看,陷入生存偏见会让我们对系统性种族主义以及其他不平等现象产生看法。为了推动社会进步,重要的是既要看到历史上的胜利,也要看到历史上的巨大不公。
流行病学
在疾病诊断的实例中发现了存活偏差,特别是关于诊断后的存活率。例如,由于年龄、既往健康史和健康水平,预后最好的患者通常是风险最低的患者。越多的患者表现出这些阳性先兆,他们的存活率就越高。因为有不良健康史的患者并不总能存活,他们的死亡率并不包括在存活率的计算中。也就是说,有积极结果的健康个体不成比例地代表了患者。还应该考虑的是在被诊断后不久死亡的人或在被正式诊断前死亡的人。由于没有包括在生存率计算中,生存结果被夸大了。4
在新冠肺炎疫情期间,一个大问题是存活率。许多流行病学家和医生警告说,公开的计算并不能提供全面的情况。未经新冠肺炎病毒检测而死亡的患者不能被视为病毒死亡人数的一部分,这可能会扭曲存活率。在全球许多国家,国家和他们的医疗保健系统在跟上测试方面存在问题,导致在查看疾病产生的数据时存在潜在的存活率偏差。5
它如何影响产品
营销活动的很大一部分涉及客户评价——消费者高度重视的数据。我们经常想知道一种产品是否会起作用,所以我们可能会求助于“临床试验”和广告活动中展示的独立资助的研究。然而,数字背后可能有更多:一个华而不实的“95%的人看到了改善!”并不总是讲述全部的故事。当我们不知道一项研究的全部参数时,很容易得到一个有偏见的观点。仔细检查研究的严谨性总是一个好主意。例如,样本大小是多少?人们退出研究了吗?他们使用该产品多长时间?所有这些问题对于确定其有效性都很重要。当我们考虑到这些因素时,我们正在积极地反对生存偏差。
行为改变101
从正确的地方开始你的行为改变之旅
什么是行为改变?⮕
学习贸易的工具⮕
持久变革的框架⮕
行动中的行为改变⮕
改变自己的事业⮕
查看真实世界的例子⮕
高级概念和趋势⮕
生存偏差与人工智能
整合丰富的数据集和采用严格的评估方法可能会减轻生存偏差对人工智能软件的影响。然而,人工智能是一个不断发展的领域,广泛使用可能会导致多家公司推介下一个重大进步。虽然技术进步令人兴奋,但过快推出软件可能会导致疏忽。
具体来说,重要的是不要高估人工智能的成功率,尤其是最近的技术。我们并不总是考虑允许我们在以后实现精炼系统的多重失败。低估人工智能的局限性会导致我们成为生存偏差的受害者。这导致人工智能的使用方式误导了我们的决策或研究。
为什么会这样
生存偏差是一种普遍的认知偏差,可归因于对因果关系的根本误解,特别是关于相关性与因果关系的概念。6虽然相关性和因果性可能同时存在,但相关性并不意味着因果性。7
仅仅因为个人从一个数据集中观察到一个模式,比如上面提到的成功企业家和辍学的例子,并不意味着所有成功的企业家都辍学,或者所有辍学的人都会成功。因果关系指的是行为A导致了行为B的结果,而相关性仅仅是一种关系。许多企业家从大学辍学的巧合是一种关联,因为辍学事件并不一定导致他们的成功。然而,生存偏差使个人相信这种相关性就是因果关系。7
为什么它很重要
意识到生存偏差并了解它如何影响你的判断和决策,对于确保个人练习批判性思维并为自己做出最佳决策至关重要。生存偏差可以影响几个领域的个体;因此,意识可以确保更好的产品决策、金融投资或科学结论。形成偏见是不可避免的人类特征,但是花时间挑战它们是必要的,以确保我们尽可能做出最好的决定。
如何避免
一旦意识到生存偏差,人们可以用几种方法来避免它。
问问你自己你没有看到什么
做决定的时候,从考虑缺少什么开始。什么数据没有从您正在使用的事件或数据集“幸存”下来?通过提问,花时间研究这些缺失的数据点,你可以在做出决策之前有更好的理解。充分了解信息,花时间停下来,思考和研究将有助于确保在你的决策中考虑生存偏差。6
检查你的数据来源
另一个防止生存偏差的方法,特别是在你的工作和研究中,是对使用的数据源进行选择。通过确保数据源经过精心制作以提高准确性,并且不遗漏会改变分析结果或决策的关键观察,个人可以降低生存偏差的风险。1
这一切是如何开始的
生存偏差一词是由亚伯拉罕·瓦尔德首先提出的,他是一位以研究二战飞机而闻名的著名统计学家。当沃尔德的研究小组试图确定如何更好地保护军用飞机时,该小组最初的方法是评估飞机的哪些部分受到了最大的损坏。一旦确定了条件最差的区域,他们就会在这些位置加强对飞机的保护。然而,亚伯拉罕·瓦尔德指出,受损最严重的飞机是那些尚未从战场返回的飞机。这些相同的飞机也将提供关于飞机的哪些部分需要加固的最相关的信息。8
如果这个研究小组不能确定这一关键事实,他们所建议的飞机增强措施将会完全忽略一部分飞机,这些飞机可能具有关于该项目的最有价值的数据点。这项研究结果提供了一个例子,说明亚伯拉罕·瓦尔德和他在哥伦比亚的研究小组是如何克服生存偏差,拯救了数百人的生命。8
示例1–金融系统
生存偏差也会影响金融系统。生存偏差的一个典型例子可以在共同基金的表现中看到。具体来说,生存偏差描述了公司或共同基金被排除在业绩分析研究之外的趋势。这些评估金融市场的研究结果随后向更积极的方向倾斜,因为只有那些成功并“幸存”下来的公司才被纳入研究。9
生存偏差可以在共同基金的案例中得到更具体的检验。共同基金是一种金融工具,它汇集从投资者那里收集的资金,由专业的资金经理管理,然后投资于股票、债券和其他资产。10当看共同基金的投资时,它只包括那些目前成功的投资。之前开设并亏损的基金要么被关闭,要么与其他基金合并,这掩盖了过去的糟糕表现。
当分析师仅使用期末幸存数据计算投资组合(如共同基金)的业绩结果,并排除那些在研究结束时不再存在的基金或公司时,就会出现幸存偏差。例如,在一个存在1,000只基金的金融世界中,想象一下这些基金中的10%由于表现不佳而在年底停止存在。如果分析师正在对这些基金进行绩效评估,但只是在年底才开始研究,那么分析师就会陷入生存偏差,在最终结果中忽略失败的基金。如果不包括失败的基金,业绩数据将显示理论基金领域更有利的最终结果。9
1996年,研究人员Elton、Gruber和Blake分析了基金规模和生存偏差之间的关系。他们发现生存偏差在小型基金领域比在更重要的共同基金领域更明显。与规模更大、历史更悠久的基金相比,规模较小的基金更有可能倒闭,这就是为什么他们认为小型基金行业也是如此。12研究人员估计,美国共同基金行业的生存偏差每年为0.9%。此外,他们对生存偏差的定义和测量如下:
“偏差定义为存活基金的平均α减去所有基金的平均α”(其中α是标准普尔500的风险调整回报率。这是衡量共同基金表现的标准。12
示例2–医学研究
生存偏差的另一个例子可以在医学领域和医学研究中看到。2010年,哈佛医学院和贝斯伊斯雷尔女执事医疗中心(BIDMC)进行了一项研究,希望提高创伤后患者的存活率。治疗创伤时的一个主要问题是不规则出血。如果病人的血液凝结不良,出血致死的风险很高。13
哈佛大学的研究调查了给外伤患者补充蛋白质是否会促进血液凝固并提高存活率,这些蛋白质在我们体内是天然存在的。这项研究的对象是在最初受伤后12小时内接受过4-8次输血的患者。该试验希望招募1502名患者,但只招募了573名,因此后来被放弃。13
这项研究的失败是由于存活偏差,因为该试验只包括从最初的损伤中存活下来的患者,以及在转移到ICU进行4-8次输血之前在急诊室接受治疗的患者。死于初始损伤的患者没有被纳入研究,这使得寻找合适的患者进行试验变得很困难。13
摘要
事实真相
生存偏差是一种样本选择偏差,当个体将一个可见的成功亚组误认为整个组时就会发生。换句话说,当一个人只考虑幸存的观察结果,而不考虑那些在事件中没有“幸存”的数据点时,就会出现幸存偏差。
为什么生存偏差会发生
生存偏差出现在许多学科、专业和研究领域。生存偏差可归因于对因果关系的根本误解以及对相关性和因果关系的扭曲认知。
示例1 -金融系统
生存偏差发生在我们的金融系统中,当个人计算投资组合的业绩结果时,如共同基金,只使用期末的生存数据,排除那些不再存在的基金或公司。通常,由于表现不佳,共同基金不再存在,因此从研究中忽略它们通常会使数据过于乐观。
示例2 -医学研究
生存偏差也可以在它对医学研究的影响中观察到。哈佛医学院和Beth Israel Deaconess医疗中心(BIDMC)试图对创伤患者进行一项研究,以改善他们在不同类型医疗程序中的生存结果。由于该研究的具体参数和偏斜的存活率,该试验只能从最初的1502名参与者中统计出573名患者。这项研究的失败是由于存活偏差,因为该试验只包括那些在最初受伤后存活下来的患者,以及那些在接受4-8次输血前在能源部接受治疗的患者。
如何避免
一旦个体了解了生存偏差,他们就可以通过考虑数据集中可能缺失的数据点以及使用不会遗漏关键观察值的准确数据源来避免偏差。
相关TDL文章
偏见如何影响创业决策
本文探讨了初创企业在涉足新的陌生领域时所面临的挑战。当到了考虑战略转变的时候,认知偏差会悄悄出现,以促进快速有效的决策。然而,快速并不总是等同于做出更好的选择,有时不考虑替代方案和“跟着感觉走”会导致严重的失误。
伟人理论
伟人理论认为领导者是天生的,不是后天培养的。意思是有一些天生的和内在的品质使某些人如此有影响力。这一理论还断言,由于其固有的性质,那些领导者理应处于那个位置。本文探讨了索赔和争议,以及这一理论如何连接到生存偏差。
来源
- 生存偏差-概述,影响,以及如何防止。(2020年5月15日)。检索自https://corporate finance institute . com/resources/knowledge/other/survivor tion-bias/
- 新泽西州帕特尔(2015年9月2日)。90%的初创公司都失败了:以下是你需要了解的关于那10%的情况。检索于2020年7月27日,来自https://www . Forbes . com/sites/Neil Patel/2015/01/16/90-of-startups-will-fail-heres-what-you-Neil-to-know-the-the-10/
- 罗伯特·J·齐默(2013年3月1日)。《大学辍学成功的神话:为什么它会让数百万美国年轻人变得更穷》。大西洋。
- 多诺霍,W. (2019年9月24日)。帮助你做出更好决定的7堂生存偏见课。2020年7月27日检索,来自https://blog . idonethis . com/7-lessons-survivority-bias-will-help-make-better-decisions/
- 米(meter的缩写))韩,医学博士,p .,&辛哈尔,S. (2020年5月27日)。新冠肺炎测试仍面临重大挑战。2020年7月27日检索,来自https://www . McKinsey . com/industries/health care-systems-and-services/our-insights/major-challenges-remain-in-新冠肺炎测试
- 生存偏差:被遗忘的失败故事。(2019年12月02日)。从https://fs.blog/2019/12/survivorship-bias取回
- 美国马德哈万(2020年6月3日)。相关性与因果性:理解你的产品的不同之处。从https://amplitude.com/blog/2017/01/19/causation-correlation取回
- I .鲍威尔、n .英格拉姆和g .布劳顿(2016年3月28日)。生存偏差:二战飞机的教训。从https://clearthinking.co/survivorship-bias/取回
- 先锋队。(2015年3月)。什么是“生存偏差”,为什么它很重要?[新闻稿]。检索自
- 海耶斯,A. (2020年06月03日)。共同基金的定义。从https://www.investopedia.com/terms/m/mutualfund.asp取回
- https://www . vanguard . co . uk/documents/adv/literature/survivor ity-bias . pdf
- 埃尔顿;格鲁伯;布莱克(1996)。“生存偏差和共同基金绩效”。金融研究评论。9 (4): 1097–1120.doi:10.1093/rfs/9.4.1097。在这篇论文中,研究人员通过跟踪1976年底所有现存基金的回报来消除生存偏差。他们表明,其他研究人员没有将基金业绩的偏差纳入回归分析,从而得出了虚假的结论。
- 托马斯J. (2019年4月23日)。弹孔与偏见:亚伯拉罕·瓦尔德-麦克德莱米的故事。检索自https://mcdreeamiemusings . com/blog/2019/4/1/survivortion-bias-how-lessons-from-world-war-two-affect-clinical-research-today
关于作者
丹·皮拉特
丹是决策实验室的联合创始人和常务董事。他是畅销书《意图》的作者,这本书是他和威利一起写的,内容是关于行为科学在组织中的应用。Dan拥有麦吉尔大学决策和信息系统BComm学位,拥有组织决策的背景。他曾在道明证券(TD Securities)和蒙特利尔银行资本市场(BMO Capital Markets)从事企业级行为架构方面的工作,为管理层提供每周处理数十亿美元的系统实施方面的建议。出于对最新技术的渴望,丹在麦吉尔大学开设了商业智能课程并授课,并将行为科学应用于增强和虚拟现实等主题。
Sekoul Krastev博士
Sekoul是决策实验室的联合创始人和常务董事。他是畅销书《意图》的作者,这本书是他和威利一起写的,内容是关于行为科学在组织中的应用。作为一名拥有麦吉尔大学决策神经科学博士学位的决策科学家,Sekoul的工作已经在同行评审期刊上发表,并在世界各地的会议上发表。Sekoul之前曾在波士顿咨询集团为管理层提供创新和参与战略建议,并在谷歌提供在线媒体战略建议。他对行为科学在新技术中的应用有浓厚的兴趣,并在《赫芬顿邮报》和《战略与商业》等网站发表了关于这些主题的文章。