辛普森悖论是统计学中的一个著名悖论,指在分组比较中都占优势的一方,在合并比较中反而可能处于劣势的现象。具体而言,当数据被分成若干组时,每个组内都显示出某种趋势(如A组优于B组),但当所有组的数据合并后,趋势可能反转(B组优于A组)。辛普森悖论由英国统计学家爱德华·辛普森于1951年正式描述,其根本原因是存在混淆变量——各组的样本量或其他特征存在系统性差异,导致合并后的结果被扭曲。辛普森悖论的经典例子包括:加州大学伯克利分校研究生录取中的性别偏见调查、肾结石治疗方法比较、棒球击球率比较等。辛普森悖论提醒我们,在分析数据时不能仅看总体数据,还需要考虑分组结构和混淆变量,否则可能得出完全错误的结论。
辛普森悖论是统计学中的经典现象——在每个分组中都成立的趋势,在合并所有数据后可能反转。经典例子:加州大学伯克利分校被指控性别歧视,整体录取率男生高于女生,但分系看,每个系女生录取率都高于男生,因为女生更多申请竞争激烈的系。辛普森悖论的原因:混杂变量(分组大小不同)。辛普森悖论的教训:1) 不能只看整体数据;2) 需要分层分析;3) 注意混杂变量;4) 因果推断需要谨慎。应用:数据分析、统计、医学研究、社会科学、决策。常见误区:只看整体不看分组、忽视混杂变量、用辛普森悖论为偏见辩护。

评论区