视频1 视频21 视频41 视频61 视频文章1 视频文章21 视频文章41 视频文章61 推荐1 推荐3 推荐5 推荐7 推荐9 推荐11 推荐13 推荐15 推荐17 推荐19 推荐21 推荐23 推荐25 推荐27 推荐29 推荐31 推荐33 推荐35 推荐37 推荐39 推荐41 推荐43 推荐45 推荐47 推荐49 关键词1 关键词101 关键词201 关键词301 关键词401 关键词501 关键词601 关键词701 关键词801 关键词901 关键词1001 关键词1101 关键词1201 关键词1301 关键词1401 关键词1501 关键词1601 关键词1701 关键词1801 关键词1901 视频扩展1 视频扩展6 视频扩展11 视频扩展16 文章1 文章201 文章401 文章601 文章801 文章1001 资讯1 资讯501 资讯1001 资讯1501 标签1 标签501 标签1001 关键词1 关键词501 关键词1001 关键词1501 专题2001
真实的谎言——辛普森悖论面面观
2024-12-17 10:07:11 责编:小OO
文档

1. 马克·吐温曾经说过:“世界上有三种谎言:谎言、可恶的谎言和统计数据。”
2. 在当今社会,我们正处于信息技术(IT)向数据技术(DT)转变的过程中。马云曾在一次演讲中指出,DT涉及数据的存储、清洗、加工、分析和挖掘,其目的是通过计算机技术提升我们的认知能力,影响思考与决策,服务于大众,激发生产力。
3. 大数据和海量信息在这个时代扮演着重要角色,大数据被誉为21世纪的石油,是新的经济动力和未来最大的资源。
4. 和企业在推动经济发展时,正将大数据和互联网产业作为新的引擎。
5. 大数据行业的发展推动了数据驱动的决策方法受到广泛关注。
6. 数据智能,即数据采集、分析模型以及分析效率的提升,为深入分析和优化决策提供了帮助。
7. 然而,在大量信息中如何做出准确的判断,避免被误导,保持思考,这些能力至关重要。
8. 数据可以驱动人生,影响决策,但也有可能欺骗我们。即使是客观的数据,也可能产生与我们直觉相反的结论,这就是辛普森悖论。
9. 辛普森悖论是指同一组数据在整体和分组观察时,可能会得出截然相反的结果。
10. 例如,在高考升学率上,一中的总体升学率虽然高于二中,但如果分文理科来看,二中的升学率则更高。
11. 又如,在餐馆选择上,A餐馆在总体好评率上超过B餐馆,但细分男女顾客的评价后,B餐馆在各自群体中的好评率更高。
12. 辛普森悖论在统计学中被称为“逆论”,在日常生活中很常见。
13. 它揭示了数据分析时权重扭曲和遗漏变量的重要性。
14. 面对辛普森悖论,我们应该考虑潜在变量,通过科学合理的分组来查看具体数据,而不是直接摒弃整体分析的结论。
15. 如何避免辛普森悖论?在选择数据分析数据时,我们需要注意各组数据的权重,消除基数差异的影响,同时注意情景是否存在其他潜在变量。
16. 例如,通过“逆概加权”方法,对占总体少数比例的样本给予更高的权重,以消除分组资料基数差异的影响。
17. 辛普森悖论提醒我们要具备科学辩证思维,客观看待关联现象。
18. 数据分析不仅是技术,也是艺术,它要求我们深入理解数据生成的过程,识别因果关系,避免仅从表面现象得出错误或片面的结论。
19. 辛普森悖论的出现往往是因为我们忽略了数据背后的因果关系。
20. 当我们明确了因果关系,这些看似矛盾的现象就会消失。
21. 数据分析者应该具备足够的背景知识,识别问题的因果结构,从而做出明智的决策。
22. 学会思考因果关系,建立思维模型,对于理解数据至关重要。
23. 这不仅在工作中帮助我们明辨是非,也能在生活中减少被骗、吃亏上当的可能性。
24. 在学术界,对因果关系的研究正在达到高潮。
25. Judea Pearl等学者倡导采用因果推理模型,从因果而非数据关联的角度研究人工智能,推动强人工智能的发展。
26. 约书亚·本吉奥与乔舒亚·D·安格里斯特等专家在因果关系分析方面的贡献,为他们赢得了诺贝尔经济学奖。
27. 计算机与人工智能学界对因果关系的研究凸显了其重要性。
28. 总之,辛普森悖论提醒我们在面对数据时要保持警觉,避免被表面现象所迷惑。
29. 通过深入分析,理解数据背后隐藏的秘密,我们能够克服这些悖论,做出更明智的决策。
30. 在这个数据驱动的时代,掌握数据分析的真正本质,将使我们更好地理解世界,做出更正确的判断。

下载本文
显示全文
专题