网易首页 > 网易号 > 正文 申请入驻

学会5个数据分析常见定律,数据敏感度提升N个度

0
分享至

有时候在和技术或者业务交流时,如果对方时不时蹦出这个效应,那定律,自己又恰巧没有听过,这时候只能呵呵假装明白。

其实这些概念也没有什么神秘的,今天整理了一下咱们分数领域常见的效应和定律,用通俗易懂的例子辅助解释,让大家快速理解掌握!

1.辛普森悖论

辛普森悖论指的是,在对比AB两个群体的数据,将数据拆分成多个维度时,A组在各个维度下的表现均好于B,整体A组的表现却并不一定好于B。

没看懂?来,举个例子解释下

最近英国各大高校offer都发了,结果某所高校的两个学院,法学院和文学院,在招生上被怀疑有性别歧视,我们来看一下招生情况,分析分析。

法学院招生情况

文学院招生情况

从表上录取比例数据来看,女生的录取比例都比男生高33.6%>15.1%,91.1%>80.1%

但把两个学院的数据汇总后

法学院、文学院数据汇总

会发现结果女生的录取比例反而比男生低,

这就是经典的辛普森悖论,即在某个条件下的两组数据,分别讨论时都会满足某种性质,可是一旦合并考虑,却可能导致相反的结论。

其实,“农村包围城市,武装夺取政权” 也是有类似的思想。

2、马太效应

马太效应出自圣经里的一则寓言:“凡是有的,还要加倍给他,让他多出来;没有的,就把他所有的夺过来,让他一点都没有”。通俗地解释就是 “强的越强,弱的越弱”。

马太效应在业务中非常常见。比如在推荐算法中,被判定为质量较好的用户所得到的资源就越多,这种情况也会形成反馈,得到的资源越多越会被判定为质量较好的用户,从而加剧这种效应(类似于短视频点赞越多曝光越多,曝光越多点赞越多)。

3.本福特定律

本福特定律,是说一堆从实际生活得出的数据中,以1为首位数字的数的出现几率约为总数的三成,这个定律至今没有经过一个严格的证明。

他就像是一个监控指标,当一组数据不符合本福特定律时,就有理由怀疑数据是否造假。所以此定律经常用在检测上市公司财报是否造假以及选举中是否有舞弊现象。

需要注意的是,它可用于检查各种数据是否有造假,但要注意使用条件:1.数据至少3000笔以上;2.不能有人为操控。

4、幸存者偏差

幸存者偏差,是优胜劣汰之后自然选择出的一个道理:未幸存者已无法发声。

人们只看到经过某种筛选而产生的结果,而没有意识到忽略了被筛选掉的人。

举个例子,大家肯定都听过这句话:“读书有什么用,我的小学同学他从小成绩一塌糊涂,初中都没念完就退学了,现在生意做得可大了,我本科毕业还不是996租着房吃着泡面。”

但,实际情况是一个班中会读书的那帮孩子日后也有生意做得不错的、也有租房吃泡面的、也有在家啃老的,可平均生活水准高于不读书的。但不读书的孩子中有一些可能欠一屁股债躲起来了、失业没有工作,这些人你看不到,你只能看到那些幸存者,生意做得可大。

5、帕累托定律

这个名字大家可能并不熟悉,但是一定听过二八定律,管理学家帕累托通过研究大量事实发现:社会上20%的人占有80%的社会财富。

比如活跃用户中仅有20%的付费用户,付费用户中20%的用户贡献了80%的收入等等。当然20%与80%只是一个统计数据,其实质讲的是 “在因和果、努力和收获之间,普遍存在着不平衡关系” , 即不平衡关系存在的确定性和可预测性。

二八定律告诉我们要把精力放在更本质的事情上,不经规划地做事情很有可能会浪费80%的精力去产出20%的东西。

在数分工作中,有些同学在做分析的时候,可能经常有这种感受,跑了n个sheet的数据,结果写报告的时候,只用了四五个数据。

所以在分析的习惯是先思考产生问题的原因,并对每个可能的原因赋予相应的权重,然后以最简单方便的方法来验证各个原因,快速排除错误方向,而不是在每个原因上都做详细的解释。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
他690分考入北大,大学沉迷游戏被北大劝退,复读712分考入清华,如今发展如何?

他690分考入北大,大学沉迷游戏被北大劝退,复读712分考入清华,如今发展如何?

大爱三湘
2026-06-28 20:37:38
巴西VS日本;荷兰VS摩洛哥;世界杯2.6+10+11

巴西VS日本;荷兰VS摩洛哥;世界杯2.6+10+11

去山野间追风
2026-06-29 10:02:26
殡葬师提醒:亲人在ICU病危,大夫让做决定时,先问清这2句话再选

殡葬师提醒:亲人在ICU病危,大夫让做决定时,先问清这2句话再选

说历史的老牢
2026-06-13 08:05:10
一旦开战,中国3000架飞机根本上不了场?俄专家揭露真相

一旦开战,中国3000架飞机根本上不了场?俄专家揭露真相

青山夜谈
2026-06-16 17:16:03
粟裕来西柏坡开会,毛主席一高兴,打破了一个常规,朱德都惊呆了

粟裕来西柏坡开会,毛主席一高兴,打破了一个常规,朱德都惊呆了

兴趣知识
2026-06-29 00:53:43
112名“中国留学生”被调查,亲历者发声

112名“中国留学生”被调查,亲历者发声

中国新闻周刊
2026-06-27 20:24:41
布洛芬立大功!研究发现:老人吃布洛芬,或能缓解4种症状

布洛芬立大功!研究发现:老人吃布洛芬,或能缓解4种症状

医学科普汇
2026-06-26 21:00:04
16岁少女被五人灌“快乐水”,强奸后跳楼身亡,5人里有2名警察?

16岁少女被五人灌“快乐水”,强奸后跳楼身亡,5人里有2名警察?

法纪实录簿
2026-06-10 10:49:17
印度极端高温绝非天灾,正在酝酿一场中国必须严防的巨大危机!

印度极端高温绝非天灾,正在酝酿一场中国必须严防的巨大危机!

毛豆新鲜
2026-06-08 10:40:39
真被乌克兰打疼了!俄方紧急向邻国求援,普京暂时还没对中国开口

真被乌克兰打疼了!俄方紧急向邻国求援,普京暂时还没对中国开口

浪子阿邴聊体育
2026-06-29 13:51:49
覆水难收!孙臣曦父亲“求原谅”,董路直播怒晒账本:永不合作

覆水难收!孙臣曦父亲“求原谅”,董路直播怒晒账本:永不合作

不似少年游
2026-06-28 09:50:12
周总理问溥仪想干什么,溥仪提出两个职业被拒绝,如今成热门职业

周总理问溥仪想干什么,溥仪提出两个职业被拒绝,如今成热门职业

芊芊子吟
2026-06-29 11:30:15
小牌大耍?陈赫张子萱阿那亚度假,误入他人镜头却反过来呵斥路人

小牌大耍?陈赫张子萱阿那亚度假,误入他人镜头却反过来呵斥路人

仙味少女心
2026-06-27 18:41:54
深圳警方通报:接东鹏饮料报案,罗某某(男,39岁,自媒体从业人员)已被刑拘

深圳警方通报:接东鹏饮料报案,罗某某(男,39岁,自媒体从业人员)已被刑拘

南方都市报
2026-06-29 14:06:38
送队友33块劳力士的哈兰德,比C罗更懂人情

送队友33块劳力士的哈兰德,比C罗更懂人情

云隐南山
2026-06-29 13:16:47
秦海璐变卖房产,清空全部资产,凑出近亿身家,绝境兜底救下刘涛

秦海璐变卖房产,清空全部资产,凑出近亿身家,绝境兜底救下刘涛

秋别离
2026-06-13 15:50:00
杨紫飞奔拥抱胡歌,网友泪目:《生命树》“最强售后”

杨紫飞奔拥抱胡歌,网友泪目:《生命树》“最强售后”

韩小娱
2026-06-29 16:12:05
95%微短剧用AI脸?观众吐槽“千篇一律”,专家指触犯“恐怖谷效应”

95%微短剧用AI脸?观众吐槽“千篇一律”,专家指触犯“恐怖谷效应”

TechWeb
2026-06-29 09:26:04
警钟:月嫂、月子中心托管,正在悄悄毁掉孩子,让安全感缺失!

警钟:月嫂、月子中心托管,正在悄悄毁掉孩子,让安全感缺失!

小武侃风云
2026-06-28 07:47:51
韩红道歉!发文时已泣不成声,会退出公益事业,多位名人发声挽留

韩红道歉!发文时已泣不成声,会退出公益事业,多位名人发声挽留

青梅侃史啊
2026-06-29 14:25:49
2026-06-29 17:51:00
数据分析不是个事儿
数据分析不是个事儿
专注数据分析领域
985文章数 10477关注度
往期回顾 全部

科技要闻

杀疯了!深圳一天出两家200亿具身智能公司

头条要闻

日媒:中国关键金属进口量飙升 "手上有牌"

头条要闻

日媒:中国关键金属进口量飙升 "手上有牌"

体育要闻

他和伊朗队,再次赢得全世界的尊重

娱乐要闻

跟风电影《给阿公的牛肉丸》开机

财经要闻

近20家半导体企业开启新一轮涨价潮

汽车要闻

全新宝马iX3长轴版将于成都车展预售 四季度交付

态度原创

教育
手机
亲子
时尚
房产

教育要闻

526分考生贺永辉被疯抢!湖南农大提供王牌专业和院士导师

手机要闻

屏幕反人类,但AI绝了!酷派小方块上手:没法当主力机用

亲子要闻

两岁宝宝上托二班,听老师讲故事时非常认真,网友:这个专注力真的太强了

伊姐周日热推:电视剧《千香》;电视剧《非份之罪》......

房产要闻

你敢想?海口房地产投资,暴跌5成!

无障碍浏览 进入关怀版