统计方法的选择(1)--正态性和方差齐性

“二八法则”运用到我们的统计学习中,就是用20%的时间精力去习得最重要最常用80%的技巧和能力。统计学的东西很多很繁杂,如果面面俱到的话,精力不够,时间不足,还不一定能用的到。所以这里写到的就是最常用的医学统计能用到的,争取是能够学的到,用的上的统计方法。

首先先用上一副从别处习得的统计方法选择的图


统计学方法的选择

这幅图可以说从问题入手,去选择相应的方法,相比于教科书,确实思维方式上就有所不同。更符合平时问题遇到的情况。

1. 数据分布检验

首先需要确定数据的情况,是否符合正态分布,是否符合方差齐性。什么是正态分布比较好理解,不赘述。何为方差齐性,我们依然是用例子来说明一下,方差是什么,方差是在概率论和统计方差衡量随机变量的统计值,统计中的方差(样本方差)是每个样本值与全体样本值的平均数之差的平方值的平均数,计算公式为

那么为什么要在比较之前考虑方差是否齐性呢。用R来做两组数据,进行比较。

> a <- c(-5,-4,-3,-2,-1,1,2,3,4,5)
> b <- c(-50,-40,-30,-20,-10,10,20,30,40,50)
> var(a)
[1] 12.22222
> var(b)
[1] 1222.222
> mean(a);mean(b)
[1] 0
[1] 0

两组数据a,b平均数都是0,但是能够说两组数据一致吗,二者的方差前者12,后者1222 是完全不同,所以必须要进行方差比较,比较二者是否一致。

所以第一步就是检验是否为正态分布和方差齐性,二者的检验同样都可以在R中完成。

1.1 正态分布检验

在R中可以使用如下函数进行正态分布检验。

> d <- rnorm(n = 10,mean = 0)
> shapiro.test(d)

    Shapiro-Wilk normality test

data:  d
W = 0.9598, p-value = 0.7836

通过R生成随机数组d,使用shapiro.test()函数检验,p值大于0.05,不拒绝原假设,即就是数组符合正态分布。

1.2 方差齐性检验

方差齐性检验可以通过R软件的car包中的bartlett.test函数输出Bartlett检验,使用leveneTest()函数输出Levene检验。

> data("InsectSprays")
> head(InsectSprays)
  count spray
1    10     A
2     7     A
3    20     A
4    14     A
5    14     A
6    12     A
> bartlett.test(InsectSprays$count, InsectSprays$spray)

    Bartlett test of homogeneity of variances

data:  InsectSprays$count and InsectSprays$spray
Bartlett's K-squared = 25.96, df = 5, p-value = 9.085e-05

使用"InsectSprays"数据集中的数据进行检验分析,可发现Bartlett检验的p值小于0.05,拒绝H_0,即就是两组数据的方差不齐。我们作图观察。

plot(count ~ spray, data = InsectSprays)

可以看出组别之间的方差确实差异比较大。

继续使用LeveneTest包进行检验。

> head(Moore)
  partner.status conformity fcategory fscore
1            low          8       low     37
2            low          4      high     57
3            low          8      high     65
4            low          7       low     20
5            low         10       low     36
6            low          6       low     18
> with(Moore, leveneTest(conformity, fcategory))
Levene's Test for Homogeneity of Variance (center = median)
      Df F value Pr(>F)
group  2   0.046 0.9551
      42               
> with(Moore, leveneTest(conformity, interaction(fcategory, partner.status)))
Levene's Test for Homogeneity of Variance (center = median)
      Df F value Pr(>F)
group  5  1.4694 0.2219
      39           

检验conformity, fcategory两组数据是否方差齐性,得到的p值大于0.05,不能拒绝原假设,即数据方差齐。conformity,fcategory, partner.status两组数据同样方差齐性。作图观察。

> plot(Moore$conformity ~ Moore$fcategory, data = InsectSprays)
> plot(Moore$conformity ~ interaction(Moore$fcategory, Moore$partner.status), data = InsectSprays)

好了,通过上面的一系列检验,对数据的分布情况有了了解,下一步就可以根据是否正态分布及是否符合方差齐性选择参数检验或者非参数检验。

参考文章及书目
R语言统计分析与应用-汪海波
白话统计-冯国双
一张图说明统计方法的选择
R语言中方差齐性检验丨数析学院
方差分析与R实现

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,816评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,729评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,300评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,780评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,890评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,084评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,151评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,912评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,355评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,666评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,809评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,504评论 4 334
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,150评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,882评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,121评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,628评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,724评论 2 351