统计学9——分类数据统计

 知识结构

 内容精读

1.分类数据与$\chi^2$统计量

分类数据在第一章已经进行了详细介绍,就是对数据进行分类的结果,特征是,调查结果虽然用数值表示,但不同数值描述了调查对象的不同特征。由此分类数据的结果是频数,而$\chi^2$检验是对频数进行分析的统计分析方法

$\chi^2$统计量作为三大统计量之一,可以用于测定两个分类变量间的相关程度。

$$\chi^2=\sigma\frac{(f_{0}-f_{e})^2}{f_{2}}$$

其中$f_{0}$表示观察值频数,$f_{2}$表示期望值频数

 $\chi^2$统计量描述了观察值与期望值的接近程度,两者越接近,$\chi^2$就越小。

2.拟合优度检验

 拟合优度检验是用$\chi^2$统计量进行统计的显著性检验的一个重要内容。依据总体分布状况,计算出分类变量中各类别的期望频数,与观察频数进行对比,判断期望频数与观察频数是否有显著差异。

拟合优度检验的一般步骤如下:

  • 计算$f_{0}-f_{e}$
  • 计算$(f_{0}-f_{e})^2$
  • 计算$(f_{0}-f_{e})^2/f_{e}$
  • 计算$\chi^2$
  • 与$\chi^2_{\alpha}(R-1)$进行比较,若$\chi^2>\chi^2_{\alpha}(R-1)$,则认为观察频数与期望频数有显著差异。说明选取的分类特征对研究问题是有影响的。

3.独立性检验

拟合优度是对一个变量的检验,有时候我们也会遇到变量数不唯一的问题,比如研究两个变量间是否存在联系。这种对两个变量的研究又称为独立性检验,通常借助列联表进行性展示。

所谓列联表就是将两个或以上的变量进行交叉分类的频数分布表。

地区 一级 二级 三级 合计
52 64 24 140
60 59 52 171
50 65 74 189
合计 162 188 150 500

上面就是一个3×3的二维列联表,三个地区与三个等级间相互交叉。 

 针对上面的列联表,独立性检验就是检查地区与等级之间是否有关联。

计算方法与拟合优度相同,都需要构建$\chi^2$统计量。只是对于列联表中每个单位的期望频数采用$f_{e}=\frac{RT×CT}{n}$,RT、CT分别为单元所在行、列的合计值。$\chi^2$统计量的自由度df=(R-1)(C-1),若$\chi^2>\chi^2_{\alpha}{(R-1)(C-1)}$,则拒绝原假设,认为两变量间不是相互独立的。

4.相关性检验 

前面的独立性检验只是判断两个变量是否存在联系,那么如果存在联系,联系的程度又是怎样的呢?这时候就需要进行相关性检验。

$\varphi $相关系数

$$\varphi=\sqrt{\chi^2/n}$$

是列联表中最常用的一种相关系数。$\varphi$的值应该在0-1之间,当两个变量相互独立时,$\varphi=0$,$\varphi=1 或 \varphi=-1$时是两个变量完全相关的一种情况。$\varphi$的绝对值越大,就说明变量的相关程度越高。

ps:

当列联表的行或列大于2时,$\varphi$会随着行列的变大而变大,且没有上限,这时使用$\varphi$测定相关程度就不够清晰了。

c相关系数

$$c=\sqrt{\frac{\chi^2}{\chi^2+n}}$$

c系数主要用于列联表大于2×2的情况。同样当两个变量相互独立式c=0,并且它不会大于1。c系数的最大值依赖于列联表的行数和列数,且随着R和C的增大而增大,因此根据不同的行和列计算的列联系数不便于比较。但因其计算简便,且对总体分布没有要求,在实际的使用较为广泛。

V相关系数

$$V=\sqrt{\frac {\chi^2} {n×min[(R-1),(C-1)]} }$$

跟前两个系数相同的是,当两变量相互独立时,V也等于0,此外当两变量完全相关V=1,对于行列中一个维度为2时,V系数的值就等于$\varphi$系数

以上三种相关系数均是实际中常用的相关性检验的方法,但需要注意的时,使用时要注意列联表的行列数和是否是一个相关系数,只有相同行列个数的列联表,并且采用同一种系数,这样的比较才是有意义的。

5.$\chi^2$分布的期望值准则

在使用$\chi^2$分布进行独立性检验是,样本量必须足够大,否则可能会出现错误,有这样两条准则:

  • 如果只有两个单元,每个单元的期望频数必须大于等于5.
  • 如果有两个以上单元,20%的单元的期望频数小于5,则不能使用$\chi^2$检验。

名词解释

拟合优度检验 

是用x2统计量进行统计显著性检验的重要内容之一。它是依据总体分布状况,计算出分类变量中各类别的期望频数,与分布的观察频数进行对比,判断期望频数与观察频数是否有显著性差异,从而达到对分类变量进行分析的目的。

 列联独立性检验

独立性检验是对两个分类变量的分析,分析列联表中行变量和列变量是否相互独立。

相关推荐

  1. 数据统计探针:SKlearn中的统计分析方法

    2024-07-16 18:08:02       22 阅读
  2. 数据分析-Pandas如何统计数据概况

    2024-07-16 18:08:02       55 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-07-16 18:08:02       66 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-07-16 18:08:02       70 阅读
  3. 在Django里面运行非项目文件

    2024-07-16 18:08:02       57 阅读
  4. Python语言-面向对象

    2024-07-16 18:08:02       68 阅读

热门阅读

  1. CFU-Net

    CFU-Net

    2024-07-16 18:08:02      22 阅读
  2. Linux环境下安装Nodejs

    2024-07-16 18:08:02       21 阅读
  3. Electron 通知

    2024-07-16 18:08:02       22 阅读
  4. Linux的初级简单命令

    2024-07-16 18:08:02       21 阅读
  5. 根据PID查看进程执行路径

    2024-07-16 18:08:02       18 阅读
  6. Airtest的控制手机滑动位置偏差修正方法总结

    2024-07-16 18:08:02       22 阅读
  7. Cuda环境及Pytorch环境安装

    2024-07-16 18:08:02       21 阅读
  8. Window -- redis 服务注册、Mysql 服务注册

    2024-07-16 18:08:02       19 阅读
  9. python安全脚本开发简单思路

    2024-07-16 18:08:02       22 阅读