机器学习——主成成分分析PCA

如上图所示,一共有4个属性,身高( m为单位),身高(cm),时速(每小时公里),时速(每小时里),身高的两个属性是相关的,时速的两个属性也是相关的,我们把四组具有相关性的变量转换成了两组不相关的变量,我们把转换后的这2组变量称为它的主成分。说白了,就是这两组变量能够代表这个人的身高特征和骑自行车的特征。

上述例子体现了降维。

维数少了,数据就少了。

在上述的例子中,我们可以用肉眼看出来存在相关性;在实际的数据中,用肉眼可能看不出这些数字的相关性,所以 要通过算法找出哪些特征和哪些特征是线性相关的,这就是主成分要做的事儿。

什么是投影方差最大呢?

这些点向直线作投影,会得到每个点在投影方向上对应的点。所有投影点到原点的距离的平方和最大。

换一种说法,找到一条直线,使得所有点到直线的距离的平方和最短。上图中左边更好

相关推荐

最近更新

  1. TCP协议是安全的吗?

    2024-01-16 11:18:06       16 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-01-16 11:18:06       16 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-01-16 11:18:06       15 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-01-16 11:18:06       18 阅读

热门阅读

  1. Unity3D PVP游戏位置同步算法优化详解

    2024-01-16 11:18:06       38 阅读
  2. C语言作用域和存储期简单介绍

    2024-01-16 11:18:06       35 阅读
  3. 在Dynamics 365中通过代码为用户添加角色

    2024-01-16 11:18:06       33 阅读
  4. PXC集群(MySQL8.0版本)

    2024-01-16 11:18:06       29 阅读
  5. oracle分区

    2024-01-16 11:18:06       23 阅读
  6. 前端面试题-webpack

    2024-01-16 11:18:06       37 阅读
  7. Spark-RDD的依赖

    2024-01-16 11:18:06       31 阅读
  8. 安装 Git

    2024-01-16 11:18:06       32 阅读