[线性回归] 正规方程的不可逆性

有时候XTX是不可逆的(奇异矩阵)。
造成不可逆的原因通常是以下两个:

  • 有冗余特征: 有两个特征之间存在着一定联系,比如一个单位x1是米,另一个x2单位是千米,但表示的是同一个特征,这时候这两个特征之间存在着关系x2=x1。 根据线性代数的知识, 线形相关的矩阵不可逆的。
  • 特征数n>训练集数m
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容