LDA-线性判别分析(一)预备知识

LDA-线性判别分析(一)预备知识本来是要调研 LatentDirich 的那个 LDA 的 没想到查到很多关于 LinearDiscri 这个 LDA 的资料 初步看了看 觉得数学味挺浓 一时引起了很大的兴趣 再看看 就有整理一份资料的冲动了 网上查到的相关文章大都写得不是很详细 而且在概念和记号等方面也比较混乱 因此 在整理本文时 我有意识地牵了一根主线 想让读者

 本来是要调研 Latent Dirichlet Allocation 的那个 LDA 的, 没想到查到很多关于 Linear Discriminant Analysis 这个 LDA 的资料。初步看了看,觉得数学味挺浓,一时引起了很大的兴趣;再看看,就有整理一份资料的冲动了。网上查到的相关文章大都写得不是很详细,而且在概念和记号等方面也比较混乱,因此,在整理本文时,我有意识地牵了一根主线,想让读者读起来有循序渐进的感觉,记号上也力求规范和统一。期间参考了若干文献,以及一些优秀的博客,如 JerryLead、LeftNotEasy、webdancer、xiaodongrush 等的博文,在这里对他们的辛勤写作和无私分享表示感谢。文中的数学推导过程写得比较细,方便有需求的读者参考。此外,文中还通过加注的形式放入了一些自己的理解。 当然由于水平有限,错误遗漏之处在所难免, 希望读者朋友可以指出,也欢迎交流

目录


第 1 节  预备知识

     1.1 分类问题的描述

     1.2 拉格朗日乘子法


第 2 节  Two-classes 情形的数学推导

     2.1 基本思想

     2.2 目标函数

     2.3 极值求解

     2.4 阀值选取


第 3 节  推广到 Multi-classes 情形

     3.1 降维问题的描述

     3.2 目标函数与极值求解

     3.3 降维幅度


第 4 节  其他几个相关问题


LDA-线性判别分析(一)预备知识LDA-线性判别分析(一)预备知识


若需要本文完整的 PDF 文档,请点击《线性判别分析(LDA)浅析》进行下载!


相关链接

1.  JerryLead 的博文 《线性判别分析(Linear Discriminant Analysis)(一)》

2.  JerryLead 的博文 《线性判别分析(Linear Discriminant Analysis)(二)》

3.  LeftNotEasy 的博文 《机器学习中的数学(4)-线性判别分析(LDA),主成分分析(PCA)》

4.  webdancer 的博文 《LDA-linear discriminant analysis》

5.  xiaodongrush 的博文 《线性判别式分析-LDA-Linear Discriminant Analysis》

6.  peghoty 的博文《关于协方差矩阵的理解》


7.  peghoty 的博文《UFLDL教程学习笔记(四)主成分分析》


作者: peghoty 

出处: http://blog.csdn.net/itplus/article/details/

欢迎转载/分享, 但请务必声明文章出处.


版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/225586.html原文链接:https://javaforall.net

(0)
上一篇 2026年3月17日 上午8:59
下一篇 2026年3月17日 上午8:59


相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号