Pattern Classification

Richard O. Duda, Peter E. Hart, David G. Stork

出版时间

2000-11-01

ISBN

9780471056690

评分

★★★★★
书籍介绍
这不是一本可以一口气读完的书,而是一本需要数学功底打底、反复回看的经典。它系统梳理了模式识别与机器学习的理论脉络:从最大似然估计到贝叶斯估计,从主成分分析到多重判别分析,从高斯模型到熵与不确定性,把'如何对事物进行分类'这一核心问题讲得既严密又成体系。读者反馈两极分明:有人视其为'经典入门'、'重点看懂例子、做题',也有人直呼'难死我了''知识点很散'。它适合有一定数学基础、愿意啃公式并动手做题的人;对初学者而言,直接上手容易受挫。需要提醒的是,书中存在较多勘误,中文版尤甚,阅读时最好对照原文并留意错误。
AI导读
核心看点
  • 模式识别领域经典教材,涵盖统计与机器学习理论
  • 深入讲解最大似然与贝叶斯估计,对比两种参数估计方法
  • 详述降维技术如主成分分析,强调分类判别而非表达
读者共识
  • 内容经典权威但难度极高,数学要求严苛劝退初学者
  • 知识点分布较散且难度非线性递增,不适合顺序通读
  • 图表直观清晰,但部分理论过时,需结合现代方法看
精彩摘录
  • "最大似然估计(和其他类似方法)把待估计的参数看作是确定性的量,只是其取值未知。最佳估计就是使得产生已观测到的样本(即训练样本)的概率为最大的那个值。 与此不同的是,贝叶斯估计则把待估计的参数看成是符合某种先验分布的随机变量。对样本进行观测的过程,就是把先验概率密度转化为后验概率密度,这样就利用样本的信息修正了对参数的初始估计值。"
  • "参数估计问题是统计学中的经典问题,并且已经有了一些具体的解决方法。这里我们将主要讨论两种最常用和很有效的方法,也就是:最大似然估计和贝叶斯估计。"
  • "最大似然估计把待估计的参数看作是确定性的量,只是其取值未知。最佳估计就是使得产生已观测到的样本(即训练样本)的概率为最大的那个值。与此不同的是,贝叶斯估计则是把待估计的参数看成是符合某种先验概率分布的随机变量。对样本进行观测的过程,就是把先验概率密度转化为后验概率密度,这样就利用样本的信息修正了对参数的初始估计值。在贝叶斯估计中,一个典型的效果就是,每得到新的观测样本,都使得后验概率密度函数变得更加尖锐,使其在待估参数的真实值附近形成最大的尖峰。这个现象就称为“贝叶斯学习”过程。"
  • "That is to say, the production representation may be the “best” representation for classification."
  • "一种处理过多的维数是采用组合特征的方法来降低维数,对几个特征作线性组合是一种特别具有吸引力的方法,因为线性组合容易计算并且能够进行解析分析,从本质上来说线性方法是将高维的数据投影的低维空间中。经典的寻找有效的线性变换的方法有两种。其一是主成分分析方法(principal component analysis),这一方法的目的是寻找在最小均方意义下最能够代表原始数据的对应方法。另一种方法为多重判别分析,这一方法的目的是寻找在最小均方意义下最能够分开各类数据的统计方法。<"
  • "正态分布与熵之间有着密切的关系。... 熵是一个非负的量,用来描述从一种分布中随机选取的样本点值的不确定性。可以证明正态分布在所有具有给定的均值和方差的分布中具有最大熵。并且,由中心极限定理所述,大量小的、独立的随机分布的总和等效为一高斯分布。由于所有模式——从鱼到手写字符、到某些语音——都可以看成是由大量随机过程所组成的某个理想的或原型模式,对于实际的概率分布而言,高斯分布通常是一种好的模型。"
  • "特征空间中的一个线性变换将一个任意正态分布变换成另一个正态分布。"
  • "如果以模式分类作为目的,那么对我们讨论过的各种降维方法的批评中最严厉的就是它们过于关心数据的精确表示了。过多强调那些具有很大变化范围的特征组合。对分类问题来说,我们感兴趣的是判别能力而不是表达能力。虽然大家公认理想的表达肯定会使得分类非常简单,但是还不清楚不用明显分类准则的聚类是否能找到这种理想的表达。"
用户评论
经典入门
注意勘误注意勘误注意勘误。书中的很多表示方法比较啰嗦,不过依然不妨碍其成为一本逻辑清晰的书,真的逻辑很清晰。
我只能说我没有勇气读完,数学底子实在是太差了,而且这本书的错误实在是太多了,建议看的时候一定要对着勘误看,要不然很坑的!
有一定基础了再回头看这本书会收获更多吧。
Xiaofei He
经典的模式识别。硕士的时候有好好地刷过一遍,现在补标一下。
感觉比较适合用来串联之前学过的很多model, 真的不是入门书
入门Bible。
唯一一点是知识点很散。。。
2017夏 Oliver Wu是我最喜欢的理工科直男(老师)了!刷的是网课并没有看书(
下载
收藏