极客时间
21天打卡行动 31/21
<<人工智能基础课33>> 概率图模型
回答老师问题:
作为两种不同的模型,贝叶斯网络和马尔可夫随机场各有优势。那么它们能不能结合起来,各自避短扬长,共同发挥作用呢?
这个我好像没遇到过,我记得用图数据库做过关系图谱。
今日所学:
1,经网络和深度学习都是由数据驱动的,大量有标记的训练样本是复杂模型取得良好性能的前提,这也解释了为什么直到近年来深度学习才得以蓬勃发展。
2,概率图模型(probabilistic graphical model)也叫结构化概率模型,是用图论表现随机变量之间的条件依赖关系的建模方法。典型的概率图模型包括贝叶斯网络和马尔可夫随机场,分别对应着有向图模型和无向图模型。
3,贝叶斯网络(Bayesian network)的拓扑结构是有向无环图
4,贝叶斯网络的作用是表示出随机变量之间的条件依赖关系,将多个随机变量的联合概率分布分解为条件概率因子乘积的形式
5,朴素贝叶斯分类的基础假设是不同的属性之间条件独立,因此类条件概率可以表示成属性条件概率的乘积。但在绝大多数情形下,这个假设是不成立的。将属性之间的依赖关系纳入后,得到的就是通用的贝叶斯网络。
6,贝叶斯网络的每个顶点只取决于有箭头指向它的其他顶点,而与没有箭头指向它的其他顶点条件独立;
7,能够根据各变量之间的条件依赖性,利用局部分布来求得所有随机变量的联合分布。
8,将贝叶斯网络的有向边替换为无向边,得到的就是马尔可夫随机场。马尔可夫随机场(Markov random field)属于无向图模型,它的每个顶点表示一个随机变量,每条边则表示随机变量之间的依赖关系;
9,马尔可夫随机场侧重于表示随机变量之间的相互作用;
10,概率模型三步框架:表示,推断,学习;
重点:
11,概率图模型是概率论与图论的结合,是用图论表现随机变量之间的条件依赖关系的建模方法;
12,贝叶斯网络是有向无环图,侧重于表示随机变量之间的依赖关系;
13,马尔可夫随机场是无向图,侧重于表示随机变量之间的相互作用;
14,概率图模型体现了“表示 - 推断 - 学习”的问题解决框架。
展开