什么叫共轭先验或者共轭分布?
2014-09-10 09:50
225 查看
来自/article/7678561.html
如果你读过贝叶斯学习方面的书或者论文,想必是知道共轭先验这个名词的。
现在假设你闭上眼睛,你能准确地说出共轭分布是指哪个分布和哪个分布式共轭的吗?
我之前就常常把这个关系弄错,现在记录如下,以加强印象。
贝叶斯学派和频率学派的区别之一是特别重视先验信息对于inference的影响,而引入先验信息的手段有“贝叶斯原则“(即把先验信息当着均匀分布)等四大类
其中有重要影响的一类是:共轭先验
现在假设我们有这样几类概率:P(\theta)(先验分布), p(\theta|X)(后验分布), p(X), p(X|\theta) (似然函数)
它们之间的关系可以通过贝叶斯公式进行连接: 后验分布 = 似然函数* 先验分布/ P(X)
之所以采用共轭先验的原因是可以使得先验分布和后验分布的形式相同,这样一方面合符人的直观(它们应该是相同形式的)另外一方面是可以形成一个先验链,即现在的后验
分布可以作为下一次计算的先验分布,如果形式相同,就可以形成一个链条。
为了使得先验分布和后验分布的形式相同,我们定义:
如果先验分布和似然函数可以使得先验分布和后验分布有相同的形式,那么就称先验分布与似然函数是共轭的
所以回答文章开头提出的问题:共轭是指的先验分布和似然函数
很容易造成误解是会以为后验分布和先验分布共轭或者后验分布和似然函数共轭。
如果你读过贝叶斯学习方面的书或者论文,想必是知道共轭先验这个名词的。
现在假设你闭上眼睛,你能准确地说出共轭分布是指哪个分布和哪个分布式共轭的吗?
我之前就常常把这个关系弄错,现在记录如下,以加强印象。
贝叶斯学派和频率学派的区别之一是特别重视先验信息对于inference的影响,而引入先验信息的手段有“贝叶斯原则“(即把先验信息当着均匀分布)等四大类
其中有重要影响的一类是:共轭先验
现在假设我们有这样几类概率:P(\theta)(先验分布), p(\theta|X)(后验分布), p(X), p(X|\theta) (似然函数)
它们之间的关系可以通过贝叶斯公式进行连接: 后验分布 = 似然函数* 先验分布/ P(X)
之所以采用共轭先验的原因是可以使得先验分布和后验分布的形式相同,这样一方面合符人的直观(它们应该是相同形式的)另外一方面是可以形成一个先验链,即现在的后验
分布可以作为下一次计算的先验分布,如果形式相同,就可以形成一个链条。
为了使得先验分布和后验分布的形式相同,我们定义:
如果先验分布和似然函数可以使得先验分布和后验分布有相同的形式,那么就称先验分布与似然函数是共轭的
所以回答文章开头提出的问题:共轭是指的先验分布和似然函数
很容易造成误解是会以为后验分布和先验分布共轭或者后验分布和似然函数共轭。
相关文章推荐
- 什么叫共轭先验或者共轭分布?
- 什么叫共轭先验或者共轭分布?
- 什么叫共轭先验或者共轭分布?
- (转载)什么叫共轭先验或者共轭分布?
- 共轭先验和共轭分布
- 如果有什么事情让你感到恐惧或者兴奋,那就去做吧
- MTTR是什么?或者说为什么别给婴儿喝白兰地
- [SoapUI] 在执行某个TestSuite之前先执行login或者其他什么前置步骤
- 先验概率 后验概率 似然 极大似然估计 极大后验估计 共轭 概念
- 选中本页面所有复选框,不管叫什么名字,有没有这个方法或者代码啊
- PL/SQL 或者SQL中 求余运算符(模运算符)是什么?
- 输出和输入中%*c或者%*s有什么作用
- epoll或者kqueue的原理是什么?
- 软件或者网站的版权声明中的两个时间是什么意思?该如何正确书写?
- 作为怀孕的亲历者,你觉得最值得分享的经验或者技巧是什么?
- 如何查看CDN的节点分布?用什么工具或者通过什么方式查看! - 知乎
- java的类中,直接写 {}或者static{},什么意思
- 面试问题你的优势是什么或者说体现你的价值的地方在哪里
- 大学刚毕业找什么类型的公司好?成熟的大公司或者创业型的公司
- MTTR是什么?或者说为什么别给婴儿喝白兰地