后验概率估计 | 学习笔记

简介: 快速学习后验概率估计

开发者学堂课程【人工智能必备基础:概率论与数理统计:后验概率估计】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/545/detail/7403


后验概率估计

内容介绍

一、回顾最大似然估计

二、最大后验概率有区别吗

三、最大后验估计

 

一、回顾最大似然估计

找到最合适的参数使其满足数据

image.png

最大似然估计

image.png

如果一件事,正例的出现了 8 次,负例出现了 2 次,如何求解呢?

求解的目标

image.png

该求导了

image.png

 

二.最大后验概率有区别吗

要求的东西变了吗?没有,都是做参数估计

问题变得复杂一点了,现在多了一个先验知识

优化的目标:

image.png

根据贝叶斯公式:

image.png

这两项分别是什么?有点眼熟

 

三、最大后验估计

p(X|μ)这是似然的部分,p(μ)这是先验知识

怎么进行求解呢?照样,但是多了个先验,这个得先写出来

image.png

假设参数有一个先验服从 Beta 分布

image.png

我们要试验的任务当做一个伯努利实验,每次都是一个二项分布

image.png

目标这就来了:

image.png

相关文章
|
2月前
|
算法 Python
R语言随机波动模型SV:马尔可夫蒙特卡罗法MCMC、正则化广义矩估计和准最大似然估计上证指数收益时间序列
R语言随机波动模型SV:马尔可夫蒙特卡罗法MCMC、正则化广义矩估计和准最大似然估计上证指数收益时间序列
|
2月前
|
数据可视化
R语言极值推断:广义帕累托分布GPD使用极大似然估计、轮廓似然估计、Delta法
R语言极值推断:广义帕累托分布GPD使用极大似然估计、轮廓似然估计、Delta法
|
2月前
贝叶斯分位数回归、lasso和自适应lasso贝叶斯分位数回归分析免疫球蛋白、前列腺癌数据
贝叶斯分位数回归、lasso和自适应lasso贝叶斯分位数回归分析免疫球蛋白、前列腺癌数据
贝叶斯分位数回归、lasso和自适应lasso贝叶斯分位数回归分析免疫球蛋白、前列腺癌数据
|
2月前
|
数据采集
R语言用线性模型进行臭氧预测: 加权泊松回归,普通最小二乘,加权负二项式模型,多重插补缺失值
R语言用线性模型进行臭氧预测: 加权泊松回归,普通最小二乘,加权负二项式模型,多重插补缺失值
|
2月前
R语言异方差回归模型建模:用误差方差解释异方差
R语言异方差回归模型建模:用误差方差解释异方差
|
8月前
【概率论基础】Probability | 数学性概率 | 统计性概率 | 几何概率 | 概率论三大公理
【概率论基础】Probability | 数学性概率 | 统计性概率 | 几何概率 | 概率论三大公理
79 0
|
10月前
第8章 概率统计——8.3 累积概率分布
第8章 概率统计——8.3 累积概率分布
第8章 概率统计——8.3 累积概率分布
|
机器学习/深度学习
先验分布、后验分布、似然估计、贝叶斯估计、最大似然估计
先验分布、后验分布、似然估计、贝叶斯估计、最大似然估计
147 0
先验分布、后验分布、似然估计、贝叶斯估计、最大似然估计
|
BI
统计学习--最大似然和贝叶斯估计的联系
概率是已知模型和参数,推数据;统计是已知数据,推模型和参数
93 0
统计学习--最大似然和贝叶斯估计的联系
基于偏差校正似然的贝叶斯参数估计
基于偏差校正似然的贝叶斯参数估计
134 0
基于偏差校正似然的贝叶斯参数估计