极大似然估计的思想及计算[例题]
cnblogs 2024-09-10 08:13:00 阅读 86
0 前言
- <li>本文主要介绍极大似然估计的意义,并举出例题帮助读者理解。
1 思想
极大似然估计(Maximum Likelihood Estimation, MLE)是一种在统计学中估计模型参数的方法。它的基本思想是:找到一组参数值,使得在这组参数下,观测到的数据出现的概率(即似然函数)最大。
假如有一个黑盒子,里面放有若干红球和白球,现从盒子中随机放回抽取10次,最后统计抽取结果,有红球被抽到7次,白球被抽到3次,问抽中红球和白球的概率分别为多少?
你可能认为抽中红球的概率为:70%,抽中白球的概率为30%?你能否从数学角度解释?
由此引出极大似然估计。
2 公式
3 极大似然估计的基本步骤
- <li>
求极大值:通过最大化似然函数(或其对数形式,因为对数函数是单调增函数,不会改变极值点的位置,但可能使计算更方便)来求解参数。
定义似然函数:根据观测数据和模型,定义似然函数,即观测数据在给定参数下的联合概率密度函数(或联合概率质量函数)。
4 例题
笔者仍考虑抽球问题,详细请见1.节。
由于黑盒中只有红球和白球,故有:
类别 | 概率(θ≠0且θ≠1) |
---|---|
红球 | θ |
白球 | 1-θ |
抽取10次,每次抽取是相互独立的,红球出现7次,白球出现3次。
所以有抽到红球概率70%,抽到白球概率30%。
上一篇: MimicMotion - 一张图片实现视频跳舞,腾讯开源照片跳舞模型 本地一键整合包下载
下一篇: 【LLM训练系列】从零开始训练大模型之Phi2-mini-Chinese项目解读
本文标签
声明
本文内容仅代表作者观点,或转载于其他网站,本站不以此文作为商业用途
如有涉及侵权,请联系本站进行删除
转载本站原创文章,请注明来源及作者。