最大似然估計 極大似然估計

2022-07-25 03:33:07 字數 905 閱讀 3344

目錄最大似然估計

個人部落格:

對於最大似然估計我們使用最簡單的拋硬幣問題來進行講解當我們拋一枚硬幣的時候,就可以去猜測拋硬幣的各種情況的可能性,這個可能性就稱為概率一枚質地均勻的硬幣,在不考慮其他情況下是符合二項分布的,即正面和翻面的概率都是0.5,那麼我們拋10次硬幣5次正面在上面的概率為:

\]但是現實生活中,我們並不知道硬幣是否均勻,那麼我們就需要通過多次拋硬幣來推測硬幣是否均勻或者說推測硬幣每一面朝上的概率,這就是似然

那麼什麼是最大似然估計(又稱極大似然估計)呢?

所謂的最大似然估計其實就是假設硬幣正面朝上的概率,然後計算實驗結果的概率是多少,概率越大,那麼這個假設的概率越可能是真的。

假設我們投了10次硬幣,其中有6次正面朝上,那麼我們根據這個實驗結果對其進行假設

我們可以先假設正面朝上的概率為0.5,那麼達到實驗結果的概率為:

\]我們還可以假設正面朝上的概率為0.6,那麼達到實驗結果的概率為

\]那麼我們就可以說,正面朝上的概率為0.6要比0.5的更有可能。

當然,我們僅僅比較這兩種情況是不夠的,我們需要將所有的情況都進行對比,然後求出最大的可能性。

接下來我們使用作圖的方法來看一下最有可能的取值

根據上圖我們可以看出,可能性最大的應該是正面概率為0.6的時候。

以上通過實驗結果,然後對相應的概率進行假設,從而得到最有可能造成測試結果的概率的過程,就稱為最大似然估計

極大似然估計和最大似然估計定義

最近看樸素貝葉斯法,發現有關於極大似然估計部分,網上找了好久,感覺也都說不清。然後還有個最大似然估計,最要命的是我發現還有人專門對兩者區別做了論述。然後我就看了下英文定義 最大似然估計 maximum likelihood estimation,mle 極大似然估計方法 maximum likeli...

極大似然估計

在機器學習的領域內,極大似然估計是最常見的引數估計的方法之一,在這裡整理一下它的基本原理。極大似然估計從根本上遵循 眼見為實,這樣的哲學思想。也就是說,它嚴格地僅僅利用了已知的實驗結果,來估計概率模型中的引數。極大似然估計的計算過程非常簡單 1.寫出似然函式 2.求出使得似然函式取最大值的引數的值,...

極大似然估計

一 理論基礎 1 引例 某位同學與一位獵人一起外出打獵,乙隻野兔從前方竄過。只聽一聲槍響,野兔應聲到下,如果要你推測,這一發命中的子彈是誰打的?你就會想,只發一槍便打中,由於獵人命中的概率一般大於這位同學命中的概率,看來這一槍是獵人射中的。這個例子所作的推斷就體現了極大似然法的基本思想。2 簡介 極...