伯努利模型

出自格致開物

伯努利模型

伯努利模型是一種二元隨機變量的概率模型,通常用於描述只有兩種可能結果的隨機試驗。

定義

伯努利模型描述了一個隨機試驗,這個試驗只有兩種可能的結果,我們通常稱其中一種結果為"成功",另一種結果為"失敗"。如果我們用隨機變量來表示這個試驗的結果,那麼可以取兩個值:1表示"成功",0表示"失敗"。

概率分佈

伯努利模型的概率分佈是:

  • "成功"的概率為,即
  • "失敗"的概率為,即

這可以用以下的公式表示: 其中,可以是0或1。

參數

伯努利模型的參數是一個事件發生的概率。這個參數必須在0和1之間。

參數估計

伯努利模型的參數可以通過最大似然估計來估計。如果我們進行了次試驗,其中有次"成功",那麼最大似然估計的結果是:

應用

伯努利模型在許多領域都有應用。例如:

  • 硬幣投擲:它可以用來描述硬幣投擲的結果,其中"成功"可以表示硬幣正面朝上,"失敗"可以表示硬幣反面朝上。
  • 二元分類問題:在機器學習中,伯努利模型可以用來描述二元分類問題,其中"成功"可以表示一個樣本屬於某個類別,"失敗"可以表示一個樣本不屬於那個類別。
  • 點擊率預測:在在線廣告中,伯努利模型可以用來預測用戶點擊廣告的概率,其中"成功"表示用戶點擊了廣告,"失敗"表示用戶沒有點擊廣告。
  • 醫學測試:在醫學中,伯努利模型可以用來描述醫學測試的結果,其中"成功"表示測試結果為陽性,"失敗"表示測試結果為陰性。

計算案例

假設我們有一個硬幣,我們想知道這個硬幣是否公平。我們可以通過拋擲這個硬幣來估計它正面朝上的概率。如果我們拋擲了100次,其中有60次正面朝上,那麼我們可以使用伯努利模型的最大似然估計來估計正面朝上的概率:

推廣

伯努利模型可以推廣到二項分佈,描述了在次獨立的伯努利試驗中"成功"的次數。伯努利模型也可以推廣到伯努利過程,描述了在連續時間中的"成功"事件。

優點和缺點

伯努利模型的優點包括簡單、易於理解和計算。但是,它的缺點是模型假設可能過於簡單,不能適應更複雜的情況。例如,伯努利模型假設每次試驗的結果都是獨立的,但在現實中,很多情況下,試驗的結果可能會相互依賴。