跳到正文
格致开物MATHWIKI

条件似然

条件似然(conditional likelihood)是根据给定某项统计量后的条件分布,构造目标参数的似然。在适当的模型中,条件化能精确消去干扰参数;但条件分布必须从原来的联合分布推出,不能只把不想估计的参数删去。

设两个独立计数满足 X∼Poisson⁡(λθ)、Y∼Poisson⁡(λ),其中 λ>0 是共同基准强度,θ>0 是我们关心的强度比。观察到教学计数 X=6,Y=4;不知道基准强度时,仍希望判断两个通道的相对强弱。

给定总数后的分布

令 T=X+Y。独立泊松变量之和服从均值 λ(1+θ) 的泊松分布。对固定整数 t≥0、0≤x≤t,将联合概率除以总数概率: Pr⁡(X=x,Y=t−x)=e−λ(1+θ)λtθxx!(t−x)!,Pr⁡(T=t)=e−λ(1+θ)λt(1+θ)tt!. 相除时相同的指数与 λt 消去,剩下 Pr⁡(X=x∣T=t)=(tx)θx(1+θ)t. 因此条件分布是二项分布,成功率 p=θ/(1+θ),共同基准强度不再出现。

主例总数为十,条件似然为 Lc(θ)∝θ6/(1+θ)10。对数导数是 ℓc′(θ)=6θ−101+θ=6−4θθ(1+θ). 分母为正,导数在 θ=3/2 两侧由正变负,故条件极大似然估计为 3/2,对应 p^=0.6。

总数固定为十时二项概率质量随强度比从一变为一点五由中心五向六移动
给定十次总事件后,横轴是其中属于X通道的个数。曲线不需要指定共同基准强度。

例如在 θ=1 下,给定总数十,恰有六个来自X通道的概率为 (106)/210=210/1024。这是一项条件样本概率,不能直接称为假设为真的概率,也不等于包含“至少同样极端”事件的检验p值。

条件化消去了哪些信息

联合概率可以分成 fT(t;λ,θ) 与 fX∣T(x∣t;θ) 的乘积。令 η=λ(1+θ),参数空间可改写为独立变化的 η>0,θ>0:总数只含 η,通道分配只含 θ。在这个特定模型中,给定总数与最大化共同总强度得到相同的比值估计。

这项性质有模型依据。若基准强度事先已知,或者两个计数不独立,则总数分布可能还携带可用于目标参数的信息,原来的消去与推断均要重算。条件化不是保证保留全部信息的通用操作。

一般条件似然写成 Lc(ψ;x)∝f(x∣T=t;ψ),前提是选定条件分布确实不再含干扰参数。Reid与Fraser讨论了指数族中的这项消去及其适用范围。[1]

计数六与四的相对条件似然在强度比一点五处达到一
目标参数是X强度除以Y强度,因此估计为六除以四;交换通道后估计才取倒数。

变式。 若观察到 X=0,Y=5,条件似然正比于 (1+θ)−5,在正参数空间内严格下降。上确界只在 θ↓0 时达到极限,因而 θ>0 的开放空间内不存在极大值;若把边界零加入模型,才可报告边界估计零。若总数为零,条件分布只有一个结果,对强度比完全没有信息。

剖面似然通过最大化干扰参数处理它,条件似然通过条件分布处理它。两种运算在本泊松比值模型中相容,不意味着在任意参数变换或任意模型下都相同。

参考文献

  1. ↑ Nancy Reid、D.A.S.Fraser,Likelihood Inference in the Presence of Nuisance Parameters,§6,式(43)—(44);以及独立泊松计数给定总数的例子。