零膨胀泊松模型
零膨胀泊松模型(zero-inflated Poisson model,ZIP)把“必定为零”的状态与一个普通泊松计数状态混合。泊松状态本身也能产生零,所以一次零观测不能直接揭示它来自哪一种状态。模型可以只含两个常数参数,也可以让状态概率和计数强度各自依赖特征。
考虑一组合成设备时段:以概率0.3,设备处于一个完全不产生缺陷的状态;其余0.7的时段,缺陷数按均值二的泊松分布产生。最终零缺陷的概率大于0.3,因为第二种状态也可能偶然没有缺陷。
两个来源的零
令 表示必零状态, 与S独立。定义 ,其中 、。则 概率和为 。当 时正概率支撑为全部非负整数; 时只剩零,λ无法从观测识别。 恢复普通泊松分布。本文的π始终表示必零状态概率,有的资料把互补概率作为混合参数,比较公式前应先确认。[1]
主例 中,两个零来源的质量为 因此 ,正值总概率约0.605265302。由贝叶斯公式,观测到零后的必零状态概率为 它仍不是一。若观测到正数,则必定来自泊松状态;这两个推断方向不同。
均值、方差与过度分散
条件于S,Y的均值为 ,方差为 。全期望与全方差给出 第二项来自两种状态均值的差异。主例均值为1.4,方差为2.24;普通 的方差只有1.4,零概率约0.246596964。这里的“膨胀”不仅相对于λ为二的泊松部分成立,也相对于相同总体均值的普通泊松分布成立。
后一个结论可由凸性直接证明。令 ,则 这是对凸函数 在0和λ处应用加权凸性;当 时严格大于。因此,这个模型不能描述相同均值下零概率更低的计数分布。
似然与可以辨认的量
给定相互独立、共享参数的观测 ,令零个数为 、正数个数为 ,对数似然是 端点采用扩展对数约定:没有相应观测的项按 处理,若模型给某个实际观测的概率为零,则整个对数似然为负无穷。零项保留混合和,不能擅自把每个零都算为必零状态。从理论完整质量函数看,正值相邻质量之比满足 (k至少为一),所以在非退化情形可以识别λ,再由正值总质量识别π;有限样本中正数很少时,两参数估计仍可能不稳定。
变式。 保持λ为二,把π降到零。此时总体均值、方差都回到二,零概率变为 。若反而令π为0.6,则均值为0.8、方差为1.76、零概率约0.654134113。较大的必零概率既提高零质量,也降低总体均值,并非只在原分布零点上额外加一根柱而让其他概率不变。
回归形式常令 、。这时应按各自参数对每个独立观测写似然,不能先把所有零比例压成同一个π。数据中零很多也可能来自未记录的异质性、相关观测或错误的观察时长;零膨胀的数学拟合本身不证明真实设备存在一个可永久识别的必零类别。
参考文献
- ↑ statsmodels,ZeroInflatedPoisson,参数、二元混合部分与计数部分;质量、矩和例子独立推导,访问日期:2026年10月25日。