关于MLE(最大似然估计),以及与EM(期望最大化)之间的联系,我想澄清一些简单的概念性问题。
据我了解,如果有人说“我们使用了MLE”,这是否自动意味着他们拥有其数据PDF的显式模型?在我看来,答案是肯定的。换句话说,如果有人在任何时候说“ MLE”,可以公平地问他们假设使用什么PDF。这是正确的吗?
最后,在EM上,我的理解是,在EM中,我们实际上并不知道-或需要知道我们数据的基础PDF。这是我的理解。
谢谢。
1
EM中的“ M”代表可能性的最大化。要写下可能性,我们需要pdf。EM是在某种意义上存在“不可观测”(在E步中填写)的情况下查找MLE的一种方法。也就是说,要使用EM,您需要一个明确的模型。
—
Glen_b-恢复莫妮卡
@Glen_b谢谢Gleb_b。因此,1)会是正确地说,在EM,在MLE中,我们总是假设一些数据的PDF的模式“?这意味着如果有人说‘我们用MLE / EM’,我们可以公平地问,”什么PDF文件没有你认为”这会是一个正确的评估2)最后,关于EM,我相信你指的是不可观察是特别的PDF组成的混合物,正确提前感谢的概率。?。
—
Creatron
请注意,存在非参数最大似然方法。查找Kaplan-Meier。
—
soakley 2013年
Creatron-on(1)请注意,EM是用于计算 MLE的算法,否则将难以处理。在这两种情况下,我都会问一个更笼统的问题:“您的模型是什么?”,因为该模型比单个pdf更为复杂。开(2)EM算法不仅适用于混合物。比这更笼统。
—
Glen_b-恢复莫妮卡