2
与吉布斯抽样有关的混乱
我看到这篇文章时说,在吉布斯采样中,每个样本都被接受。我有点困惑。如果每个接受的样本都收敛到平稳分布,结果如何。 在一般的Metropolis算法中,我们接受为min(1,p(x *)/ p(x)),其中x *是采样点。我假设x *将我们指向密度很高的位置,因此我们正在向目标分布移动。因此,我认为经过一段时间的老化后,它会移动到目标分布。 但是,在吉布斯采样中,我们接受了所有内容,因此即使它可能将我们带到另一个地方,也不能说它收敛于平稳/目标分布 假设我们有一个分布 p (θ )= c (θ )/ Zp(θ)=C(θ)/žp(\theta) = c(\theta)/Z。我们无法计算Z。在大都会算法中,我们使用以下术语c (θñ Ë W ^)/ c (θÒ 升d)C(θñËw)/C(θØ升d)c(\theta^{new})/c(\theta^{old}) 合并发行版 c (θ )C(θ)c(\theta)加上归一化常数Z抵消了。这样很好 但是在吉布斯抽样中,我们在哪里使用分布 c (θ )C(θ)c(\theta) 例如在论文中http://books.nips.cc/papers/files/nips25/NIPS2012_0921.pdf其给定 所以我们没有确切的条件分布可用来进行抽样,我们只有与条件分布成正比的东西