References

受限玻爾茲曼機(RBM)的好教程

  • January 21, 2013

我正在研究受限玻爾茲曼機 (RBM),並且在理解與 RBM 參數相關的對數似然計算時遇到了一些問題。儘管已經發表了很多關於 RBM 的研究論文,但沒有詳細的衍生品步驟。在線搜索後,我能夠在此文檔中找到它們:

  • Fischer, A. 和 Igel, C. (2012)。受限玻爾茲曼機簡介。在 L. Alvarez 等人中。(編輯):CIARP,LNCS 7441,第 14-36 頁,Springer-Verlag:柏林-海德堡。(PDF

然而,這份文件的細節對我來說太高級了。有人可以向我指出一個關於 RBM 的好教程/一組講義嗎?


編輯:@David,令人困惑的部分如下所示(第 26 頁中的公式 29):

我知道這有點晚了,但也許它有幫助。要獲得方程的第一項,需要執行以下步驟:

我們假設在給定可見單元的情況下,隱藏單元之間存在條件獨立性。因此,我們可以分解隱藏狀態的條件聯合概率分佈。

最後一項等於,因為我們正在對所有狀態求和。因此剩下的就是第一項。自從只需要狀態和我們最終得到:

引用自:https://stats.stackexchange.com/questions/48162

comments powered by Disqus