EN - FR - DE - ES - IT - PT -

LexiconDream

🎲 制限付きボルツマンマシン

可視ユニットと隠れユニットを持つ生成型確率ニューラルネットワーク。

制限付きボルツマンマシン

2層構造で、層内には接続がない。制限付きボルツマンマシンは、可視ユニットと隠れユニットから構成され、接続は2つのグループ間のみに存在する。この制限により、対照発散法を用いた学習が容易になる。

このモデルは、可視ユニットに関する確率分布を学習します。隠れユニットは潜在的な特徴を捉えます。学習が完了すると、ネットワークは層間でギブスサンプリングを実行することでサンプルを生成できます。

主な特性

RBMは、2006年の深層学習復興において中心的な役割を果たし、それらを積み重ねることで効果的な事前学習が可能になった。VAEや拡散モデルといった現代的なアーキテクチャがRBMに取って代わったものの、その概念はエネルギーベースのモデリング研究において依然として見られる。

Comments (2)

  1. Dr. Ken J.
    RBMs were foundational to the deep learning revolution. They're less common now but historically important.
  2. Nina T.
    The math behind RBMs is not for the faint of heart. Energy based models are elegant but difficult.

Leave a comment