EN - FR - DE - ES - IT - PT -

LexiconDream

🎲 Máquina de Boltzmann restrita

Uma rede neuronal estocástica generativa com unidades visíveis e ocultas.

Máquina de Boltzmann restrita

Duas camadas, sem ligações dentro de uma camada. Uma máquina de Boltzmann restrita consiste em unidades visíveis e unidades ocultas, com ligações apenas entre os dois grupos. Esta restrição torna o treino viável através da divergência contrastiva.

O modelo aprende uma distribuição de probabilidade sobre as unidades visíveis. As unidades ocultas captam características latentes. Uma vez treinada, a rede pode gerar amostras executando a amostragem de Gibbs entre camadas.

Propriedades principais

As RBM foram fundamentais para o renascimento da aprendizagem profunda em 2006, quando o seu empilhamento possibilitou um pré-treino eficaz. Arquiteturas modernas como VAEs e modelos de difusão substituíram-nas em grande parte, mas as ideias ainda aparecem na investigação de modelação baseada em energia.

Comments (2)

  1. Dr. Ken J.
    RBMs were foundational to the deep learning revolution. They're less common now but historically important.
  2. Nina T.
    The math behind RBMs is not for the faint of heart. Energy based models are elegant but difficult.

Leave a comment