忍者ブログ

いけいけ機械学習

統計、機械学習、AIを学んでいきたいと思います。 お役に立てば幸いです。

1980年代のニューラルネットワークの問題

1980年代のニューラルネットワークの問題

1.逆誤差伝播で、誤差情報が拡散し、入力層まで伝わらない

 (勾配消失問題)


2.層が多いネットワークの目的関数は、非常に多くの局所的な極小値をもつ

そのため、重みの初期値の設定がむつかし




PR