バックプロパゲーション
更新日:
用語解説
バックプロパゲーション(誤差逆伝播法)は、ニューラルネットワークの出力の誤差を、出力側から入力側へさかのぼって伝え、各重みをどれだけ直すべきか(勾配)を効率よく計算する方法です。
■ 試験で押さえるポイント
微分の連鎖律を使って、各重みの勾配を求めます。
求めた勾配を使って、誤差が小さくなる方向に重みを更新します。
層が深いと、勾配が小さくなりすぎる問題(勾配消失)が起きることがあります。
■ 選択肢での判断ポイント
勾配の計算と、勾配を使った重みの更新を分けて理解します。