Momentum 最適化

Momentum 最適化を説明している以下の文で空欄に入る適切な単語を選択肢 1 ~ 3 からそれぞれ選んでください.

勾配降下法では,緩やかな勾配では最適化に時間がかかるのに対し,
Momentum 最適化では,それまでの勾配を考慮するために ( Q1 ___ ) と呼ばれる重みを用いる.
( Q1 ___ ) は ( Q1 ___ ) と学習率との積から局所的な勾配を引くことで求まる.
( Q1 ___ ) は速度として捉えられ、( Q2 ____ )は加速度として捉えられる.
この時 ( Q1 ____ )が大きくなりすぎなように制御するために ( Q3 ___ ) と呼ばれるハイパーパラメータを設定する必要がある.
また,( Q3 ___ ) の値は 0 から 1 までの間で,一般的に使われている値は ( Q4 ___ ) である.

[Q1–2の選択肢]
1. 法線ベクトル
2. 慣性ベクトル
3. 勾配
4. 固有値

[Q3の選択肢]
1. 重力
2. 慣性
3. 摩擦

[Q4の選択肢]
1. 0.99999
2. 0.99
3. 0.9

Leave a comment

Your email address will not be published. Required fields are marked *