バッチ勾配効果法の説明として正しいものを選択肢 1 ~ 4 から選んでください.
[選択肢]
1. イテレーションごとにランダムにサンプリングされたサンプルを用いて、偏微分によって勾配を計算するため解への収束スピードが早いが、
解が 1 つに定まらない不規則性をもつ.しかし、モデルが局所的な最小値に収束してしまうのを避けることができる.
2. 無策にいくつかのインスタンスをサンプリングすることでミニバッチを用意し、そのミニバッチを用いて勾配を計算していく.
収束スピードは早く、また、十分最適な解へ収束することができる.また、 GPU との相性も良い.
3. 全ての訓練インスタンスを用いて勾配を計算するため、安定して最適解に収束することができる.
しかし、訓練セットが大きくなると収束までに非常に時間がかかる.
4. 最適な解に近くことはできるが、1 つに定まらない.しかし、訓練が進むにつれて徐々に学習率を小さくしていくことで、
最適解にたどり着くことができる.