勾配降下法を説明している以下の文で空欄に入る適切な単語を選択肢 1 ~ 3 からそれぞれ選んでください.
ロジスティック関数の出力は 0 か 1 で飽和するため、ロジスティック関数への ( Q1 ___ ) の絶対値が大きいとすぐに飽和してしまう.
よって、導関数は極端に( Q2 ___ ) に近くなってしまうため、( Q3 __ ) するために必要な勾配がほとんど消滅してしまう.
また、( Q3 ___ ) が始まったとしても上位層から徐々に勾配が消滅していくため、下位層ではほぼ完全に勾配が消滅してしまう.
[Q1の選択肢]
1. 入力
2. 特徴量
3. 重み
[Q2の選択肢]
1. 1
2. 0.5
3. 0
[Q3の選択肢]
1. 次元削減
2. 正則化
3. バックプロパゲーション