AIの基礎概念と歴史応用問題

勾配消失問題が発生している深層ニューラルネットワークを改善する場合、次のうちどの施策の組み合わせが最も効果的ですか?

A.シグモイド関数を活性化関数として採用し、ネットワークをより深くする
✗ シグモイド関数は勾配消失の主要な原因です。さらにネットワークを深くすると問題が悪化します。
B.ReLU関数の導入とバッチ正規化(Batch Normalization)の適用← 正解
✓ 正解です。ReLU関数は勾配消失に強く、バッチ正規化は層間の出力を安定化させ、勾配消失を効果的に防ぎます。
C.勾配を手動で調整し、逆伝播で固定値に置き換える
✗ 勾配を手動で固定値に置き換えることは学習を破壊し、適応的な最適化ができなくなります。
D.全ての隠れ層にドロップアウト層を追加し、ニューロンを50%削除する
✗ ドロップアウト層の追加は過学習防止が目的で、勾配消失の直接的な対策ではありません。

G検定(深層学習・ジェネラリスト検定) の問題一覧