入力ユニット数が100、出力ユニット数が50の全結合層がある。各出力ユニットにバイアスが1つずつあるとき、この層の学習可能なパラメータ数として正しいものはどれか。
- 1150
- 25,000
- 35,050
- 45,100
正解と解説を見る
正解:3
全結合層では、すべての入力ユニットとすべての出力ユニットが重みでつながるため、重みの数は100×50=5,000です。これに出力ユニットごとのバイアス50を加えると5,050になります。5,000はバイアスを数え忘れた値、5,100はバイアスを入力側の100個として数えた値、150はユニット数を足しただけの値です。全結合層のパラメータ数は「入力数×出力数+出力数(バイアス)」と覚えておきましょう。
根拠:全結合層のパラメータ数(重み行列+バイアスベクトル)