CNNの損失関数(Loss Function) その(1): 交差エントロピーとMSE
1 概要 この記事では，畳み込みニューラルネットワーク(CNN)の教師あり学習に用いられる損失関数(Loss function)のうち，交差エントロピー誤差 (Cross Entropy Error)（識別問題向け）と 続きを読む…
タグ: 活性化関数
ReLU とその発展型の活性化関数 [GELU, Swish, Mishなど]
1. ReLU の概要 ReLU (Rectifier Linear Units: 整流線形ユニット)[Nair et al., 2010] は，畳み込みニューラルネットワーク(CNN)やその他のディープニューラルネット 続きを読む…