スキップ接続 (Skip connection)
1. スキップ接続 (skip connection)とは [概要] スキップ接続 (skip connection)とは，ディープニューラルネットワークにおいて，途中の複数層をN層分スキップして先の層へとつなげる迂回パ 続きを読む…
タグ: ResNet
ResNeXt: 残差ブロックのワイド化によるResNet改善版
1. ResNeXtとは [概要] ResNeXt とは，ResNetの残差ブロックをワイド化したResNet改良版である[Xie et al., 2017] ．当時様々なチームが研究していた流行の研究テーマである「経路 続きを読む…
CNNバックボーン(backbone)の代表的アーキテクチャの歴史 [まとめ年表]
1. CNNバックボーン(CNN backbone)とは [概要] CNNバックボーン (backbone) とは，CNN(畳み込みニューラルネットワーク)のネットワーク構造のうち，序盤から終盤まで層の範囲全体のことをさ 続きを読む…
DenseNet: ブロック内で全層間をスキップ接続するCNN
1. DenseNet とは [概要] DenseNet とは，サブブロック間の各層を密に全てスキップ接続した「Denseブロック」を主要部品に用いる，画像認識向け用CNNのバックボーン設計である [Huang et a 続きを読む…
残差接続(residual connection) [ResNet]
1. 残差接続(residual connection)とは [概要] 残差接続(residual connection)とは，CNNの1種である ResNet [He et al., 2016a], [He et al 続きを読む…