
勾配消失問題・勾配爆発問題 (in ディープラーニング) と その対処法リスト.
1. 勾配消失問題の概要と,記事の構成について 勾配消失問題(vanishing gradient problem)とは,(ディープ)ニューラルネットワークの誤差逆伝搬において,DNN内の活性化関数の勾配が,手前の方の層 続きを読む…
1. 勾配消失問題の概要と,記事の構成について 勾配消失問題(vanishing gradient problem)とは,(ディープ)ニューラルネットワークの誤差逆伝搬において,DNN内の活性化関数の勾配が,手前の方の層 続きを読む…
1. 早期停止 (Early Stopping) とは [概要] 早期停止(early stopping)とは,機械学習をしている際に,モデルの過学習を避けるために,早期のタイミングで,強制的に学習を止める正則化手法であ 続きを読む…
1. Faster R-CNNの 領域提案ネットワーク(Region Proposal Network, RPN) とは【概要】 領域提案ネットワーク(Region Proposal Network, RPN) とは,F 続きを読む…
1. ROI align (関心領域アライン)とは [概要] ROI Align (関心領域アライン) とは「【画像上のROI – 特徴マップ上のROI 】間の座標系の位置合わせ(alignment)」がROI Pool 続きを読む…
1. non-deep learning とは non-deep learning とは,「ディープラーニングを用いないない機械学習やパターン認識手法」について区別や強調して述べたい場合に,「非 Deep Learnin 続きを読む…
1. Mask R-CNN とは [概要] Mask R-CNN [He et al., 2017] は,インスタンスセグメンテーションの初期決定版となった.2ステージ型CNNである (図1 右). Mask R-CNN 続きを読む…
1. データ拡張 (Data Augmentation)とは [概要] データ拡張 (Data Augmentation, データ増大) とは,機械学習の前処理として,「学習用データセット」の各データサンプルを,変形させ 続きを読む…
1. Stacked Hourglass Networkとは [概要] Stacked Hourglass Network とは,直列に Hourglass Module (砂時計モジュール)をN個スタックするネットワー 続きを読む…
1. off-the-shelf とは [概要] off-the-shelf とは「(ソフトウェアが)既製品の」という意味の形容詞である.この「off-the-shelf」は,機械学習・パターン認識の界隈では,昔からよく 続きを読む…