Transformer : スタック化したアテンション群で構成された系列変換ネットワーク

1. Transformer とは [概要] Transformer (変換器) とは,マルチヘッドアテンションを主用部品として何度もスタックして用いる,系列対系列変換向けの,巨大な残差接続つきのEncoder-Deco 続きを読む…