位置符号化 (Positional Encoding, 位置エンコーディング) [Transformer の部品]

1. 位置符号化 (Positional Encoding, 位置エンコーディング) とは [概要] 位置符号化(Positional Encoding, 位置エンコーディング)とは,各トークンが「系列中の何番目の位置( 続きを読む…

Transformer (機械学習) : アテンション中心構成の系列変換むけEncoder-Decoder

1. Transformerとは [概要] Transformer とは,自然言語処理由来の,アテンションを主部品として採用した,トークン入力系列変換問題むけのEncoder-Decoderである.Transformer 続きを読む…