OpenAIが開発したGPT(Generative Pre-trained Transformer)シリーズの言語生成メカニズムに関する記述として、最も適切なものを1つ選択してください。
出典G検定オリジナル模擬試験
ア
Transformerのデコーダ構造をベースとし、過去の先行トークン列のみから次のトークンの出現確率を予測する自己回帰(Autoregressive)言語モデルであり、未来のトークンへの情報漏洩を防ぐため因果的マスク(Causal Mask)を適用している。
イ
文末のトークンから文頭のトークンに向かって逆方向にのみ文章を生成する特殊モデルである。
ウ
文章全体を一度に一括出力するため、トークンごとの逐次推論ステップは一切存在しない。
エ
事前学習において人手で作成した100万件の正解ラベル付きデータセットが必須である。