デコーディング戦略と出力制御 ノート

デコーディング戦略と出力制御

この章は9つのパートに分かれています。以下の通りです。 • モデルからの読み取りログ • 貪欲デコーディング • 温度サンプリング • トップ$k$サンプリング • 核サンプリング • 繰り返しペナルティ • ビームサーチ • 停止条件 • 構造化出力制約 モデルは、入力シーケンスの各位置に対してログのベクトルを返します。
CdXz5zHNQW_XYpU9K0kt5.jpeg