スロップとは、基本的に報酬と難解度の比を最大化するコンテンツです。メカニズム的には、これは出力分布をいくつかのパレート最適パターンを含む盆地に縮小することで報酬をハッキングする手法であり、本質的にはこのトレーニング設定に特有の退化文法を構築します。
スレッドを読み込み中
X から元のツイートを取得し、読みやすいビューを準備しています。
通常は数秒で完了しますので、お待ちください。
スレッドを読み込み中
X から元のツイートを取得し、読みやすいビューを準備しています。
通常は数秒で完了しますので、お待ちください。
1 件のツイート · 2025/11/22 22:35
スロップとは、基本的に報酬と難解度の比を最大化するコンテンツです。メカニズム的には、これは出力分布をいくつかのパレート最適パターンを含む盆地に縮小することで報酬をハッキングする手法であり、本質的にはこのトレーニング設定に特有の退化文法を構築します。