karminski-牙医（@karminski3）のスレッド

専門家が既に検証済みです。以前、私はいくつかのオープンウェイトモデルのトークナイザーにおける低頻度語の分布を統計的に分析し、ブロガーのトークンカウントの二重法と組み合わせて検証しようと計画していました。どうやら既に結論が出ているようです。