500K コンテキストの微調整には 80GB のビデオ メモリだけが必要ですか? Unslothの新しいチュートリアルをご覧ください。彼らは損失再構成とブロックサイズの自動調整を採用しています。昨年開発されたアクティベーションアンロードアルdocs.unsloth.ai/new/500k-conte…ョンではさらに最適化され、モデルの微調整コストを元の10分の1に削減しています。 チュートリアルリンク: https://t.co/ZIByZyt9on
技術詳細 / 1
技術詳細 / 2
要約
スレッドを読み込み中
X から元のツイートを取得し、読みやすいビューを準備しています。
通常は数秒で完了しますので、お待ちください。