Un réglage fin du contexte de 500K ne nécessite que 80 Go de mémoire vidéo ? Jetez un œil au nouveau tutoriel d'Unsloth.docs.unsloth.ai/new/500k-conte…onstruction de la fonction de perte et l'ajustement automatique de la taille des blocs. Même leur algorithme de déchargement d'activation, développé l'année dernière, est devenu une référence dans le secteur. Cette nouvelle version l'optimise encore davantage, réduisant le coût du réglage fin du modèle à un dixième de celui de la version originale. Lien vers le tutoriel : https://t.co/ZIByZyt9on
Détails techniques / 1
Détails techniques / 2
Résumer
