Les débutants qui souhaitent apprendre de manière systématique la technologie des grands modèles de langage peuvent constater que, malgré l'abondance d'informations disponibles en ligne, celles-ci sont trop dispersées et qu'ils ne savent pas par où commencer ni dans quel ordre les apprendre. Vous pouvez découvrir le nouveau cours CME 295 de l'Université de Stanford, qui propose un nouveau cours chaque semaine depuis fin septembre, et vous pouvez y suivre gratuitement. Ce cours aborde tous les aspects, des principes fondamentaux des Transformers aux technologies Agent de pointe, et propose des tutoriels vidéo détaillés ainsi que des supports de cours complets. Un examen est également prévu en cours de route pour évaluer vos acquis. Lien vers le cours : https://t.co/MPwAHA1mEv Contenu principal : - Explication détaillée de l'architecture du transformateur : du mécanisme d'attention à l'implémentation complète du transformateur ; - L'ensemble du processus de formation LLM : couvrant le pré-entraînement, la quantification, l'optimisation matérielle et le réglage fin efficace des paramètres ; - Techniques de réglage des préférences : Explication approfondie de méthodes telles que RLHF, la modélisation des récompenses, PPO et DPO ; - Raisonnement et agents : y compris les modèles de raisonnement, l'apprentissage par renforcement, les frameworks RAG et ReAct ; - Méthodologies d'évaluation des LLM : Introduction au rôle du LLM en tant que juge et aux techniques d'évaluation multimodales ; - Matériel pédagogique d'accompagnement : Comprend un aide-mémoire, une FAQ et une banque complète de questions d'examen. L'ensemble des vidéos et du matériel de cours sont disponibles gratuitement en ligne pour le visionnage et l'apprentissage, et conviennent aux développeurs ayant une certaine expérience en programmation et souhaitant approfondir leurs connaissances de la technologie LLM.
