L'une des raisons pour lesquelles je suis plus optimiste que jamais concernant les « LLM » est que pratiquement *plus personne* dans le domaine n'est un maximaliste de la passe avant des DNN ou un maximaliste de l'auto-supervision. Cela n'a tout simplement pas la même signification que les LLM de 2020-2022.
Cependant, comme toujours, une fois qu'une capacité est atteinte avec un système, il est facile de la ramener à des poids de modèle :
Contexte plus large ici :