來自 Alexander Doria（@Dorialexander）的推文串

Nvidia 發布了全新的開放式模型，並在模型設計方面進行了實際實驗（進一步印證了我的觀點，即處理合成推理會在這方面帶來新的動力）。

有趣的是，Pleias 的第一個 LLM 計算計劃非常接近：一個 300-500 億的混合 Mamba，由在合成器上訓練的專家組成（從 2024 年 1 月開始，可惜從未獲得資金）。