最近我了解到 VaultGemma，这是谷歌最近尝试用差分隐私预训练 LLM 模型的一个项目，这让我既印象深刻又觉得很有趣。 TLDR： - 第一个没有可检测训练数据记忆的LLM 用尽了所有技巧，计算能力提升了100倍，最终达到了GPT-2的水平。
正在加载线程详情
正在从 X 获取原始推文，整理成清爽的阅读视图。
通常只需几秒钟，请稍候。
来自 Jack Morris（@jxmnop）的推文线程
共 1 条推文 · 2025年10月29日 14:31
作者信息
线程正文
正在加载线程详情
正在从 X 获取原始推文，整理成清爽的阅读视图。
通常只需几秒钟，请稍候。
共 1 条推文 · 2025年10月29日 14:31
最近我了解到 VaultGemma，这是谷歌最近尝试用差分隐私预训练 LLM 模型的一个项目，这让我既印象深刻又觉得很有趣。 TLDR： - 第一个没有可检测训练数据记忆的LLM 用尽了所有技巧，计算能力提升了100倍，最终达到了GPT-2的水平。