用户复现 LeCun 2026 论文：小模型验证优质视图优于下一词预测

2026年11月2日，Reddit社区用户报告成功复现Balestriero与LeCun的2026年论文。该用户在笔记本电脑上利用仅含1100万参数的4层编码器，在COCO数据集上进行实验。结果显示，使用两张不同图片描述（即“优质视图”）训练的文本模型，其与DINOv2嵌入的互相关分数达到0.328。这一数值显著高于单张描述训练的0.196以及传统下一词预测方法的0.168。实验确认未发生图像泄露，且结果在不同学习率搜索中保持一致。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。