跳到正文
热点事件持续更新

HSS与TasteVal基准揭示模型视觉推理与品味能力

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

2026年10月12日,Import AI发布第476期周刊,指出西方开源模型在DeepSWE、GPQA Diamond等核心指标上性能已低于中国GLM-5.3和Kimi K3。Elorian与Scale AI发布的HSS(Humanity's Sixth Sense)视觉基准及TasteVal项目披露了相关测试结果,显示美国与欧洲厂商推出的Beam、Mistral Large 4等模型在视觉推理与研究品味能力上存在短板。Jack Clark同时预测RSI可能提前至2027年。目前报道仅提及HSS视觉基准的发布及部分数据对比,未提供完整的详细数值或后续具体进展。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. Import AI精选
    Jack Clark 指出西方开源模型在多项基准落后中国厂商,并预测 RSI 可能提前至 2027 年

    Import AI 476 周刊通过多个新基准测试与项目披露,揭示了当前 AI 领域的一个关键转折:美国与欧洲厂商推出的开源模型(如 Beam、Mistral Large 4)在 DeepSWE、GPQA Diamond 等核心能力指标上,性能已低于中国的 GLM-5.3 和 Kimi K3 等闭源或半开源模型。 具体数据显示,Elorian 与 Scale AI 发布的 Humanity's Sixth Sense (HSS) 视觉推理基准中,GPT 6 Astra 得分为 53.6%,而 GLM-5.3-flash 仅为 26.8%;P-Zero Research 的 TasteVal 基准显示 Opus 5.5 的实验研究品味超越人类专家基线,但作者 Jack Clark 据此将递归自我改进(RSI)发生时间的预测从 2028 年提前至 2027 年。此外,Reflection 的 Beam 模型虽然强调 Token 效率,但在 DeepSWE 1.1 等编码任务上得分仍不及 GLM-5.3;Mistral Large 4 虽主打网络安全优化,但在 Terminal-Bench 等测试中也未能超越中国模型。 在基础设施方面,美国能源部展示了跨实验室联邦训练 LLaMA 模型的可行性,但文章明确指出其算力规模(约数千 GPU)与工业界前沿水平存在约 100 倍的差距。综合来看,尽管西方在空间 AI 应用和联邦学习架构上有探索,但在模型本体能力的“硬指标”上,中国厂商目前占据优势地位。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。