跳到正文
热点事件持续更新

NVIDIA Nemotron 3.5 Super VL 上线 AWS EKS 与 SageMaker

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

2026年10月30日,AWS官方博客宣布NVIDIA Nemotron 3.5 Super VL模型已加入AWS平台。该模型采用120B参数的混合专家(MoE)架构,每token激活12B参数,支持文本、图像、文档和视频理解。报道披露其可在Amazon EKS、EKS Auto Mode和SageMaker HyperPod EKS上部署,并提供了Hermes Bench得分63.44%等关键性能指标。

AI 根据报道生成 · 4 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. AWS Machine Learning Blog精选
    NVIDIA Nemotron 3.5 Super VL 在 AWS EKS 与 SageMaker HyperPod EKS 的部署架构与性能评估

    AWS 官方博客宣布 NVIDIA Nemotron 3.5 Super VL 已加入 AWS 平台,该模型为 120B 参数的混合专家(MoE)架构,每 token 激活 12B 参数,支持文本、图像、文档和视频理解,并可在 Amazon EKS、EKS Auto Mode 和 SageMaker HyperPod EKS 上部署。 材料披露了关键性能指标:Hermes Bench 得分 63.44%,LangChain agent 评估 87.05%,CharXiv 图表推理基准 80.8%。架构采用混合 Mamba-Transformer MoE,结合 RADIO 视觉编码器,上下文窗口达 1M tokens。最小 GPU 配置显示,使用 B200/GB200 时 BF16 需 8 卡、NVFP4 需 2 卡;H200 需 8 卡 BF16 或 4 卡 NVFP4。 事实层面,文章提供了在 p6-b200.48xlarge 和 p5en.48xlarge 实例上的验证方法,包括 NCCL all-reduce 微基准测试和 aiperf 工具测量 TTFT、ITL 及吞吐量。推断层面,通过并发扫描图可判断聚合与解耦部署的延迟差异,从而规划容量。猜测层面,若用户未进行精度优化(如 NVFP4),实际成本可能高于预期,且长上下文推理的显存占用仍受限于全量权重存储。

本事件热度走势

当前热度 9·可比范围峰值 10(10月30日 01:00)·近 24 小时可比范围变化 –

02.557.51010月30日01:0010月30日02:0010月30日03:0010月30日04:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。