arXiv cs.AI· Anson Y. Lam, Shuqing Li, Michael R. Lyu·· 11 小时前AI 评分42
Frozen Scenes, Shifting Winners: Configuration Fragility in Text-to-3D Evaluation
Frozen Scenes, Shifting Winners: Configuration Fragility in Text-to-3D Evaluation
AI 摘要
针对文本生成 3D 场景的评估，研究发现渲染设置和提示词变化导致 17/19 个对齐评估器的配置方差超过生成器间方差。在 300 个固定场景中测试 19 个评估器时，18/19 个评估器在不同配置下改变了点估计获胜者。该审计建议报告生成器、分数与协议 ID，并强调选择相关的评估不确定性。
来源：arXiv cs.AI · arxiv.org