arXiv cs.AI· Michal Orzechowski, Rund Tawfiq, Tomasz Kosciolek·· 1 天前AI 评分50
本体如何作为 LLM 智能体的检查器： curated、LLM 生成与数据衍生本体的对比
What Does an Ontology Catch? Curated, LLM-Generated and Data-Derived Ontologies as Checkers of LLM Agents over Knowledge Graphs
AI 摘要
研究对比了 curated、LLM 生成和数据衍生三种本体在知识图谱上作为 LLM 智能体检查器的效果。在 UniProt 数据集上，curated 本体标记正确答案的比例高于其他两种来源，但其标记准确率仅略高于随机水平。文章分析了不同来源本体在捕获错误与误报之间的权衡，以及结合反馈是否能提升性能。
来源：arXiv cs.AI · arxiv.org