跳到正文
原文
Reddit · MachineLearning· /u/Jay299792458·· 5 小时前AI 评分42

开源工具记录 LLM Agent 工具参数来源

A harness that records where an LLM agent’s tool arguments came from, before the tool runs [P]

AI 摘要

开发者 Jay299792458 发布了一个测试框架,用于在工具执行前记录 LLM Agent 工具参数的来源。该框架能验证相同输入是否产生一致决策,并检测模型是否错误使用了他人文本而非用户指令作为参数。此工具旨在辅助 AI Agent 安全研究,支持用户根据需求进行扩展修改。

来源:Reddit · MachineLearning · reddit.com