LivePI: More Realistic Benchmarking of Agents Against Indirect Prompt Injection
LivePI:更真实的智能体对抗间接提示注入基准测试
机构 * University of Pennsylvania(宾夕法尼亚大学)
AI总结 提出LivePI基准,覆盖7种输入表面、12种攻击/渲染家族和5种恶意目标,在真实虚拟机环境中评估多个AI智能体,发现攻击成功率10.7%-29.6%,并验证了两层防御的有效性。
高校专区
LivePI:更真实的智能体对抗间接提示注入基准测试
机构 * University of Pennsylvania(宾夕法尼亚大学)
AI总结 提出LivePI基准,覆盖7种输入表面、12种攻击/渲染家族和5种恶意目标,在真实虚拟机环境中评估多个AI智能体,发现攻击成功率10.7%-29.6%,并验证了两层防御的有效性。
在符合推断中对虚假发现比例的处处有效界
机构 * Department of Statistics, Stanford University(斯坦福大学统计学系) ; Department of Statistics and Data Science, University of Pennsylvania(宾夕法尼亚大学统计学与数据科学系) ; Department of Mathematics, Stanford University(斯坦福大学数学系)
AI总结 本文提出了一种在多重检验问题中对虚假发现比例(FDP)的处处有效界,通过构造高概率包络来保证在任意后验阈值选择下的统计保证,同时展示了该方法在异常检测和符合选择中的应用。
Comments 34 pages, 12 figures. Code available at https://github.com/sza919/everywhere-valid-fdp-bounds-in-conformal-inference
自主驾驶数据集:从2000万篇论文到大规模精细化生物医学知识
机构 * Department of Computer and Information Science, University of Pennsylvania(宾夕法尼亚大学计算机与信息科学系) ; Department of Genetics, University of Pennsylvania(宾夕法尼亚大学遗传学系) ; Departments of Bioengineering and Chemical and Biomolecular Engineering, University of Pennsylvania(宾夕法尼亚大学生物工程与化学与生物分子工程系)
AI总结 本文提出通过PubMed自动生成结构化数据集,实现更大规模、更精细和更准确的生物医学知识,展示Starling系统在多个任务中生成大规模数据集并提升准确性。
分解上下文召回中的预测机制
机构 * University of California, Berkeley(加州大学伯克利分校) ; University of Pennsylvania(宾夕法尼亚大学)
AI总结 通过设计结合连续上下文学习与离散关联召回的新玩具问题,发现Transformer模型在上下文召回任务中存在两种具有不同学习动态的独立机制:一种依赖离散符号标签进行关联召回,另一种基于前一个token和上下文进行贝叶斯式预测。
Comments 45 pages, 47 figures, 2 tables