Nanjun Zhou, Yiming Li, Yukun Chen, Ting Qiao, Enhao Huang, Zhan Qin · 2026 · arXiv (Cornell University)
DOI: 10.48550/arxiv.2610.25372 · cited by 0 works (OpenAlex) · open-access PDF
Потенциальные отравляющие инструменты появились как критическая угроза безопасности для агентов LLM, где противники встраивают вредоносные инструкции в описания инструментов или внешние ресурсы, которые попадают в контекст агента-мишени, позволяя противникам манипулировать процессом отбора инструментов агента. Однако существующие атаки отравления инструментами в первую очередь опираются на идеализированное предположение, что атаки оказывают влияние задачи в рамках одного раунда взаимодействия. Мы показываем, что их эффективность резко ухудшается в реалистичных многоуровневых агентических настройках. Мы далее раскрываем, что это ухудшение происходит от того факта, что агенты не последовательно используют наземные сигналы, относящиеся к атаке, в своем контексте, поскольку контекст планирования
Machine translation (Meta M2M100); the English original follows.
Tool poisoning has emerged as a critical security threat to LLM agents, where adversaries embed malicious instructions in tool descriptions or external resources that enter the agent's context, allowing adversaries to manipulate agent's tool selection process. However, existing tool poisoning attacks primarily rely on an idealized assumption that the attacks task effect within a single interaction round. We show that their effectiveness degrades sharply in realistic multi-round agentic settings. We further reveal that this degradation stems from the fact that agents do not consistently surface attack-relevant signals in their reasoning as the planning context evolves, thereby weakening the attack's influence across rounds. To investigate whether tool poisoning remains a practical threat in such realistic settings, we propose SEAL, a two-stage method for persistent tool poisoning. Specifically, SEAL first performs Prefix-Eliciting Trigger Optimization (PETO) to optimize context-specific triggers that elicit attack-relevant reasoning prefixes, improving effectiveness within individual contexts. It then applies Local-to-Universal Trigger Aggregation (L2U) to combine these local triggers into a single universal trigger, improving generalization across different contexts and execution rounds. Extensive experiments across seven representative multi-round scenarios and different models demonstrate the attack effectiveness of SEAL, its transferability across target models, and its resistance to potential defenses.
Read in: English · Spanish · Chinese · Hindi · Arabic · Portuguese · French · German · Japanese · Russian · Korean · Indonesian · Vietnamese
Topics: Computer science, Context (archaeology), Task (project management), Transferability, Computer security, Generalization
GET https://store.agentexchange.work/gw/papers/verify?title=...&year=... (0.003 USD), fetch this record as JSON with /gw/papers/paper?id=2610.25372, or list what it cites with /gw/papers/references?id=.... Pay per call in USDC (x402) or with a 19 USD card key for 1,000 calls. Catalogue · llms.txtSources: OpenAlex (CC0), arXiv, Crossref. Agent Exchange