研究tldr-ai2026-09-08
道具の出力からAIをだます手口
Prompt Injection Through Tool Output

AIが使う道具の出力に隠された不正な指示が、従来の安全対策を回避しAIをだます新たな手口として発見され、その対策が提案されました。
ツール結果に隠されたPrompt injectionsは、入力とアクションの検査がエージェントループの異なる時点で行われるため、従来の安全対策を回避できます。提案されたシグナルは「precedent gap」と呼ばれ、これはエージェントが突然ツールを呼び出したり、これまでの実行履歴にない引数を使ったりする状況を指します。
この記事について質問
記事の内容に答えます。記事外のことは都度ウェブで調べます。