У ИИ-агентов, вызывающих функции (function calling, tool use), есть ошибка, которую не видит ни одна из обычных защит. Агент вызывает функцию при невыполненном условии ее применения, когда оно прямо ему не названо, и сообщает об успехе, не называя препятствия. Такую ошибку не замечают проверка…
О тестировании ИИ-агентов, вызывающих функции
Это краткое изложение. Полный текст материала доступен на сайте источника.