Усиление защиты памяти
Оригинал: Memory Hardening
Усиление защиты памяти включает разработку границ доверия и безопасных процессов для того, как ИИ-агент хранит память и контекст и получает к ним доступ. Это может быть реализовано с помощью комбинации стратегий, включая ограничение способности агента сохранять записи памяти за счет обязательной внешней аутентификации и проверки при обновлении памяти, выполнение семантических проверок целостности извлеченных записей памяти до выполнения агентом действий, а также внедрение механизмов контроля для мониторинга памяти и процедур устранения последствий отравления памяти.
Связанные техники
Усиление защиты памяти может помочь защитить память LLM от манипуляций и предотвратить выполнение отравленных воспоминаний.
AML.T0080.000ПамятьУсиление защиты памяти может помочь защитить память LLM от манипуляций и предотвратить выполнение отравленных воспоминаний.