Обнаружение состязательных входных данных

Оригинал: Adversarial Input Detection

Выявляйте и блокируйте состязательные входные данные или нетипичные запросы, которые отклоняются от известного безопасного поведения, демонстрируют паттерны поведения, наблюдавшиеся в предыдущих атаках, или поступают с потенциально вредоносных IP-адресов.

Встраивайте алгоритмы обнаружения состязательных входных данных в ИИ-систему перед ИИ-моделью.

Связанные техники

AML.T0015Обход ИИ-модели

Предотвращает внесение злоумышленником состязательных данных в систему.

AML.T0029Отказ в обслуживании ИИ-сервиса

Оценивайте запросы до вызова инференса или применяйте политику таймаутов для запросов, потребляющих чрезмерные ресурсы.

AML.T0031Нарушение целостности ИИ-модели

Встраивайте обнаружение состязательных входных данных в пайплайн до того, как входные данные достигнут модели.

AML.T0043Создание состязательных данных

Встраивайте обнаружение состязательных входных данных, чтобы блокировать вредоносные входные данные во время инференса.

AML.T0043.000Оптимизация в режиме белого ящика

Встраивайте обнаружение состязательных входных данных, чтобы блокировать вредоносные входные данные во время инференса.

AML.T0043.001Оптимизация в режиме чёрного ящика

Отслеживайте запросы и паттерны запросов к целевой модели и блокируйте доступ при обнаружении подозрительных запросов.

AML.T0043.002Перенос на модель чёрного ящика

Встраивайте обнаружение состязательных входных данных, чтобы блокировать вредоносные входные данные во время инференса.

AML.T0043.003Ручная модификация

Встраивайте обнаружение состязательных входных данных, чтобы блокировать вредоносные входные данные во время инференса.

AML.T0043.004Добавление бэкдор-триггера

Встраивайте обнаружение состязательных входных данных, чтобы блокировать вредоносные входные данные во время инференса.