SYSTEM ATLASЗагрузка материала

Принятие остаточного AI-риска

AI Residual Risk Acceptance

Формальное решение ответственного лица принять оставшийся риск после выполнения доступных мер контроля.

Простыми словами

Представьте приложение с моделью, которая получает данные и выдаёт прогноз, ответ или действие. Важно понимать не только итог модели, но и какие данные, ограничения и проверки привели к нему, потому что уверенный результат всё равно может оказаться неправильным. Так модель остаётся частью контролируемого процесса, а её результат можно проверить, ограничить и пересмотреть. Поэтому модель проверяют на новых данных и ошибках, а не только на примерах, которые она уже видела.

Пример от @Vibeclakr

Пример при разработке

Например, для «Принятие остаточного AI-риска» назначают ответственного и добавляют тест или метрику, по которой видно реальный результат.

Это редакционный пример применения, а не часть определения или доказательство концепции.

Формальное определение

Формальное решение ответственного лица принять оставшийся риск после выполнения доступных мер контроля.

Механизм действия

Для «Принятие остаточного AI-риска» команда фиксирует область действия, владельца, проверяемый сигнал и поведение при нарушении условия.

Пример в работе

Нерабочий подход

Повторять термин «Принятие остаточного AI-риска», не объяснив, где он применяется, кто отвечает и по какому признаку видно результат.

Системный подход

Связать «Принятие остаточного AI-риска» с конкретным сценарием, автоматической или ручной проверкой и правилом пересмотра.

Ограничения

«Принятие остаточного AI-риска» решает ограниченную задачу и не заменяет проверку соседних рисков, исходных допущений и последствий для всей системы.

Источник

NIST, “Artificial Intelligence Risk Management Framework: Generative Artificial Intelligence Profile”, 2024.

Первоисточник