A46 · Управление AI

Отсутствие реестра AI-систем и разрыв в соответствии требованиям

Без реестра AI-систем организация не знает, какие модели, данные, поставщики и владельцы участвуют в AI-рисках. Становятся невыполнимыми аудит, оценка воздействия на приватность, реагирование на инциденты и управление поставщиками.

Иллюстрация к карточке угрозы «Отсутствие реестра AI-систем и разрыв в соответствии требованиям»
Отправить с описанием:TelegramWhatsApp
Кратко для руководителя

В чём суть риска

Без реестра AI-систем организация не знает, какие модели, данные, поставщики и владельцы участвуют в AI-рисках. Становятся невыполнимыми аудит, оценка воздействия на приватность, реагирование на инциденты и управление поставщиками.

Разные подразделения запускают пилотные AI-проекты независимо друг от друга. Проекты минуют единую процедуру согласования и не получают владельца. Служба безопасности узнаёт о них после инцидента с данными или неожиданных расходов. Граница доверия здесь организационная: системы работают с корпоративными данными, но не входят в контур управления. Неучтённую систему невозможно ни проверить, ни быстро отключить.

Связь со стандартамиOWASPLLM09MITRE / ATT&CKATLAS: AI GovernanceNISTNIST AI RMF: Govern
01
Влияние на бизнес

Чем риск оборачивается для компании

Право и комплаенс

Невозможно провести аудит и оценку воздействия на приватность.

Безопасность

Реагирование на инцидент затягивается: неизвестно, какие системы и данные затронуты.

Финансы

Неучтённые пилотные проекты порождают неконтролируемые расходы.

Операции

Управление поставщиками AI ведётся вслепую, без понимания реальных зависимостей.

Где риск наиболее вероятен

Пилотные AI-проекты в подразделенияхСамостоятельное подключение облачных AI-сервисовAI-функции, встроенные в закупленные продуктыПодготовка к внешнему аудиту
02
Зоны ответственности

Кому и что решать

ИТ-директор

Ввести единый реестр AI-систем и обязательную процедуру приёма новых инициатив.

Директор по кибербезопасности

Обеспечить распределение систем по уровням риска и выявление неучтённых AI-приложений.

Владелец бизнес-процесса

Назначить владельца для каждой AI-системы в своём процессе и подтверждать сведения о ней в установленный срок.

03
Сигналы для службы мониторинга

Что стоит наблюдать

Признаки сами по себе не доказывают инцидент. Их полезно сопоставлять с учётной записью, версией модели, решением политики, источником контекста и результатом вызова инструмента.

В сети обнаруживаются AI-приложения, отсутствующие в учёте
У системы нет назначенного владельца
Оценка воздействия на защиту данных не проводилась
Для модели нет описательной карточки
Поставщики AI не отражены в учёте третьих сторон
04
Проектирование защиты

Какие меры создают границу

Меры работают в связке и не перекладывают ответственность на модель: важны границы полномочий, владелец, телеметрия и процедура безопасного отказа.

01Организационная

Реестр AI-систем

Вести единый учёт моделей, данных, поставщиков и владельцев как основу для аудита и реагирования.

02Организационная

Процедура приёма AI-инициатив

Каждый новый проект проходит регистрацию и первичную оценку до начала работы с данными.

03Организационная

Назначение владельцев систем

Закрепить за каждой AI-системой ответственного из бизнеса.

04Техническая

Распределение по уровням риска

Присваивать системам уровень риска в реестре и привязывать к нему набор обязательных мер.

05Техническая

Автоматизированный учёт моделей и поставщиков

Связать реестр с системами закупок и развёртывания, чтобы новые записи появлялись без ручного ввода.

06Мониторинг

Периодические подтверждения и выявление неучтённого

Владельцы регулярно подтверждают актуальность записей, а сетевые данные сверяются с реестром.

05
Управленческий контроль

Вопросы, показатели и первые шаги

Вопросы команде и поставщику

  1. Сколько AI-систем у нас работает и у каждой ли есть владелец?
  2. Как новый AI-проект попадает в поле зрения службы безопасности?
  3. Для каких систем проведена оценка воздействия на защиту данных?
  4. Сможем ли мы за день ответить аудитору, какие данные обрабатывает каждая модель?

Показатели контроля

  • Доля AI-систем реестра с назначенным владельцем
  • Число AI-приложений, выявленных вне реестра за период
  • Доля систем с актуальным подтверждением от владельца

Первые 30 дней

  1. Провести опрос подразделений и собрать первичный перечень AI-систем
  2. Утвердить форму заявки на новый AI-проект
  3. Назначить владельцев для систем, работающих с чувствительными данными
06
Проверка в пилоте

Как проверить в пилотном проекте

Проверить видимость реестра AI, владельцев, изменений политик и доказательность принятого решения.

1

Реестр связывает AI-сценарий, владельца, класс данных и развёрнутую модель или поставщика.

2

Изменение политики или конфигурации поставщика имеет проверку и событие аудита.

3

Риск и исключение могут быть показаны владельцу процесса в понятной форме.

Открыть матрицу пилота
07
Контекст рынка

Какие классы решений рассматривать

Управление AI (AI Governance)Аудит теневого AI

Ниже — редакционные профили поставщиков, связанные с доменом угрозы. Это не рейтинг и не подтверждение применимости: заявленные функции следует проверить в вашем пилоте по указанным критериям.

Проверенные источники

Источники и проверка

Сначала — объяснение для русскоязычной команды. Затем — первоисточники, по которым можно проверить границы, методологию и применимость в конкретной архитектуре.

S14 · CISAJoint Guidance on Deploying AI Systems SecurelyБезопасное внедрение AI-систем.S19 · Cloud Security AllianceAI Controls MatrixКонтрольные домены AI security и governance.S20 · ISOISO/IEC 42001 AI management systemСистема менеджмента AI.S21 · European CommissionEU AI Act regulatory frameworkРиск-ориентированный регуляторный фреймворк.