A50 · Модель и цепочка поставки

Подмена в реестре моделей

Злоумышленник изменяет в реестре артефакт модели, её метаданные или указатель развёртывания. В результате промышленная среда начинает работать не с той моделью: с закладкой или непроверенной версией.

Иллюстрация к карточке угрозы «Подмена в реестре моделей»
Отправить с описанием:TelegramWhatsApp
Кратко для руководителя

В чём суть риска

Злоумышленник изменяет в реестре артефакт модели, её метаданные или указатель развёртывания. В результате промышленная среда начинает работать не с той моделью: с закладкой или непроверенной версией.

Реестр моделей определяет, какая версия считается промышленной. Метка промышленной версии переназначается на скомпрометированный артефакт. Конвейер развёртывания автоматически забирает то, на что указывает метка. Граница доверия нарушается, поскольку запись в реестре принимается без проверки подлинности и согласования. Бизнес-процесс продолжает работать, но решения за него принимает подменённая модель.

Связь со стандартамиOWASPLLM03, LLM04MITRE / ATT&CKATLAS: ML Supply ChainNISTNIST AI 100-2: Poisoning
01
Влияние на бизнес

Чем риск оборачивается для компании

Операции

Промышленный сервис работает на непротестированной версии и выдаёт непредсказуемые результаты.

Безопасность

В рабочий контур попадает модель с закладкой.

Право и комплаенс

Невозможно подтвердить, какая версия модели принимала решения в конкретный период.

Где риск наиболее вероятен

Автоматическое развёртывание моделей из реестраОбщий реестр для нескольких командЧастое обновление версий моделейМодели, влияющие на решения по клиентам
02
Зоны ответственности

Кому и что решать

ИТ-директор

Ввести управление изменениями для реестра моделей наравне с промышленным кодом.

Директор по кибербезопасности

Обеспечить подпись артефактов и проверку подписи перед развёртыванием; исключить изменение опубликованных версий.

Владелец бизнес-процесса

Требовать согласования при смене версии модели в своём процессе и знать, какая версия работает.

03
Сигналы для службы мониторинга

Что стоит наблюдать

Признаки сами по себе не доказывают инцидент. Их полезно сопоставлять с учётной записью, версией модели, решением политики, источником контекста и результатом вызова инструмента.

Контрольная сумма развёрнутого артефакта не совпадает с ожидаемой
Версия модели в промышленной среде изменилась без заявки
Развёртывание выполнено из неутверждённой фиксации в репозитории
Метаданные модели изменены вне установленной процедуры
Поведение сервиса изменилось после обновления, которого не было в плане
04
Проектирование защиты

Какие меры создают границу

Меры работают в связке и не перекладывают ответственность на модель: важны границы полномочий, владелец, телеметрия и процедура безопасного отказа.

01Организационная

Управление изменениями реестра

Любая смена промышленной версии проходит заявку и согласование.

02Техническая

Подпись артефактов моделей

Подписывать артефакты при публикации и проверять подпись при развёртывании.

03Техническая

Неизменяемый реестр

Запретить перезапись опубликованных версий и меток, чтобы изменение оставляло след.

04Техническая

Контрольные точки развёртывания

Останавливать конвейер, если артефакт не прошёл проверки и не получил одобрения.

05Мониторинг

Сверка развёрнутых версий

Регулярно сравнивать контрольные суммы работающих моделей с утверждёнными и разбирать расхождения.

05
Управленческий контроль

Вопросы, показатели и первые шаги

Вопросы команде и поставщику

  1. Кто может изменить промышленную версию модели и как это согласуется?
  2. Проверяется ли подлинность модели перед развёртыванием?
  3. Можно ли незаметно перезаписать опубликованную версию?
  4. Сможем ли мы восстановить, какая версия работала в заданный день?

Показатели контроля

  • Доля развёртываний с проверенной подписью артефакта
  • Число изменений промышленной версии без согласованной заявки
  • Число расхождений контрольных сумм, выявленных при сверке

Первые 30 дней

  1. Сократить круг лиц с правом менять промышленные метки в реестре
  2. Включить журналирование всех изменений реестра
  3. Сверить контрольные суммы работающих моделей с утверждёнными версиями
06
Проверка в пилоте

Как проверить в пилотном проекте

Подтвердить происхождение и управляемый путь поставки модели, адаптера, данных и зависимостей.

1

Состав AI-системы связывает артефакт модели, зависимости, набор данных и версию развёртывания.

2

Поступление артефакта из неутверждённого источника проходит контроль до выполнения.

3

Команда демонстрирует проверку, доказательство версии и безопасный откат.

Открыть матрицу пилота
07
Контекст рынка

Какие классы решений рассматривать

Реестр моделейБезопасность жизненного цикла моделей (MLSecOps)Защита цепочки поставок AI

Ниже — редакционные профили поставщиков, связанные с доменом угрозы. Это не рейтинг и не подтверждение применимости: заявленные функции следует проверить в вашем пилоте по указанным критериям.

Проверенные источники

Источники и проверка

Сначала — объяснение для русскоязычной команды. Затем — первоисточники, по которым можно проверить границы, методологию и применимость в конкретной архитектуре.

S04 · OWASPLLM03:2025 Supply ChainЦепочка поставки моделей, данных и зависимостей.S14 · CISAJoint Guidance on Deploying AI Systems SecurelyБезопасное внедрение AI-систем.S39 · ITOREXFoxOps vendor profileAI-Vault и controlled corporate AI infrastructure.